#amazon-web-services #azure #google-cloud-platform #azure-data-factory #azure-data-factory-pipeline
#amazon-веб-сервисы #azure #google-облачная платформа #azure-data-factory
Вопрос:
Я совершенно новичок в облаке в любом случае. Я начал несколько недель назад с Azure cloud, и мы настраиваем проект с использованием множества различных продуктов Azure. На данный момент мы думаем о настройке проекта таким образом, чтобы мы не попали в ловушку Microsoft и могли переключиться на GCP или AWS. Для большинства продуктов, которые мы используем, я нашел похожие в других облаках, но мне интересно, есть ли что-то вроде Azure Data Factory в AWS или CGP? Я не смог найти что-то в своем первом исследовании Google.
Наилучшие пожелания и спасибо за вашу помощь
Ответ №1:
Если вам нужно хорошее сравнение между различными облаками (Azure, AWS, Google, Oracle и Alibaba), воспользуйтесь этим сайтом:http://comparecloud.in
Пример для вашего случая с «Azure Data Factory»:
Ответ №2:
Вы могли бы использовать сочетание этих продуктов:
- [Объединение облачных данных]https://cloud.google.com/composer
- Облачная подготовка данных: это версия Trifacta. Подходит для очистки данных.
Если вам нужно организовать рабочие процессы / etl, Cloud composer сделает это за вас. Это управляемый Apache Airflow. Это означает, что он будет обрабатывать сложные зависимости.
Если вам просто нужно запускать задание на ежедневной основе, Cloud Scheduler — ваш друг.
Ответ №3:
Вы можете проверить ссылку здесь, которая является отображением облачных сервисов