ETL с использованием Azure Data Factory v2

Я просто хочу спросить, какой правильный подход и примеры компонентов будут использоваться при выполнении ETL и при использовании Azure Data Factory v2. Будет ли по-прежнему необходимо использовать SSIS или Azure Data Factory сможет обрабатывать все процессы в конвейерах, которые будут использоваться для решения ETL?

Спасибо за ответы всем.

2 ответа

Ответ на ваш вопрос будет конкретным для ваших обстоятельств. Azure Data Factory - это оркестровщик. Как таковой, он не "делает" ETL*, скорее, он управляет другими сервисами для выполнения работы. Следовательно, работниками могут быть службы SSIS, хранимые процедуры, сценарии U-SQL, пакетная служба Azure или любое количество доступных типов действий. Таким образом, вам не нужен SSIS, но вы можете использовать его, если он имеет смысл в вашем сценарии.

* Исключением является операция копирования ADF, которая позволит вам указать источник и приемник и переместить данные из одного в другое.

Если вы уже знакомы с SSIS/ у вас есть существующие ETL-пакеты SSIS, вы можете просто поднять и переместить их в SSIS в ADF (среда интеграции Azure-SSIS). Если вы не хотите использовать SSIS, функция ADL ETL/ потока данных будет введена в ближайшее время и в настоящее время находится в режиме предварительного просмотра.

Другие вопросы по тегам