Описание тега azure-data-factory

Описание тега Вопросы с тегом
Фабрика данных Microsoft Azure - это облачная служба, используемая для управляемого вызова (оркестрации) других служб Azure с использованием концепции временных интервалов. Фабрики данных в основном разрабатываются с использованием вручную созданного JSON, что обеспечивает инструмент с инструкциями о том, какие действия выполнять. Фабрика данных Azure V2 все еще находится в стадии предварительной версии, но позволяет упростить интеграцию данных с помощью API, а не только файлов JSON.

Фабрика данных Azure - это инструмент с множеством уровней сложности, и часто специалистам по данным, уже работающим с такими инструментами, как SQL Server Integration Services и агент SQL Server, не всегда понятно понимание технологии. Фабрика данных Azure не является ни тем, ни другим и находится отдельно в стеке платформы данных Microsoft как инструмент оркестровки служб. Это не инструмент ETL.

https://azure.microsoft.com/en-gb/services/data-factory/

Этот тег предназначен для поддержки нашего сообщества разработчиков, делясь знаниями и задавая вопросы, чтобы понять концепции фабрики данных Azure. Например; Конвейеры, действия и временные отрезки. Эти термины помогут нам разработать потоки фабрики данных, поддерживающие нашу более широкую архитектуру решения данных.

Управление фабрикой данных Azure также станет очень важным, поскольку мы узнаем, какие атрибуты JSON необходимы и где для более сложных перемещений временных данных с привязкой ко времени. Настроить эти временные интервалы непросто, когда проверка затрагивает наборы данных и свойства активности во время развертывания.

Наконец, рассмотрите возможность использования PowerShell при работе с фабрикой данных Azure. Доступен богатый набор командлетов, предлагающих функции, которые еще не доступны через пользовательский интерфейс портала Azure. См. Ссылку ниже.

https://docs.microsoft.com/en-us/powershell/resourcemanager/azurerm.datafactories/v2.5.0/azurerm.datafactories

Правильное получение этих сценариев PowerShell также будет включено в этот тег после того, как мы введем в действие потоки данных фабрики.

Медленно, но верно Microsoft разрабатывает версию 2 фабрики данных Azure, которая предлагает больше возможностей для лучшей интеграции данных и повышения производительности. Официальную документацию для этой версии можно увидеть здесь: https://docs.microsoft.com/en-us/azure/data-factory/