Как обработать данные, которые не разделены по времени в фабрике данных Azure?
Поэтому я пытаюсь использовать Azure Data Factory для замены имеющейся у нас системы SSIS, и у меня возникли некоторые проблемы...
Процесс, которому я хочу следовать, состоит в том, чтобы взять список проектов и список клиентов и создать отчет о клиентах и проектах, которые у нас есть. Эти списки обновляются часто, поэтому я хочу обновлять этот отчет каждый час. Для объединения данных я буду использовать Power BI Pro, поэтому фабрике данных просто нужно загрузить данные в пригодный для использования формат.
Мой источник прямо сейчас - это вызов API, который возвращает список проектов. Однако эти данные вообще не разделены по времени. Я не вижу никакой истории. То же самое касается списка клиентов.
Какой должна быть доступность для моего набора данных?
1 ответ
Вы можете использовать пользовательское действие в ADF для вызова API, который возвращает список проектов. Затем пользовательское действие запишет эти данные в нужном формате в место назначения.
Пример пользовательского действия в ADF: https://azure.microsoft.com/en-us/documentation/articles/data-factory-use-custom-activities/
Частота будет частотой, с которой вы хотите запустить эту операцию.