Описание тега azure-data-factory-pipeline
0
ответов
Вставьте GetMetaData ChildItems.name непосредственно в таблицу без использования каких-либо итераторов -Azure Data Factory
Есть ли в фабрике данных Azure метод, позволяющий напрямую вставлять дочерние элементы действий getmetadata непосредственно в таблицу sql без использования каких-либо управляющих действий? Любая помощь будет оценена. С уважением, Сандип
17 июн '20 в 14:44
2
ответа
Фабрика данных Azure - сбой внутренней активности для каждого
Я использовал действие поиска, чтобы передать значение для каждого действия итерации. Выходные значения Lookup генерируются из таблицы SQL. После запуска итерации, если одно из действий внутри for each не удается, для каждого итератора выполняется п…
12 июн '20 в 10:34
0
ответов
Слияние динамической схемы Parquet фабрики данных Azure
У меня есть несколько файлов Parquet в ADLS Gen2, файлы parquet имеют разные столбцы / схемы, но все разные схемы совместимы друг с другом. Когда я создаю набор данных в ADF, он обнаруживает только 26 столбцов из 68 (26 столбцов находятся в каждом ф…
22 июн '20 в 10:37
1
ответ
Набор данных фабрики данных Azure
У меня есть набор данных ADF с DelimitedText. Он разделен вертикальной чертой. Когда я использую это как источник для копирования данных в конвейере и записываю данные файла в таблицу базы данных SQL, пустые значения загружаются как NULL. Как мне эт…
25 июн '20 в 07:37
1
ответ
Действие копирования данных ADF - ссылка на столбец источника из динамического выражения для значения параметра хранимой процедуры приемника
У меня есть конвейер фабрики данных Azure, в котором есть действие копирования данных с приемником хранимых процедур. SP принимает в качестве входных данных параметр табличного типа. Пока все работает нормально. Но теперь этот SP изменился, и мне ну…
03 июл '20 в 00:09
1
ответ
Не удается получить ключ учетной записи хранения. Невозможно прочитать свойство 'slice' со значением NULL в фабрике данных Azure
Когда я пытаюсь создать любую связанную службу в фабрике данных Azure, я получаю сообщение об ошибке. "Невозможно получить ключ учетной записи хранения. Невозможно прочитать свойство 'slice', равное нулю" Прошу вас помочь решить
07 июл '20 в 10:29
1
ответ
Извлечение данных из Azure Devops Services (WIT Analytics) в базу данных SQL Azure с помощью фабрики данных Azure
Мы работаем над большим проектом миграции, который содержит почти 50 тысяч рабочих элементов, включая требования, документы, варианты использования, тестовые примеры, ошибки, проблемы и т. Д. В наших службах Azure Devops. Как разработчик бизнес-анал…
09 июл '20 в 04:24
1
ответ
Счетчик возврата в потоке данных ADF
У меня есть поток данных ADF, который выводит 2 набора значений (имя, местоположение), как показано ниже: Есть ли способ вывести количество имен в каждом месте через поток данных ADF?
09 июл '20 в 01:08
0
ответов
Если условие в потоке данных ADF
У меня есть следующий поток данных: Я пытаюсь сделать следующее: если environment = prod, сохранить данные в Sink если environment! = prod, выполните фильтр и сохраните данные в Sink. с использованием условного разделения. При запуске этого потока д…
24 июл '20 в 05:41
1
ответ
Активность хранимых процедур ADF V2
Я использую действие хранимой процедуры для конвейера ADF v2. Теперь проблема здесь в том, что всякий раз, когда конвейер выходит из строя при работе хранимой процедуры, я не получаю полные сведения об ошибке. Ниже приведен JSON-вывод этой активност…
26 июл '20 в 20:42
1
ответ
Выполнение конвейера - запрос по фабрике не работает с Webhook
Я использую веб-перехватчик azure datafactory, чтобы получить информацию о конвейерных запусках - запрос по фабрике, используя следующую ссылку. POST https://management.azure.com/subscriptions/%7BsubscriptionId%7D/resourceGroups/%7BresourceGroupName…
03 авг '20 в 16:03
1
ответ
Динамическое изменение связанных служб / наборов данных в фабрике данных Azure
Нам нужна возможность выполнять поиск в таблице конфигурации, которая позволит нам узнать сервер и базу данных и позволит нам изменить ее для последующих поисков. Я могу настроить его динамически там, где он запрашивает у меня сервер и базу данных -…
03 авг '20 в 22:17
1
ответ
ADF: динамическое содержимое в параметрах
Я пытаюсь передать текст с динамическим содержимым в качестве параметра в конвейер (выполнить действие конвейера). В качестве очень простого примера я хочу, чтобы входными данными для моего конвейера была отметка времени, utcnow(). Вот мои результат…
04 авг '20 в 02:09
1
ответ
ADF DataFlows - последняя запись в столбце
Приносим извинения, если об этом спрашивали ранее, так как я искал и до сих пор не нашел ничего полезного. Если да, то укажите мне правильное направление. Итак, проблема в том, что у меня есть таблица со столбцами EquipmentId и OperatingHours. Данны…
05 авг '20 в 22:49
1
ответ
Есть ли способ "подождать" завершения задачи "Фабрика данных Azure" перед выполнением следующих шагов Azure Logic Apps?
Попытка загрузить некоторые данные Excel с помощью конвейера ADF через приложения логики. Однако при запуске через приложения логики задача запускается, а затем сразу же переходит к следующему шагу. Ищете решение, в котором следующий шаг ожидает пол…
10 авг '20 в 18:20
1
ответ
Счетчик потока данных фабрики данных Azure отличается
У меня есть один поток данных с несколькими источниками и объединениями, и я хочу создать новый столбец на основе количества, отличного от column1, из строки потока по сравнению с другим источником, например, сравнивая customerId в customers_tables …
11 авг '20 в 02:24
1
ответ
Azure Datafactory не может обрабатывать пустой массив json в большом двоичном объекте
В наборе данных фабрики данных azure с использованием действия копирования для загрузки большого двоичного объекта json в sqldb, когда большой двоичный объект json является пустым массивом "[]", действие копирования застревает с ошибкой. { "err…
13 авг '20 в 17:13
1
ответ
Как создать конвейер фабрики данных Azure и запускать его автоматически всякий раз, когда файл поступает в SFTP?
Я создаю конвейер фабрики данных Azure, где источником является SFTP, а целью - хранилище Azure BLOB-объектов. Файлы могут поступать в любое время, и любое количество файлов может поступать в SFTP ежедневно. Я должен копировать файл из Sftp в хранил…
13 авг '20 в 18:02
0
ответов
Ошибка 403/307 при выполнении конвейера фабрики данных Azure
Нам необходимо реализовать преобразование в Azure при копировании файла из хранилища BLOB-объектов Azure в озеро данных Azure Gen2. В текущей реализации мы пытаемся добиться этого, используя поток данных в фабрике данных. Затем мы встроили блок пото…
03 сен '20 в 19:46
0
ответов
Вставка данных конвейера ADF в Postgres
У меня есть требование вставить данные с SQL-сервера в Azure в Postgres of Azure с помощью конвейера ADF. Я хочу знать, можно ли установить search_path для имени схемы в ADF перед вставкой в целевую таблицу этой схемы в Postgres, если да, то как. …
08 июн '20 в 18:26