Описание тега copy-activity
1
ответ
Фабрика данных Azure -> Копировать из SQL в хранилище таблиц (логическое сопоставление)
Я добавляю конвейер в фабрику данных Azure для переноса данных из SQL в хранилище таблиц. Кажется, все работает нормально, однако я заметил, что битовый столбец не получает копии, как ожидалось. У меня есть поле "IsMinor" в базе данных SQL. Если я н…
12 фев '20 в 17:19
0
ответов
Коннектор ADF Dynamics пропускает столбцы с нулевыми верхними строками
У меня есть действие копирования, которое имеет источник crm и место назначения blob, и я заметил, что в экспортированных данных отсутствуют столбцы с нулями в первой тысяче строк. Если я упорядочу источник по одному из этих столбцов по наследству, …
09 мар '20 в 20:02
1
ответ
При копировании фабрики данных Azure отказоустойчивость не применяется для проверки ограничения.
Я хочу скопировать данные из одной таблицы в другую в фабрике данных Azure, используя действие копирования. В источнике нет ограничений, но на приемнике у меня есть ограничение проверки на столбец возраста ---> проверка (возраст>=18). Я заметил, что…
19 мар '20 в 21:09
1
ответ
Фабрика данных Azure копирует задачу OnPremises DB в базу данных Azure
Я пытаюсь скопировать таблицы данных из локального MSSQL в таблицы SQL Azure. Моя настройка для параметра "Таблица" на вкладке "Приемник" действия "Копирование" - установить "Автоматическое создание таблицы" (при этом автоматически создается таблица…
03 апр '20 в 04:37
3
ответа
Проблема с escape-символом и кавычками фабрики данных Azure - действие копирования
У меня есть конвейеры ADF, экспортирующие (через активность копирования) данные из базы данных SQL Azure в озеро данных (ADLS2), а затем оттуда в другую базу данных SQL Azure. Все работало нормально, пока не появились некоторые персонажи. Вот как вы…
04 май '20 в 16:26
1
ответ
Как мы можем получить доступ к столбцу в динамическом выражении сценария предварительного копирования в активности копирования adf?
Как мы можем получить доступ к столбцу в динамическом выражении сценария предварительного копирования в активности копирования adf? Поскольку мне нужно обрезать) подстроку лишних символов, поступающих из источника, перед загрузкой в sql db. Может …
05 май '20 в 22:23
2
ответа
Как при создании действия копирования в конвейере фабрики данных Azure сопоставить лист CSV с 5 столбцами с листом CSV с 20 столбцами?
Итак, у меня есть входной CSV-лист, который я хочу скопировать в выходной CSV-лист. Выходной CSV-лист содержит все столбцы входного листа, а также множество других столбцов. (Я буду копировать данные в те из других листов ввода позже.) Когда я запус…
09 апр '20 в 00:21
0
ответов
Параметр SapHanaDynamicRange Partition в действии копирования фабрики данных Azure
Мне нужно скопировать данные из представления SAP HANA в Azure Datalake. Поскольку эти данные огромны (около 3 миллиардов записей), я использую опцию динамического разделения в источнике копирования. Настройка My Source: "source": { "type": "SapHana…
07 май '20 в 15:38
0
ответов
Фабрика данных Azure, использующая CopyActivity, не использует блокировку массового обновления (BU)
Я выполняю тест, используя действие копирования, где источником является файл размером 2 ГБ с примерно 10 миллионами строк, идущих в пустую таблицу без индексов. Когда я смотрю на блокировки в этой таблице, используя приведенный ниже запрос во время…
28 июл '20 в 19:12
1
ответ
Создавать и сохранять новый файл в хранилище BLOB-объектов при каждом запуске конвейера
Можно ли создать файл CSV в хранилище BLOB-объектов для каждого запуска конвейера в фабрике данных Azure с настраиваемым именем? Каждый csv должен иметь дату запуска (которую я могу легко установить с помощью переменной) в своем имени, поскольку в н…
03 мар '20 в 10:58
3
ответа
Как вызвать хранимую процедуру Oracle из фабрики данных Azure v2
Мое требование - скопировать данные из Oracle на SQL Server. Перед копированием из базы данных Oracle мне нужно обновить таблицу Oracle с помощью процедуры, которая имеет некоторую логику. Как выполнить хранимую процедуру Oracle из фабрики данных Az…
01 авг '20 в 13:56
1
ответ
Автоматическое изменение даты каждый месяц в операции копирования в фабрике данных Azure для копирования данных из SAP HANA в SQLDB Azure
Я работаю в фабрике данных Azure (ADF) для копирования данных из SAP HANA в SQLDB Azure . Я использую "копирование" в ADF для выполнения этой операции с помощью SQL-запроса для запроса таблицы в HANA и погружения ее в SQLDB. Запрос содержитreporting…
25 авг '20 в 07:03
1
ответ
Обработка исключений записей об ошибках операций копирования фабрики данных Azure
В copy-activity есть функция в настройках, где мы можем указать системе, что делать в случае ошибки. Доступно 3 варианта. Прервать при первой записи ошибки, пропустить все строки ошибок, пропустить строки ошибок и записать их. Можем ли мы каким-то о…
05 апр '20 в 17:51
1
ответ
Действие копирования фабрики данных Azure - добавление в файл JSON
Я работаю над созданием конвейера фабрики данных, который копирует данные из конечной точки REST API в хранилище BLOB-объектов Azure. API имеет ограничение на возврат только 1000 записей за раз, поэтому я встроил в свой конвейер цикл, который будет …
24 авг '20 в 19:07
1
ответ
Как предотвратить копирование пустого файла через фабрику данных Azure?
Я новичок в лазурной фабрике данных и работаю над копированием. Я хочу предотвратить запуск копирования для пустых файлов. кто-нибудь может мне с этим помочь? Кроме того, что произойдет, если при копировании обнаружится пустой файл? будет ли ошибка?
30 окт '20 в 15:09
0
ответов
Как вы параметризуете конвейер копирования ADF для задним числом и обратного заполнения с помощью триггера переворачивающегося окна
Итак, я новичок в ADF. Я создал конвейер копирования, который использует метку времени в имени файла для создания раздела даты в моем приемнике ADLSgen2. К сожалению, я не могу прикрепить изображения. Последовательность такая: Действие GetMetadata (…
02 дек '20 в 10:26
2
ответа
Динамическое получение пути к файлу из выходных данных действия копирования фабрики данных Azure
Есть ли способ получить путь к файлу из выходных данных операции копирования фабрики данных Azure. В моем конвейере есть еще одно действие, для которого я хочу использовать путь к выходному файлу. Я бы также добавил путь к файлу в качестве значения …
19 окт '20 в 19:49
0
ответов
Как разобрать timestamp_micro в azure sql при использовании действия копирования для обработки данных формата паркета в таблицу SQL
Я использую копирование. У меня есть паркетный файл, и мне нужно загрузить его в выделенный пул SQL Azure. Есть одно поле LoadTime, которое хранится в формате Timestamp_micro в паркетном файле. При загрузке данных в пул azure sql с помощью операции …
19 фев '21 в 23:23
1
ответ
Копирование активности автоматически создает столбцы nvarchar(max)
У меня есть действие копирования фабрики данных Azure, которое загружает паркетные файлы в Azure Synapse. Раковина настроена, как показано ниже: После завершения загрузки данных у меня была такая структура промежуточной таблицы: Затем я создаю време…
10 фев '21 в 19:30
1
ответ
Как мы можем исключить ненужные строки из файла Excel при загрузке данных с помощью операции копирования в ADF
У меня есть полуструктурированный файл Excel. В таблице есть данные, но в некоторых строках есть разделители, которые следует игнорировать. Обработка данных должна начинаться с заголовков столбцов (Col1, col2 ....) и обрабатывать только строки с фак…
18 фев '21 в 21:09