Коннектор ADF Dynamics пропускает столбцы с нулевыми верхними строками
У меня есть действие копирования, которое имеет источник crm и место назначения blob, и я заметил, что в экспортированных данных отсутствуют столбцы с нулями в первой тысяче строк. Если я упорядочу источник по одному из этих столбцов по наследству, чтобы сначала получить строки с данными, столбец будет экспортирован. но это не может быть решением, так как я могу упорядочить по всем столбцам в одном прогоне.
Я думаю, что проблема связана с этой информацией, найденной в документации лазурного.
https://docs.microsoft.com/en-us/azure/data-factory/connector-dynamics-crm-office-365
При импорте схемы в пользовательском интерфейсе разработки ADF определяет схему, выбирая верхние строки из результата запроса Dynamics для инициализации списка исходных столбцов, и в этом случае столбцы без значений в верхних строках будут опущены. Такое же поведение применяется к выполнению копирования, если нет явного сопоставления. Вы можете просмотреть и добавить в сопоставление дополнительные столбцы, которые будут учитываться во время выполнения копирования. Я попробовал явное сопоставление, но оно все еще не работает. у моего источника есть XML-запрос выборки в структуре
<fetch version="1.0" output-format="xml-platform" mapping="logical" distinct="false"> <entity name="entityname"> <attribute name="column1" /> <attribute name="column2" /> <attribute name="column3" /></entity> </fetch>
У кого-нибудь есть идеи?
Спасибо