Добавочная загрузка данных SAP в Фабрике данных Azure
Я пытаюсь реализовать конвейер экстрактора в ADF с несколькими действиями копирования данных (источники таблиц SAP ERP). Чтобы сэкономить время обработки, я хотел бы иметь некоторые дельты (дополнительная нагрузка). Каков наилучший способ реализовать это?
На данный момент я пытаюсь просто использовать «параметры таблицы RFC» в каждом действии копирования данных. Однако это кажется довольно ограниченным (разрешены только очень простые запросы). Кроме того, для каждой таблицы SAP ERP требуется отдельный запрос. Я нашел 3 разные ситуации, касающиеся форматов полей таблицы:
- Отметка времени в миллисекундах (например, COVP);
- Отметка времени в формате ГГГГММДДЧЧММСС (например, FAGLFLEXA);
- Дата последнего изменения и время последнего изменения в отдельных полях (например, CATSDB)
Кто-нибудь когда-нибудь пробовал это? Что бы вы посоветовали?
Спасибо!