Отображение потока данных, создающего выходные файлы в корневом каталоге независимо от пути к заданному набору данных
Я пытаюсь разбить файл с данными за месяц на отдельные дневные файлы с помощью потока данных. Я сохраняю имя файла как производный столбец и использую этот столбец как имя файла в настройках приемника, как показано ниже. Имя файла в столбце выглядит как "Транзакции_[дата].csv".
Затем я разбиваю файл на основе этого столбца в optimize -> partition type- key -> Unique value per partition ->key column -> fileName
ПРОБЛЕМА: поток данных работает отлично. Я могу видеть временные файлы в желаемом месте во время выполнения, но после завершения файлы оказываются в корневом местоположении (внутри контейнера), а не внутри желаемой папки.
Обновление: настройки набора данных (сейчас жестко запрограммированы, но будут использоваться параметры набора данных)
