SCDF - объединяет все журналы всех задач составленного средства выполнения задач вместе с журналами SCDF

Предположим, у меня есть SCDF (облачный поток данных Spring 2.5.1), развернутый на локальном компьютере, и я создал 7 задач с именами --formed-task-runner и task2, task3 и т. Д. Я создал составную задачу, которая вызывает задачи одна за другой на основе предпочтений задавать. Я получаю журналы из SCDF в каталоге temp и журналы всех других задач в том же каталоге temp, но в разных папках, но

  1. Я хотел бы собрать все журналы каждой задачи вместе с журналами SCDF в одной папке / файле. Как мы можем это сделать? Я попытался установить LOG_FILE и LOG_LOCATION в качестве аргументов при запуске SCDF, но не смог.
  2. Можем ли мы иметь способ сгенерировать traceId из SCDF, который можно связать с каждым сообщением журнала, сгенерированным из SCDF, а также со всеми задачами, которые составляют задание (с использованием составного средства выполнения задач).
  3. Как мы можем получить значения полей, установленных SCDF в таблице TASK_EXECUTION, например parent_task_id и external_task_id во всех задачах?
  4. Можем ли мы передать некоторые данные из одной задачи (task1) в другую задачу (task2) после того, как задача завершит (task1) свое выполнение и позволит запустить следующую задачу (task2)?
  5. Можем ли мы передать все журналы из задач, а также из SCDF в Kafka Cloud с помощью KafkaAppender?

Пожалуйста, порекомендуйте.

0 ответов

Другие вопросы по тегам