HDF NIfi - записывает ли Nifi происхождение / данные на узел HDP?

Question

HDF NIfi - записывает ли Nifi происхождение / данные на узел HDP?

Привет

У меня есть кластер HDF с 3 экземплярами Nifi, который запускает задания (Hive/Spark) на кластере HDP. Обычно nifi записывает всю информацию в различные репозитории, доступные на локальной машине.

Мой вопрос: записывает ли nifi какие-либо данные, информацию о происхождении или разливает их на узлы HDP (например, узлы данных в кластере HDP) при доступе к службам HDFS,Hive или Spark?

Спасибо

0

apache-nifi hortonworks-dataflow

Источник

user4456534 11 июн '17 в 21:25

1 ответ

Другие вопросы по тегам apache-nifi hortonworks-dataflow

user5650316 12 июн '17 в 13:05 2017-06-12 13:05 · Answer 1 · 2017-06-12 13:05

Apache NiFi не использует HDFS ни для одного из своих внутренних репозиториев / данных. Единственное взаимодействие между сервисами NiFi и Hadoop будет происходить через специальные процессоры, созданные для взаимодействия с этими сервисами, такие как PutHDFS, PutHiveQL и т. Д.

Данные о происхождении можно вытолкнуть из NiFi с помощью SiteToSiteProvenanceReportingTask, а затем сохранить в любом подходящем месте (HDFS, HBase и т. Д.).