Доступен ли сервис Apache Metron MAAS через YARN и Zookeeper?
Я создаю службу машинного обучения Stellar MAAS для обработки некоторых данных. Меня беспокоит доступность развернутой службы.
MAAS deploy .sh позволяет мне определять выделенную память, а также работающие контейнеры. Однако после этого кажется, что обо всем остальном позаботятся YARN и Zookeeper... Это то, что меня беспокоит, так как я не очень хорошо понимаю, что происходит.
В частности, если один экземпляр службы берет много данных из конвейера, как YARN или Zookeeper передает нагрузку? при каких условиях это произойдет, если это произойдет?
Кроме того, из любопытства я использую Apache Metron MAAS, поскольку это, кажется, способ интеграции моделей машинного обучения в топологии. Есть другой способ сделать это?
Спасибо,
J