Как увеличить количество заданий MapReduce на WSO2 BAM
Я использую WSO2 BAM 2.4.1 для запуска скриптов Hive Analytic, и по умолчанию он запускает только 1 задание MapReduce, как показано ниже. Нужна помощь о том, как настроить WSO2 BAM для запуска нескольких заданий.
Спасибо!
Всего рабочих мест MapReduce = 1
Запуск работы 1 из 1
Число задач уменьшения установлено на 0, так как нет оператора уменьшения
1 ответ
Автономный WSO2BAM не запускает сервер hadoop внутри, скорее он использует hadoop в качестве библиотеки и выполняет прямой вызов JVM для запуска заданий hadoop. Следовательно, вы не можете иметь фактическое параллельное выполнение заданий, так как многие задания запускаются с автономным BAM. Для этого вам необходимо настроить внешний кластер hadoop и отправить задание удаленно в кластер. Смотрите здесь для конфигурации кластера hadoop.