Не удалось запустить демонстрацию ноутбука Zeppelin Spark Streaming - песочница Hortonworks

Я попытался запустить демонстрационную тетрадь, доступную на Zeppelin, в песочнице Hortonworks 2.4 (Notebook с именем twitter), чтобы изучить SparkStreaming. Согласно инструкции на верхней части ноутбука (/* ПЕРЕД НАЧАТЬ....), я вошел в систему Ambari, чтобы изменить конфигурацию службы Yarn.

  • CPU => Container: минимальный размер контейнера (VCores) 4; Максимальный размер контейнера (Vcores): 8

  • объем памяти

  • Узел: 2250 МБ

  • Контейнер: минимальный размер контейнера: 768 МБ; Максимальный размер контейнера: 2250 МБ

Все службы перезапускаются после изменения, но когда я вернулся в Zeppelin, чтобы запустить ноутбук, второй абзац (/* ОБНОВЛЕНИЕ ВАШИХ ПОЛНОМОЧИЙ ДЛЯ TWITTER */....) всегда находился в состоянии "работает", но никогда "не завершался". Все учетные данные Twitter уже обновлены.

P / S: не изменяя конфигурацию YARN, я мог бы запустить второй абзац, но при запуске 3-го, он всегда был "запущен", но никогда "не закончен"

Спасибо за любые предложения

Источник

1 ответ

Если ошибкаError:YarnApplicationState: ACCEPTED: waiting for AM container to be allocated, launched and register

изменить значение yarn.nodemanager.disk-health-checker.max-disk-utilization-per-disk-percentage до 99 и значение yarn maximum-am-resource-percent до 100

Источник
Другие вопросы по тегам