Предоставляет ли веб-интерфейс Ambari в Azure информацию, подсказывающую, как масштабировать

Question

Переведено в AZure Cloud

Пакетная обработка будет выполняться ежедневно и должна: ✑ масштабироваться для минимизации затрат ✑ контролироваться на предмет производительности кластера

Dose Ambari Web UI будет отслеживать кластеры и предоставлять информацию, подсказывающую, как масштабировать?

Рекомендуется ли инструмент Ambari (или) Мне нужно вместо использования инструмента Ambari использовать "Azure Log Analytics" и "решения для управления кластером HDInsight".

Запуталась, нужны пояснения.

Answer 1

Вы можете использовать бесплатную функцию автомасштабирования Azure HDInsight, которая может автоматически увеличивать или уменьшать количество рабочих узлов в вашем кластере на основе ранее установленных критериев. Вы устанавливаете минимальное и максимальное количество узлов во время создания кластера, устанавливаете критерии масштабирования с использованием дневного расписания или определенных показателей производительности, а платформа HDInsight делает все остальное.

Как это работает?

Функция автомасштабирования использует два типа условий для запуска событий масштабирования: пороговые значения для различных показателей производительности кластера (называемые масштабированием на основе нагрузки) и триггеры на основе времени (называемые масштабированием на основе расписания). Масштабирование на основе нагрузки изменяет количество узлов в кластере в пределах установленного вами диапазона, чтобы обеспечить оптимальное использование ЦП и минимизировать эксплуатационные расходы. Масштабирование на основе расписания изменяет количество узлов в кластере в зависимости от операций, которые вы связываете с определенными датами и временем.

Автоматическое масштабирование - на основе нагрузки:

Автоматическое масштабирование - по расписанию:

Ссылка: Автоматическое масштабирование кластеров Azure HDInsight