Data-node Alive от ambari не стабилен

Question

У нас есть кластерная версия ambari - 2.6.1 и hadoop версия 2.6.4

количество датоде - 10

из панели инструментов ambari мы видим окно, которое показывает следующее:

   DataNodes Live

   9/10

но через несколько минут все датододы живы как:

   DataNodes Live

   10/10

и снова через несколько минут мы снова видим

   DataNodes Live

   9/10

кажется, что namenode не получил сообщение сердцебиения от датоде в течение более интервала, тогда датодель будет помечен и как "мертвый"

мы проверяем следующее:

1. разрешение хоста - ОК ( DNS в порядке)
2. Разрешение IP - в порядке ( DNS в порядке)
3. Проверка службы HDFS прошла успешно
4. каждый датодан работает (ps -ef | grep datanode | grep -v grep)
5. netstat -anp | grep '0.0.0.0:50010' порт в порядке
6. systemctl status firewalld.service (брандмауэр выключен, как и должно быть)
7. Статус sestatus SELinux (отключен)
8. MTU настроен на 9000 (и мы проверяем, что 9000 установлен правильно на всех компонентах

что мы можем сделать еще для того, чтобы проверить, почему DataNode жива не стабильна?

Answer 1

С тех пор мы увеличили размер кучи узла данных со значения по умолчанию - с 2G до 6G, теперь узел данных из панели мониторинга ambari стабилен