Нужно ли форматировать датодель для файловой системы HDFS или нам нужно только отформатировать наменоде
При настройке псевдо или полного кластера, нам нужно отформатировать узел данных для установки файловой системы HDFS или нам нужно только отформатировать namenode.
Я спрашиваю об этом, потому что я читал это во многих блогах о том, что HDFS хранит данные в последовательном порядке на жестком диске, и это абстрактный слой, который хранит данные в больших блоках, а не в хранилище по умолчанию для размера файлов, предоставляемого файловой системой хоста.
Если мы не форматируем датодан, то мощная функция HDFS приходит в упадок.
1 ответ
Форматирование и монтирование жестких дисков не имеет прямого отношения к форматированию HDFS. Концептуально идея "формирования" одинакова. Но эти две задачи полностью разделены без прямой связи.
Команда hadoop format не форматирует и не монтирует жесткие диски. Жесткие диски уже должны быть отформатированы и смонтированы. Когда вы запускаете команду форматирования для HDFS, он подготавливает файл fsimage NameNode, чтобы он знал, где все блоки хранения находятся на дисках с данными.