apache Hadoop-2.0.0 установка версии aplha в полном кластере с использованием fedration
Я успешно установил стабильную версию hadoop. но запутался при установке версии hadoop -2.0.0.
Я хочу установить hadoop-2.0.0-alpha на два узла, используя федерацию на обеих машинах. RSI-1, RSI-2 являются имена хостов.
какими должны быть значения ниже свойств для реализации федерации. Обе машины также используются для датододов.
fs.defaulFS dfs.federation.nameservices dfs.namenode.name.dir dfs.datanode.data.dir yarn.nodemanager.localizer.address yarn.resourcemanager.resource-tracker.address yarn.resourcemanager.scheduler.address yarn.resourcemanager.address
Еще один момент, в стабильной версии hadoop у меня есть файлы конфигурации в папке conf в каталоге установки.
Но в версии 2.0.0-aplha есть каталог etc/hadoop, в котором нет mapred-site.xml, hadoop-env.sh. мне нужно скопировать папку conf в папке share в каталог hadoop-home? или мне нужно скопировать эти файлы из общей папки в каталог etc/hadoop?
С уважением, Рашми
1 ответ
Вы можете запустить hadoop-setup-conf.sh в папке sbin. Он инструктирует вас шаг за шагом, чтобы настроить. Пожалуйста, помните, когда он просит ввести путь к каталогу, вы должны использовать полную ссылку, например, когда он запрашивает каталог conf, вы должны ввести /home/user/Documents/hadoop-2.0.0/etc/hadoop После завершения, не забудьте проверьте каждый файл конфигурации в etc / hadoop. По своему опыту я изменил переменную JAVA_HOME в hadoop-env.sh и некоторые свойства в core-site.xml, mapred-site.xml. С уважением