Whirr: hadoop-proxy.sh не работает
Я установил Whirr и создал кластер EC2. Кластер создан правильно, и я могу ssh к узлам и проверить, что Hadoop работает правильно. Однако всякий раз, когда я пытаюсь использовать hadoop-proxy.sh, я получаю следующее сообщение:
bind: Cannot assign requested address
И если я пытаюсь увидеть HDFS в другой оболочке (я ранее настроил переменную HADOOP_CONF_DIR), я получаю следующую ошибку:
13/11/29 05:15:09 WARN conf.Configuration: DEPRECATED: hadoop-site.xml found in the classpath. Usage of hadoop-site.xml is deprecated. Instead use core-site.xml, mapred-site.xml and hdfs-site.xml to override properties of core-default.xml, mapred-default.xml and hdfs-default.xml respectively
Bad connection to FS. command aborted. exception: Server IPC version 7 cannot communicate with client version 4
Я пытался с различными файлами свойств при настройке кластера, используя CDH, не используя его... Но я все еще получаю ту же ошибку. Это файл свойств, который я сейчас использую для запуска кластера с Whirr:
whirr.cluster-name=otrotest
whirr.instance-templates=1 hadoop-namenode+yarn-resourcemanager+mapreduce-historyserver,2 hadoop-datanode+yarn-nodemanager
whirr.provider=aws-ec2
whirr.identity=MY_ID
whirr.credential=MY_SECRET_KEY
whirr.private-key-file=/home/hduser/.ssh/whirr_id_rsa
whirr.public-key-file=/home/hduser/.ssh/whirr_id_rsa.pub
whirr.env.MAPREDUCE_VERSION=2
whirr.env.repo=cdh4
whirr.hadoop.install-function=install_cdh_hadoop
whirr.hadoop.configure-function=configure_cdh_hadoop
whirr.mr_jobhistory.start-function=start_cdh_mr_jobhistory
whirr.yarn.configure-function=configure_cdh_yarn
whirr.yarn.start-function=start_cdh_yarn
whirr.hardware-id=t1.micro
whirr.image-id=us-west-2/ami-6aad335a
whirr.location-id=us-west-2
whirr.java.install-function=install_openjdk
whirr.java.install-function=install_oab_java
Я новичок в Whirr, и мне кажется, что я что-то упустил... Но я не знаю, как это решить. Любая помощь приветствуется. Заранее спасибо.