2017-09-09 32 views
1

当我尝试命令hadoop版本 - 其工作正常。 的Hadoop的NameNode -format命令也工作正常 命令start-dfs.sh - 不工作 我在[本地主机] 本地主机越来越 开始namenodes:不良端口 'localhost' 的 本地主机:不良端口 'localhost' 的 启动辅助名称节点[0.0.0.0]start-dfs.sh - 不工作 - localhost:坏端口'localhost'(Hadoop 2.7.2)

请找到下面的配置文件,谢谢。

芯SITE.XML

<configuration> 
    <property> 
    <name>fs.default.name</name> 
    <value>hdfs://localhost:9000</value> 
    </property> 
</configuration> 

HDFS-site.xml中

<configuration> 
    <property> 
    <name>dfs.replication</name> 
    <value>1</value> 
    </property> 
    <property> 
    <name>dfs.permission</name> 
    <value>false</value> 
    </property> 
    <property> 
    <name>dfs.namenode.name.dir</name> 
    <value>/home/.../hadoop-2.7.2/hadoop2_data/hdfs/namenode</value> 
    </property> 
    <property> 
    <name>dfs.datanode.data.dir</name> 
    <value>/home/.../hadoop-2.7.2/hadoop2_data/hdfs/datanode</value> 
    </property> 
</configuration> 

纱线的site.xml

<configuration> 
    <property> 
    <name>yarn.nodemanager.aux-services</name> 
    <value>mapreduce_shuffle</value> 
    </property> 
    <property> 
    <name>yarn.nodemanager.aux-services.mapreduce.shuffle.class</name> 
    <value>org.apache.hadoop.mapred.ShuffleHandler</value> 
    </property> 
</configuration> 

hadoop-env.sh

export JAVA_HOME=/usr/lib/jvm/java-7-openjdk-amd64 

mapred-site.xml中

<configuration> 
<property> 
<name>mapreduce.framework.name</name> 
<value>yarn</value> 
</property> 
</configuration> 

主机

127.0.0.1 localhost 
127.0.1.1 arun 

# The following lines are desirable for IPv6 capable hosts 
::1  ip6-localhost ip6-loopback 
fe00::0 ip6-localnet 
ff00::0 ip6-mcastprefix 
ff02::1 ip6-allnodes 
ff02::2 ip6-allrouters 

bashrc中

#adding this 

export HADOOP_HOME=/home/arun/my_work/hadoop/hadoop-2.7.2 
export HADOOP_CONF_DIR=/home/arun/my_work/hadoop/hadoop-2.7.2/etc/hadoop 
export HADOOP_MAPRED_HOME=$HADOOP_HOME 
export HADOOP_COMMON_HOME=$HADOOP_HOME 
export HADOOP_HDFS_HOME=$HADOOP_HOME 
export YARN_HOME=$HADOOP_HOME 
export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native 
export HADOOP_OPTS="-Djava.library.path=$HADOOP_HOME/lib" 


export JAVA_HOME=/usr/lib/jvm/java-7-openjdk-amd64 
export PATH="$PATH:/usr/lib/jvm/java-7-openjdk-amd64/bin" 


export PATH=$PATH:$HADOOP_HOME/sbin:$HADOOP_HOME/bin 
export HADOOP_PID_DIR=/home/.../hadoop-2.7.2/hadoop2_data/hdfs/pid 

虽然乳宁命令./sbin/start-dfs.sh得到下面的错误。

Starting namenodes on [localhost] 
localhost: Bad port 'localhost' 
localhost: Bad port 'localhost' 
Starting secondary namenodes [0.0.0.0] 
0.0.0.0: Bad port '0.0.0.0' 

回答

0

同样的问题,我面对,并按照以下步骤固定,

1)SSH本地主机应该得到回应。如果不是,请安装ssh并关闭所有终端,重新启动ssh,然后执行/ etc/sbin中的start-dfs.sh
2)在hadoop-env.sh中检查HADOOP_OPTS = -Djava.net.preferIPv4Stack = true

0

有时hadoop将旧的配置文件保留在缓存中,我多次遇到这些类型的问题。尽管你的配置文件对我来说看起来很好,但我怀疑你最初可能错误地给出了“localhost”作为端口号,并试图启动hdfs。之后,您确实修复了配置并尝试重新启动hdfs,但您的旧配置仍在缓存中。重新启动服务器应该有所帮助。

0

尝试在您的hadoop-env.sh和其他位置检查HADOOP_SSH_OPTS。我有同样的问题,原因是我在HADOOP_SSH_OPTS中有一些未完成的参数,如

export HADOOP_SSH_OPTS="-p" 
相关问题