hadoop集群中的各个端口？

Question

我想了解各种守护进程/进程在Hadoop集群中侦听的各种端口。

核心的site.xml

<property> 
      <name>fs.defaultFS</name> 
      <value>hdfs://master.hadoop.cluster:54310</value> 
    </property> 

纱的site.xml

<property> 
      <name>yarn.resourcemanager.address</name> 
      <value>master.hadoop.cluster:8032</value> 
    </property> 

我看到我们还有其他三个端口，它们是：

1）50070 - >要请参阅hdfs GUI
2）8088 - >要查看RM GUI
3）8042 - >不确定哪个GUI我们可以在此端口看到

由于有这么多的端口，我不清楚哪个端口是用于哪个端口。如果我向端口发出HTTP请求，比如说在8032，它说这是Hadoop IPC port。

任何人都可以帮助我理解这一点，我们应该了解的主要端口号是什么，以及哪些进程在这些端口上进行侦听。

Answer 1

fs.defaultFS中定义的端口用于文件系统元数据操作。您不能将其用于访问Web UI。 8042用于NodeManager Web UI，8032用于ResourceManager IPC。

参考

• hdfs-default.xml - 对HDFS相关端口
• yarn-default.xml - 纱线相关端口
• mapred-default.xml - 为JHS相关的端口。