Hadoop集群的各部分一般会用到多个端口,有些事daemon之间进行交互之用,有些事用于RPC访问以及HTTP访问。而随着Hadoop周边组件的增多,完全记不住哪个端口对应哪个应用,特收集记录如此,以便查询。
这里包含使用的组件:HDFS、YARN、HBase、Hive、Zookeeper:
组件 | 节点 | 默认端口 | 配置 | 用途说明 |
HDFS | DateNode | 50010 | dfs.datanode.address | datanode服务端口,用于数据传输 |
HDFS | DateNode | 50075 | dfs.datanode.http.address | http服务的端口 |
HDFS | DateNode | 50475 | dfs.datanode.https.address | http服务的端口 |
HDFS | DateNode | 50020 | dfs.datanode.ipc.address | ipc服务的端口 |
HDFS | NameNode | 50070 | dfs.namenode.http-address | http服务的端口 |
HDFS | NameNode | 50470 | dfs.namenode.https-address | https服务的端口 |
HDFS | NameNode< |