hadoop2.x 常用端口及定义方法

最新推荐文章于 2024-08-14 18:38:10 发布

该昵称已经被占用

最新推荐文章于 2024-08-14 18:38:10 发布

阅读量6.7k

点赞数

分类专栏： Hadoop学习专辑

本文链接：https://blog.csdn.net/u011414200/article/details/50366406

版权

本文详细列举了Hadoop2.x中HDFS、YARN、HBase、Hive和ZooKeeper等组件的常用端口号，以及各个组件Web UI的HTTP服务，包括日志查看、线程堆栈、Metrics信息等，方便进行集群管理和故障排查。

摘要由CSDN通过智能技术生成

一. 常用端口号

Hadoop 集群的各部分一般都会使用到多个端口，有些是 daemon 之间进行交互之用，有些是用于 RPC 访问以及 HTTP 访问。而随着 Hadoop 周边组件的增多，完全记不住哪个端口对应哪个应用，特收集记录如此，以便查询。

这里包含我们使用到的组件：HDFS, YARN, HBase, Hive, ZooKeeper:

组件	节点	默认端口	配置	用途说明
HDFS	DataNode	50010	dfs.datanode.address	datanode 服务端口，用于数据传输
HDFS	DataNode	50075	dfs.datanode.http.address	http服务的端口
HDFS	DataNode	50475	dfs.datanode.https.address	https服务的端口
HDFS	DataNode	50020	dfs.datanode.ipc.address	ipc服务的端口
HDFS	NameNode	50070	dfs.namenode.http-address	http服务的端口
HDFS	NameNode	50470	dfs.namenode.https-address	https服务的端口
HDFS	NameNode	8020	fs.defaultFS	接收 Client 连接的 RPC 端口，用于获取文件系统 metadata 信息
HDFS	journalnode	8485	dfs.journalnode.rpc-address	RPC服务
HDFS	journalnode	8480	dfs.journalnode.http-address	HTTP服务
HDFS	ZKFC	8019	dfs.ha.zkfc