一、服务
YARN:
JobHistory Server
NodeManager
ResourceManager
HDFS:
Balancer
DataNode
NameNode
SecondaryNameNode
二、端口
1、cloudera manager 端口 7180
2、HDFS端口:
NameNode 运行 HDFS 协议的端口
fs.default.name, fs.defaultFS
8020
NameNode Web UI 端口
dfs.http.address, dfs.namenode.http-address
50070
NameNode 服务 RPC 端口
dfs.namenode.servicerpc-address
8022
SecondaryNameNode Web UI 端口
dfs.secondary.http.address, dfs.namenode.secondary.http-address
50090
JournalNode RPC 端口
dfs.journalnode.rpc-address
8485
JournalNode HTTP Web UI 端口
dfs.journalnode.http-address
8480
DataNode 协议端口(IPC)
dfs.datanode.ipc.address
50020
DataNode HTTP Web UI 端口
dfs.datanode.http.address
50075
httpFS简介
1):httpfs是cloudera公司提供的一个hadoop hdfs的一个http接口,通过WebHDFS REST API 可以对hdfs进行读写等访问
2):与WebHDFS的区别是不需要客户端可以访问hadoop集群的每一个节点,通过httpfs可以访问放置在防火墙后面的hadoop集群
3):httpfs是一个Web应用,部署在内嵌的tomcat中
4):用这种方式在数据共享给其他系统时,网络安全上更容易实现
httpFS REST 端口
REST 接口与 HDFS 可连接所通过的端口。如果已为 HttpFS 启用 SSL,则 REST 接口通过 HTTPS 服务,否则通过 HTTP 服务
hdfs.httpfs.http.port
14000
httpFS 管理端口
hdfs.httpfs.admin.port
14001
3、YARN端口
MapReduce JobHistory Server 端口(IPC)
mapreduce.jobhistory.address
10020
MapReduce JobHistory Server 管理接口端口(IPC)
mapreduce.jobhistory.admin.address
10033
MapReduce JobHistory Web 应用程序 HTTP 端口
mapreduce.jobhistory.webapp.address
19888
NodeManager Web 应用程序 HTTP 端口
yarn.nodemanager.webapp.address
8042
NodeManager IPC 地址
yarn.nodemanager.address
8041
ResourceManager 中应用程序管理接口的地址(IPC)
yarn.resourcemanager.address
8032
ResourceManager 中调度器接口地址(IPC)
yarn.resourcemanager.scheduler.address
8030
ResourceManager 中资源追踪器接口地址(IPC)
yarn.resourcemanager.resource-tracker.address
8031
ResourceManager管理接口地址(IPC)
yarn.resourcemanager.admin.address
8033
ResourceManager Web 应用程序 HTTP 端口
yarn.resourcemanager.webapp.address
8088
cm相关服务及端口
最新推荐文章于 2022-07-11 10:05:36 发布