HDFS Ports
服务 | 服务说明 | 默认值 | 协议 | 描述 | 是否需要终端用户访问 | 配置参数 |
NameNode WebUI | 主节点主机(NameNode和备份NameNode) | 50070 | http | 查看当前HDFS的状态,浏览文件系统 | 是 | dfs.http.address |
50470 | https | Secure http service | dfs.https.address | |||
NameNode metadata service | 主节点主机(NameNode和备份NameNode) | 8020/9000 | IPC | 文件系统元数据操作 | 是 | fs.default.name |
DataNode | 所有从节点主机 | 50075 | http | DataNode WebUI访问状态、日志等 | 是 | dfs.datanode.http.address |
50475 | https | 安全http服务 | dfs.datanode.https.address | |||
50010 | 数据传输 | dfs.datanode.address | ||||
50020 | IPC | 元数据操作 | No | dfs.datanode.ipc.address | ||
Secondary NameNode | Secondary NameNode 和备份Secondary NameNode | 50090 | http | NameNode元数据的CheckPoint | No | dfs.secondary.http.address |
MapReduce Ports
服务 | 服务说明 | 默认值 | 协议 | 描述 | 是否需要终端用户访问 | 配置参数 |
JobTracker WebUI | 主节点主机(JobTracker节点和任何备份JobTracker节点) | 50030 | http | Web UI for JobTracker | Yes | mapred.job.tracker.http.address |
JobTracker | 主节点主机(JobTracker节点) | 8021 | IPC | 作业提交 | Yes 是(所有需要提交MapReduce作业的客户端,包括Hive, Hive server, Pig) | mapred.job.tracker |
TaskTracker Web UI and Shuffle | 所有从节点主机 | 50060 | http | 用于访问状态、日志等的DataNode Web UI。 | Yes (通常是管理员、开发/支持团队) | mapred.task.tracker.http.address |
History Server WebUI | 51111 | http | Job历史的Web UI | Yes | mapreduce.history.server.http.address |
Hive Ports
服务 | 服务 | 默认值 | 协议 | 描述 | 是否需要终端用户访问 | 配置参数 |
Hive Server2 | Hive Server2 机器(通常是公用机器) | 10000 | thrift | 以编程方式连接到Hive的服务(Thrift/JDBC) | Yes (需要以编程方式或通过使用JDBC的UI SQL工具连接到Hive的客户端) | ENV Variable HIVE_PORT |
Hive Metastore | 9083 | thrift | 用于访问有关Hive表和分区的元数据的服务 | Yes (运行Hive、Pig和潜在的使用HCatalog的M/R作业的客户机) | hive.metastore.uris |
HBase Ports
服务 | 服务说明 | 默认值 | 协议 | 描述 | 是否需要终端用户访问 | 配置参数 |
HMaster | 主节点主机(HBase主节点和任何备份HBase主节点) | 60000 | Yes | hbase.master.port | ||
HMaster Info Web UI | 主节点主机(HBase主节点和备份HBase主节点(如果有)) | 60010 | http | HBase-Master web UI的端口。如果不希望信息服务器运行,则将其设置为-1。 | Yes | hbase.master.info.port |
Region Server | 所有从节点主机 | 60020 | Yes (通常是管理员、开发/支持团队) | hbase.regionserver.port | ||
Region Server | 所有从节点主机 | 60030 | http | Yes (通常是管理员、开发/支持团队) | hbase.regionserver.info.port | |
All ZooKeeper Node hosts | 2888 | 用于 Zookeeper 节点之间通信的端口 | No | hbase.zookeeper.peerport | ||
All ZooKeeper Node hosts | 3888 | 用于 Zookeeper 节点之间通信的端口 | hbase.zookeeper.leaderport | |||
2181 | 来自ZooKeeper的config zoo.cfg。客户端连接的端口。 | hbase.zookeeper.property.clientPort |