CDH集群对外需要开放的端口整理

最新推荐文章于 2024-07-24 17:25:05 发布
最新推荐文章于 2024-07-24 17:25:05 发布
阅读量1.2w 收藏 15
点赞数 1
分类专栏： cdh 文章标签： CDH 集群 开放
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u012551524/article/details/78887094
版权

一个CDH集群对外开放的端口有哪些？哪些是必须对外开放的端口？那些是按需开放的？哪些是生产上线是需关闭的？下面是一些初步的接口整理：

 Service

Port

　

REMARK

HOSTNAME

Admin Console 的 HTTP 端口

7180

对外／对内


Spark-Prod-1

Zookeeper Client

2181

对外／对内


Spark-Prod-1,Spark-Prod-2,Spark-Prod-3

ResourceManager Web 应用程序 HTTP 端口

8088

对外／对内


Spark-Prod-1

mapreduce.jobhistory.webapp.address

19888

对外／对内


Spark-Prod-1

spark.history.ui.port

18088

对外／对内


Spark-Prod-2





Hue HTTP 端口

8888

对外／对内


Spark-Prod-1

HBase Master 端口

60000

对外／对内


Spark-Prod-1

HBase Master Web UI 端口

60010

对外／对内


Spark-Prod-1

HBase Region Server 端口

60020

对外／对内     


SparkProd-1,SparkProd-2,SparkProd-3

HBase Region Server Web UI 端口

60030

对外／对内


Spark-Prod-1





备注    其中2181、6000、60020端口上线前开放即可，正式运行后可关闭 如果有用到Hbase的Thrift服务，这个端口开放，比如说你的hbase有对外的服务，当然这些只是只是一些常用，其它特殊服务因项目而异






TracyGao01
关注
专栏目录
126.在CDH中用Java API访问Kudu
大勇若怯任卷舒
09-28 1142
【代码】126.在CDH中用Java API访问Kudu。
CDH集群常用通信端口汇总
magicchu的博客
10-30 2680
Hadoop: 50070：HDFS WEB UI端口 8020 ： 高可用的HDFS RPC端口 9000 ： 非高可用的HDFS RPC端口 8088 ： Yarn 的WEB UI 接口 8485 ： JournalNode 的RPC端口 8019 ： ZKFC端口 19888：jobhistory WEB UI端口 Zookeeper: 2181 ： 客户端连接zookeeper的端口 2888 ： zookeeper集群内通讯使用，Leader监听此端口 3888 ： zookeep
Centos7 CDH5.14.2 Phoenix集群防火墙开放端口列表
Alderaan的博客
08-09 371
【代码】Centos7 CDH5.14.2 Phoenix集群开放端口。
大数据平台CDH、HDP、CDP的区别
最新发布
hxsln11的博客
07-24 1215
部署一套大数据架构是相当麻烦的事情，各种组件、服务配置相当多而杂，由此诞生了能简化各种服务部署和配置的的工具，也就是大数据平台框架。
CDH组件目录\主机资源分配\端口
weixin_30735391的博客
08-30 305
目录:/var/log/cloudera-scm-installer : 安装日志目录。/var/log/* : 相关日志文件（相关服务的及CM的）。/usr/share/cmf/ : 程序安装目录。/usr/lib64/cmf/ : Agent程序代码。/var/lib/cloudera-scm-server-db/data : 内嵌数据库目录。/usr/bin/postgres : 内嵌数据库...
cdh组件之间的端口
weixin_45068675的博客
02-24 838
cdh各组件之间端口
常见端口号用途说明
chuangquan2683的博客
02-16 933
　端口号的范围是从1～65535。其中1～1024是被RFC 3232规定好了的，被称作“众所周知的端口”(Well Known Ports)；从1025～65535的端口被称为动态端口（Dynamic Ports），可用来建立与其它主机的会话，也可由用户自定义用途。 一些常...
CDH集群通信端口汇总
汉子一枚
07-21 728
hdfs 50070 ：HDFS namenode http address 50075 ：HDFS datanode http address 50090 ：HDFS secondary namenode http address 8485 ： JournalNode 的RPC端口 8020 ： namenode节点active状态下的端口号 14000 ：httpFS http 访问端口 YARN: 8088 ： Yarn 的WEB UI 接口 8042 ： nodemanager webapp
CDH+集群安全启动和关闭.doc
03-11
### CDH集群安全启动与关闭知识点详解 #### 一、CDH集群简介 Cloudera Distribution Including Apache Hadoop (CDH) 是一个基于Apache Hadoop的企业级大数据平台，由Cloudera公司提供支持和服务。CDH集成了众多...
CDH集群搭建
xu2618的专栏
06-27 527
参考图文教程http://blog.csdn.net/qq_23660243/article/details/60870527 配置同步时间服务器部分不是很确定 配置网卡 ip add vi /etc/sysconfig/network-scripts/ifcfg-eno16777736 BOOTPROTO=static IPADDR=192.168.190.13 GATEWAY=...
CDH集群重启
善皮之的博客
03-14 1869
重启CDH集群 首先在CDH集群的7180的端口，将cloudera的监控服务和整个集群都停掉，然后切换到命令行中，手动停止cloudera-scm-agent角色和cloudera-scm-server角色 停掉集群 停掉监控的服务 在所有的集群节点上面执行以下命令（以下目录是我这边的环境，请对应自己的安装目录自行修改） cd /opt/cloudera-manager/cm-5.10....
CDH组件对应使用的端口（超全！！）
东城庞太师
07-22 2731
在下表中，每个端口的“访问要求”列通常是“内部”或“外部”。在此上下文中，“内部”表示端口仅用于组件之间的通信;“外部”表示该端口可用于内部或外部通信。 Component Service Qualifier Port Access Requirement Configuration Comment Hadoop HDFS DataNode 　 50010 External dfs.datanode.address DataN..
CDH-集群部署
L先生
12-07 2221
这里写目录标题一、前期准备1、集群准备1.1 准备三台设备1.2 修改三台设备的主机名1.3 修改IP地址（其他两台设备同时设置）2、系统环境搭建2.1 修改hosts域名映射2.1 免密登录2.3 防火墙、selinux关闭2.4 安装JDK2.5 安装NTP(只需要在cdh1)2.6 修改系统参数（cdh1）2.7 安装httpd3、下载第三方依赖包（每台都装）4、安装MySQL（cdh3）4.1首先查看自己的集群中是否安装mysql数据库4.2 依次安装4.3 进入mysql数据库![在这里插入图片描
CDH 组件使用的端口
chenzl的专栏
10-30 3309
所有端口都是使用TCP 访问要求: Internal(内部)用于组件间通信,External(外部)可用于组件间通信或用户访问; Hadoop 组件 服务 端口 访问要求 配置项 Qualifier HDFS DataNode 50010 外部 dfs.datanode.address 1004 外部 dfs.datanode.address Secure 500...
通过接口获取CDH服务器信息,cdh节点不能选择 无法纳管全部的节点的一个bug
weixin_29137997的博客
08-12 375
梦飞科技 > 帮助中心 > 服务器相关 > cdh节点不能选择 无法纳管全部的节点的一个bugcdh节点不能选择 无法纳管全部的节点的一个bug发布时间：2018-02-11 16:01来源:未知 作者:李春艳 点击:次问题描述：使用CDH 5.2版本安装时，agent节点有12个。按照安装说明，在各个节点启动cm-agent之后，发现只有6个节点能被纳管。其它的节点总是无法加入...
CDH-Cloudera Manager API 详解
zcs2312852665的博客
01-12 1512
Cloudera Manager是一个用于管理和监控Hadoop集群的强大工具。它提供了一套REST API，使用户能够通过编程方式与Cloudera Manager进行交互，并执行各种操作，如创建集群、添加服务、配置角色等。
Windows Kerberos客户端配置并访问CDH
大数据指北
01-04 4505
https://forum.huawei.com/enterprise/zh/thread-337775.html 最近被安排做java本地访问带认证的CDH集群，网上查了各种博客，试了各种方法都无法登录上。最终发现是端口问题，因为kdc默认端口是88，所以必须给88端口为UDP协议   使用API访问开启安全Kerberos的Hdfs hadoop集群(cdh集群)在开启kerberos安...
ATTCK实战系列——红队实战(三)
qq_51478862的博客
07-12 1545
一个开源的内网靶场通关笔记。ATT&CK实战系列——红队实战（三）
大数据常见端口汇总
蔡政洁的博客
10-08 1187
大数据常见端口汇总 Hadoop： 50070：Hadoop Namenode UI端口 50090：Hadoop SecondaryNamenode 端口 8020 ： 高可用的HDFS RPC端口 9000 ： 非高可用的HDFS RPC端口 8088 ： Yarn 的WEB UI 接口 8485 ： JournalNode 的RPC端口 8019 ： ZKFC端口 Zookeeper： 2181 ： 客户端连接zookeeper的端口 2888 ： zookeeper集群内通讯使用，Leade
那CDH集群中怎么查看impala的端口号是不是21000呢
05-30
在 CDH 集群中，可以通过以下方式来查看 Impala 的端口号： 1. 登录到 Impala 所在的节点上。 2. 执行以下命令查看 Impala daemon 进程的启动参数： ``` ps aux | grep impalad ``` 这个命令会列出所有正在运行的 Impala daemon 进程，并显示它们的启动参数。在启动参数中，可以找到一个名为 `-beeswax_port` 的参数，它指定了 Impala Shell 所连接的端口号。如果没有指定该参数，则使用默认的 21000 端口。 ``` /usr/bin/impalad -log_dir=/var/log/impalad -flagfile=/etc/impala/conf.dist/impalad_flags.conf -beeswax_port=21000 ``` 例如，在上面的启动参数中，Impala daemon 进程使用的端口号为 21000。 3. 如果无法通过上述方法查看 Impala 的启动参数，也可以查看 Impala 的配置文件。在 CDH 中，Impala 的配置文件通常位于 `/etc/impala/conf.dist/` 目录下。可以使用以下命令查看该目录下的配置文件列表： ``` ls -l /etc/impala/conf.dist/ ``` 在目录中找到一个名为 `impala-conf.xml` 的文件，这是 Impala 的主配置文件。可以使用文本编辑器打开该文件，查找 `beeswax_port` 参数，即可确定 Impala 所使用的端口号。 ``` <property> <name>beeswax_port</name> <value>21000</value> </property> ``` 例如，在上面的配置中，Impala 的端口号为 21000。
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值