hadoop2和hadoop3端口区别表

最新推荐文章于 2023-04-28 17:22:42 发布
最新推荐文章于 2023-04-28 17:22:42 发布
阅读量630 收藏 3
点赞数
分类专栏： 大数据运维工作经验 文章标签： hadoop 大数据 big data
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_43005694/article/details/125136881
版权

最新的hadoop 3版本端口和2版本在端口尚有所改动，之前没用3版本不知道，运维的过程中才发现有区别，今天做了一下整理，用于记录两者的区别。

分类应用hadoop 2.x端口hadoop 3.x端口
NN portsNameNode80209820
NN https UI504709871
NN http UI500709870
SNN portsSNN http500919869
SNN http UI500909868
DN portsDN IPC500209867
DataNode500109866
DN https UI504759865
DN http UI500759864
可乐大数据
关注
  • 0
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Hadoop2.x与3.x的区别：
sunzhenaiwo的博客
09-18 1783
通用性） 1.精简Hadoop内核，包括剔除过期的API和实现，将默认组件实现替换成最高效的实现（比如将FileOutputCommitter缺省实现换为v2版本，废除hftp转由webhdfs替代，移除Hadoop子实现序列化库org.apache.hadoop.Records。 2.Classpath isolation：以防止不同版本jar包冲突，比如google Guava在混合使用Hadoop、HBase和Spark时，很容易产生冲突。 3.Shell脚本重构： Hadoop 3.0对Had
Hadoop默认端口清单-防火墙申请使用
11-27
Hadoop默认端口清单，自己收集来用，需要开通防火墙的时候使用。
Hadoop 2.x与3.x 22点比较,Hadoop 3.x比2.x的改进
01-11
问题导读 1.Hadoop3.x通过什么方式来容错？ 2.Hadoop3.x存储开销减少了多少？ 3.Hadoop3.x MR API是否兼容hadoop1.x？ 一、目的 在这篇文章中，我们将讨论Hadoop 2.x与Hadoop 3.x之间的比较。 Hadoop3版本中添加了哪些新功能，Hadoop3中兼容的Hadoop 2程序，Hadoop 2和Hadoop 3有什么区别？ 二、Hadoop 2.x与Hadoop 3.x比较 本节将讲述Hadoop 2.x与Hadoop 3.x之间的22个差异。 现在让我们逐一讨论 2.1License Hadoop 2.x – Apache 2.
hadoop2.0 3.0的区别
qq_43668173的博客
08-09 2766
在这篇文章中，我们将讨论Hadoop 2.x与Hadoop 3.x之间的比较。 Hadoop3版本中添加了哪些新功能，Hadoop3中兼容的Hadoop 2程序，Hadoop 2和Hadoop 3有什么区别？ 我们希望Hadoop 2和Hadoop 3之间的这个功能的区别将帮助回答上述问题。 大数据Hadoop2.x与Hadoop3.x相比较有哪些变化 Hadoop 2.x与Hadoop 3.x之间的功能比较 本节将讲述Hadoop 2.x与Hadoop 3.x之间的22个差异。 现在让我们逐一讨论 1.L
Hadoop3与Hadoop2及Spark比较
东语的专栏
02-18 6988
     2017年12月发布的Hadoop 3标志着数据科学新时代的开始。Hadoop框架是整个Hadoop生态系统的核心，其他各种库都依赖它。      在本文中，我们将讨论Hadoop 3与Hadoop 2相比的主要变化。我们还将解释Hadoop和Apache Spark之间的差异，并建议如何...
2021-02-25 hadoop2.x 与3.x 端口对比
celltobig的专栏
02-25 174
【Hadoop】Hadoop 3.x 和2.x主要区别总结
Together
05-29 1977
⌘ 最低Java版本从7升级到8 ⌘ 引入纠删码(Erasure Coding)，未来趋势 主要解决数据量大到一定程度磁盘空间存储能力不足的问题. HDFS中的默认3副本方案在存储空间中具有200%的额外开销。但是，对于I/O活动相对较少冷数据集，在正常操作期间很少访问其他块副本，但仍然会消耗与第一个副本相同的资源量。 纠删码能勾在不到50%数据冗余的情况下提供和3副本相同的容错能力，因此，冷数据可以使用纠删码作为副本机制的改进是自然而然，也是未来的趋势. 本来默认是128M为一个块，纠删码可以将其打散成1
hadoop2和hadoop3的比较
chenzuoli的博客
03-24 2733
hadoop3出来几年了，我们还在用hadoop2吗？
hadoop需要注意几个组件端口
03-07
ambari离线安装hadoop,及其它组件，配置文件中产看相关ip及端口号
Hadoop原理与技术MapReduce实验
05-24
（1）输入start-all.sh启动hadoop相应进程和相关的端口号 （2）打开网站localhost:8088和localhost:50070，查看MapReduce任务启动情况 （3）写wordcount代码并把代码生成jar包 （4）运行命令 （1）：把linus下的文件...
理清Hadoop1.x与Hadoop2.x区别
02-28
理清Hadoop1.x与Hadoop2.x区别，对比分析。 Hadoop是大数据惊世之作，必学的东西，需要知道： 它由哪些部分组成？ 各自的作用是什么？ 如果工作的？
hadoop2.X配置详解和mapreduce详解
10-21
hadoop2.X配置详解和mapreduce详解
hadoop常用端口
03-15
hadoop常用端口设置详解主要包括三大配置文件的端口设置
hadoop3.x与hadoop2.x比较
qq_51903852的博客
10-25 504
一、常用端口号 hadoop3.x HDFS NameNode 内部通讯端口：8020/9000/9820 HDFS NameNode 对用户的查询端口：9870 Yarn查看任务运行情况的：8088 历史服务器：19888 hadoop2.x HDFS NameNode 内部通讯端口：8020/9000 HDFS NameNode 对用户的查询端口：50070 Yarn查看任务运行情况的：8088 历史服务器：19888 二、常用的配置文件 hadoop3.x core-site.xml
大数据学习笔记——hadoop3.x与hadoop2.x的区别
caron的博客
04-13 1224
最低Java版本从7升级到8 引入纠删码(Erasure Coding) 主要解决数据量大到一定程度磁盘空间存储能力不足的问题. HDFS中的默认3副本方案在存储空间中具有200%的额外开销。但是，对于I/O活动相对较少冷数据集，在正常操作期间很少访问其他块副本，但仍然会消耗与第一个副本相同的资源量。 纠删码能勾在不到50%数据冗余的情况下提供和3副本相同的容错能力，因此，使用纠删码作...
Hadoop2.x与Hadoop3.x的默认端口变化
web15286201346的博客
04-18 1552
Namenode 端口: 2.x端口 3.x端口 name desc 50470 9871 dfs.namenode.https-address The namenode secure http server address and port. 50070 9870 dfs.namenode.http-address The address and the base port where the dfs namenode web ui will listen on. 8020 9820 fs.default
八股系列 Hadoop
qq_42456324的博客
04-28 1557
Hadoop3相对于Hadoop2在方面都得到了显著的提升。
hadoop3.X 和 Hadoop 2.X的web端口号访问
Jackson_Father的博客
01-13 1723
web端查看hdfs HDFS===NameNode 9870 YARN===ResourceManager 8088
怎么指定远程Hadoop集群的主机名和端口号
最新发布
06-11
在 Hadoop 中指定远程集群的主机名和端口号需要进行如下配置： 1. 在 Hadoop 根目录下的 /etc/hadoop/core-site.xml 文件中添加如下配置： ```xml <configuration> <property> <name>fs.defaultFS</name> <value>hdfs://<远程主机名>:<端口号></value> </property> </configuration> ``` 其中，<远程主机名> 是指远程 Hadoop 集群的主机名，<端口号> 是指远程 Hadoop 集群的端口号。 2. 在 Hadoop 根目录下的 /etc/hadoop/hdfs-site.xml 文件中添加如下配置： ```xml <configuration> <property> <name>dfs.namenode.rpc-address</name> <value><远程主机名>:<端口号></value> </property> </configuration> ``` 其中，<远程主机名> 是指远程 Hadoop 集群的主机名，<端口号> 是指远程 Hadoop 集群的端口号。 配置完成后，重新启动 Hadoop 集群即可生效。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值