以hostname启动hadoop各个组件

最新推荐文章于 2021-12-10 17:43:46 发布

钻石大门

最新推荐文章于 2021-12-10 17:43:46 发布

阅读量175

点赞数

分类专栏： Hadoop

本文链接：https://blog.csdn.net/weixin_41158277/article/details/94708763

版权

在Hadoop伪分布式部署中，通常不使用IP而是用hostname启动组件以避免IP变动带来的问题。本文介绍了如何从localhost切换到hostname启动，包括在企业环境中配置hosts文件的重要性，以及针对内网服务器和云服务器的不同配置方法。最后强调了hosts文件中保留内网IP和hostname映射的必要性。

摘要由CSDN通过智能技术生成

背景
在Hadoop伪分布式部署中我们没有设置相关参数使得NN和DN使用的是localhost启动得，而SNN是0.0.0.0启动的。在真正生产中，不可能使用IP来启动相关组件得，因为IP很有可能会变动，也很可能你得修改大量代码中得IP。因此，使用hostname来启动各组件是最稳妥得。

1.以localhost启动

[hadoop@10-9-15-140 hadoop-2.6.0-cdh5.7.0]$ sbin/start-dfs.sh 
19/07/05 07:44:58 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable
Starting namenodes on [localhost]
localhost: starting namenode, logging to /home/hadoop/app/hadoop-2.6.0-cdh5.7.0/logs/hadoop-hadoop-namenode-10-9-15-140.out
localhost: starting datanode, logging to /home/hadoop/app/hadoop-2.6.0-cdh5.7.0/logs/hadoop-hadoop-datanode-10-9-15-140.out
Starting secondary namenodes [0.0.0.0]
0.0.0.0: starting secondarynamenode, logging to /home/hadoop/app/hadoop-2.6.0-cdh5.7.0/logs/hadoop-hadoop-secondarynamenode-10-9-15-140.out
19/07/05 07:45:14 WARN util.NativeCodeLoade