本文详细介绍了如何搭建Hadoop的完全分布式集群，包括基本需求设置、Hadoop配置、克隆虚拟机、启动和测试集群，以及解决可能出现的问题。在设置过程中，涉及了JDK和Hadoop的安装，主机间的SSH免密码登录，主机名和域名解析的配置，以及防火墙和SSH无密码登录的管理。在Hadoop配置中，重点讲述了多个配置文件的修改。最后，文章还提供了解决集群启动后守护进程缺失的解决方案。
完全分布式集群(Fully-Distributed Cluster)的原理
Hadoop的守护进程运行在由多台主机搭建的集群上，是真正的生产环境。我们需要在所有的主机上安装JDK和Hadoop，组成相互连通的网络。在主机间设置SSH免密码登录，把各从节点生成的公钥添加到主节点的信任列表。
一、基本需求设置
准备条件
CentOS6.8/6.5
JDK1.8
Hadoop2.7.3
SSH
- 克隆一台已经安装好的客户机（ NAT模式）
查看虚拟机信息
- 切换root用户，修改网卡信息（master)
配置完成运行命令
service network restart
命令如果不成功，重启虚拟机。（最好重启虚拟机）
- 修改主机名和域名解析
（1）修改主机名
（2）绑定主机名和IP
最低0.47元/天 解锁文章
958
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
