Linux搭建完全分布式HDFS(CentOS 6.5)

本文档详细介绍了如何在四台CentOS 6.5虚拟机上配置完全分布式的HDFS环境,包括主机名修改、时间同步、JDK安装、Hadoop配置、免密登录设置、HDFS相关配置文件修改、HDFS启动及检查,以及提供了一些注意事项和HDFS常用命令。
摘要由CSDN通过智能技术生成

一、配置环境

1.准备四台虚拟机(CentOS 6.5),为方便后续操作,分别修改主机名为node01,node02,node03,node04
(node01作为NameNode节点,node02作为SecondaryNameNode和DataNode,node03、node04作为DataNode)
2.Hadoop-2.6.5
3.jdk1.8.0_151

二、搭建完全分布式

搭建前请先查看第三步,注意事项。
1.时间同步
将四台虚拟机的时间进行同步。首先以root用户进入。

①	各个节点安装ntp命令yum install ntp
②	上网查找最新的时间服务器ntp1.aliyun.com
③	同步时间ntpdate ntp1.aliyun.com

2、配置免密登录

node01->node01  node01->node02  node01->node03 node01->node04
①	所有节点执行  ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa
②	在node01节点执行,将node01的公钥加入到其他节点的白名单中  ssh-copy-id -i ~/.ssh/id_rsa.pub root@node01
ssh-copy-id -i ~/.ssh/id_rsa.pub root@node02
ssh-copy-id -i ~/.ssh/id_rsa.pub root@node03
ssh-copy-id -i ~/.ssh/id_rsa.pub root@node04

3、在每个节点配置JDK
在每个

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值