hadoop 集群的搭建

搁置了半个月,还是想把它搭建起来,记录一下:
1.安装了centos 6,克隆了两个,然后利用crt 进行连接。
2.安装rz,为了上传文件方便。
3.安装jdk,配置环境变量。
4.有一个hadoop集成包,先上传,然后解压安装。
5.集群配置安装
修改五个配置文件:
然后把我们配置完的copy mini2,mini3 (先发安装包,在发配置环境)
目前在hadoop 目录 cd ..
scp -r /root/apps/hadoop/ root@mini2:/root/apps/
scp -r /root/apps/hadoop/ root@mini2:/root/apps/ 之前做了映射
环境变量传过去:
scp -r /etc/profile root@mini2:/etc/
scp -r /etc/profile root@mini3:/etc/
source /etc/profile
hadoop 集群启动
1.namenode 格式化操作:记录数据,初始化创建文件,

cd /root/apps/hadoop/tmp/dfs/name cd current/
hadoop-daemon.sh start namenode 启动namenode
hadoop-daemon.sh start datanode 启动datanode
(这个时候在第二第三台显示创建不成功,没有java环境,所以先装rz ,然后 装jdk ,再输入就有了datanode)
一键式启动:必须把文件配置在一个slaves 路径在/root/apps/hadoop/sbin/slaves转存到 mv ./slaves /root/apps/hadoop/etc/hadoop/
scp -r /root/apps/hadoop/etc/hadoop/slaves root@mini3:/root/apps/hadoop/etc/hadoop/

然后就可以一键脚本启动了 start-dfs.sh stop-dfs.sh

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值