Hadoop集群如何动态的增删节点

环境:

    集群环境是CentOS6;Hadoop版本为2.7.3

一、增加节点

    1.配置主节点和新增节点的免密登录(ssh信任)

    2.将新的节点的ip(如果在主节点的/etc/hosts中配置了名字也可以用名字替代)加入到Hadoop配置文件中slave文件中

    3.将主节点的Hadoop目录(如果tmp目录不再Hadoop中,需要再把tmp文件复制到新增节点的对应目录中)发送到新增节点中

    4.在新增节点中执行以下代码

sbin>hadoop-daemon.sh start datanode
sbin>yarn-daemon.sh start datanode

    5.在主节点中执行以下代码

bin>hdfs dfsadmin -refreshNodes
sbin>start-balacer.sh

二、删除节点

    1.不超过三个节点可以直接考虑停掉要删除的集群

    2.否则进行下面操作

        1)在主节点上更改副本的配置文件(hdfs-site.xml),适当减小

        2)在hdfs-site.xml中新加一个配置

  • 3
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值