Hadoop集群服役新节点

  1. 修改IP和主机名称
  2. 增加新节点的ssh免密登陆
  3. 删除原来 HDFS 文件系统留存的文件/opt/module/hadoop-2.7.6/data删除原来 HDFS 文件系统留存的文件/opt/module/hadoop-2.7.6/data
  4. 在namenode的etc/hadoop下添加 dfs.hosts文件
    1. vim dfs.hosts
    2. 添加如下主机名称(包含新服役的节点)

              hadoop101

              hadoop102

              hadoop103

              hadoop104

  5. 在namenode的hdfs-site.xml文件添加

    <property>

        <name>dfs.hosts</name>

        <value>/opt/module/hadoop-2.7.2/etc/hadoop/dfs.hosts</value>

    </property>

  6. 刷新namenode节点

    1. hdfs dfsadmin -refreshNodes

  7. 刷新resourcemanager节点

    1. yarn rmadmin -refreshNodes

  8. 单独启动新节点上的datanode和nodemanager进程

    1. hadoop-daemon.sh start datanode

    2. yarn-daemon.sh start nodemanager

  9. 在web UI上进行查看

  10. 使用start-balancer.sh使得集群进行平衡

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值