hadoop-hdfs(yarn)之节点的服役和退役

本文介绍了Hadoop-HDFS和YARN中节点的服役和退役步骤。服役包括在dfs.include文件中添加节点、配置hdfs-site.xml和yarn-site.xml,刷新节点,启动新节点的服务。退役涉及将节点添加到黑名单,配置排除文件,刷新节点,数据转移完成后从白名单和slaves文件中移除节点。
摘要由CSDN通过智能技术生成

本人的nn为s201,其余的s202 s203 s204 .....为dn

一 hdfs

[服役]

1.在dfs.include文件中包含新节点名称,该文件在nn的本地目录。
        [白名单]
        [s201:/soft/hadoop/etc/dfs.include.txt]     如没有可以自己创建

内容如下:
        s202
        s203
        s204
        s205

       其中s205为新添加的节点

2.在hdfs-site.xml文件中添加属性.
        <property>
            <name>dfs.hosts</name>
            <value>/soft/hadoop/etc/dfs.include.txt</value>
        </property>

  3.  在nn上刷新节点
        $>hdfs dfsadmin -refreshNodes

 4.在slaves文件中添加新节点ip(主机名) 
        s202
        s203
        s204
        s205        //新添加的

 5.单独启动新的节点中的datanode
        [s205]
        $>hadoop-daemon.sh start datanode

[退役]
    1.添加退役节点的ip到黑名单,不要更新白名单.
        [/soft/hadoop/etc/dfs.hosts.exclude.txt]
        s205

    2.配置hdfs-site

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值