HDFS—集群扩容及缩容

本文详细介绍了如何在Hadoop HDFS集群中进行扩容和缩容操作,包括添加白名单、新增服务器、数据均衡等步骤,旨在确保集群稳定性和数据安全性。
摘要由CSDN通过智能技术生成
  1. 添加白名单
  2. 添加新服务器
  3. 服务器间数据均衡

1. 添加白名单

白名单:表示在白名单的主机IP地址可以,用来存储数据。

企业中:配置白名单,可以尽量防止黑客恶意访问攻击。

配置白名单步骤:

1)在NameNode节点的/opt/module/hadoop-3.1.3/etc/hadoop目录下分别创whitelist blacklist文件

        a.创建白名单

        [atguigu@hadoop102 hadoop]$ vim whitelist

        在whitelist中添加如下主机名称,假如集群正常工作的节点为102 103

        hadoop102

        hadoop103

        b.创建黑名单

        [atguigu@hadoop102 hadoop]$ touch blacklist

        保持空的就可以。

2)在hdfs-site.xml配置文件中增加dfs.hosts配置参数              

<!-- 白名单 -->

<property>

     <name>dfs.hosts</name>

     <value>/opt/module/hadoop-3.1.3/etc/hadoop/whitelist</value>

</property>

<!-- 黑名单 -->

<property>

     <name>dfs.hosts.exclude</name>

     <value>/opt/module/hadoop-3.1.3/etc/hadoop/blacklist</value>

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值