hadoop添加白名单 以及 黑名单

白名单用在刚搭建集群的时候使用,黑名单是正常的退役服务器 

注意不允许白名单和黑名单同时出现同一个主机名称

白名单

(1)在NameNode的/opt/module/hadoop-3.2.1/etc/hadoop目录下创dfs.hosts文件

vim dfs.hosts       内容不允许有其他字符包括空格

hadoop112
hadoop113
hadoop114

(2)修改hdfs-site.xml

<property>
    <name>dfs.hosts</name>
    <value>/opt/module/hadoop-3.2.1/etc/hadoop/dfs.hosts</value>
</property>

(3)同步配置 xsync hdfs-site.xml

(4)刷新NameNode

         hdfs dfsadmin -refreshNodes 

这样hadoop115就不能加如到集群中,只允许hadoop112-114加入集群 

黑名单

1)在NameNode的/opt/module/hadoop-3.2.1/etc/hadoop目录下创dfs.hosts.exclude文件

vim dfs.hosts.exclude      内容不允许有其他字符包括空格

hadoop115

(2)修改hdfs-site.xml

<property>
    <name>dfs.hosts.exclude</name>
    <value>/opt/module/hadoop-3.2.1/etc/hadoop/dfs.hosts.exclude</value>
</property>

(3)刷新NameNode、刷新ResourceManager

          hdfs dfsadmin -refreshNodes

          yarn rmadmin -refreshNodes

(4)检查Web浏览器,退役节点的状态为decommission in progress(退役中),说明数据节点正在复制块到其他节点。

(5)等待退役节点状态为decommissioned(所有块已经复制完成),停止该节点及节点资源管理器。注意:如果副本数是3,服役的节点小于等于3,是不能退役成功的,需要修改副本数后才能退役

         登录到hadoop115

执行

       hadoop-daemon.sh stop datanode

       yarn-daemon.sh stop nodemanager

 

 

  • 9
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
回答: rsync配置文件中的黑名单白名单用于控制rsync同步过程中需要排除或包含的文件或目录。在rsync的配置文件中,可以通过指定黑名单文件和白名单文件来实现这个功能。在Linux系统中,可以在rsync的配置文件中指定黑名单文件和白名单文件的路径。比如,在/opt/module/hadoop-3.1.3/etc/hadoop目录下创建whitelist和blacklist文件,可以使用touch命令创建这两个文件。\[2\]另外,在rsync的配置文件中,还需要指定rsyncd.motd文件,该文件用于在同步过程中展示提示信息。可以在/etc/rsync目录下创建rsyncd.motd文件,并进行相应的配置。\[3\]通过配置这些文件,可以实现对rsync同步过程中需要排除或包含的文件或目录的控制。 #### 引用[.reference_title] - *1* *3* [配置rsync daemon模式进行同步文件或目录](https://blog.csdn.net/love666666shen/article/details/124788785)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insert_down28v1,239^v3^insert_chatgpt"}} ] [.reference_item] - *2* [HDFS添加白名单黑名单(含具体实现)](https://blog.csdn.net/m0_56066550/article/details/121883682)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insert_down28v1,239^v3^insert_chatgpt"}} ] [.reference_item] [ .reference_list ]

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

诗水人间

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值