修改hadoop备份数

1:hadoop中备份数设置:(hdfs-site.xml)

<property>
<name>dfs.replication</name>
<value>3</value>
</property>

2:hadoop中备份数修改:

hadoop dfs -setrep [-R] <path> 如果有-R将修改子目录文件的性质。hadoop dfs -setrep -w 3 -R /user/hadoop/dir1 就是把目录下所有文件备份系数设置为3.

3:hadoop中查看当前某个文件的备份数:

hadoop dfs -ls [filename]  结果行中的第二列是备份系数 (注:文件夹信息存储在namenode节点上,所以没有备份,故文件夹的备份系数是横杠)

4:hadoop集群的检查备份冗余情况:

hadoop fsck / 可以方便的看到各种类型block所占比例。

5:自动负载均衡hadoop文件:hadoop balancer

6:查看各节点的磁盘占用情况 hadoop dfsadmin -report

转载于:https://www.cnblogs.com/cloudma/archive/2012/11/16/hadoop-replacation.html

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值