如何将服务器磁盘上的数据删除文件,手动删除HDFS过期数据清理磁盘空间并将删除的数据进行挂载备份处理...

本文介绍了如何在Hadoop集群中删除过期数据以释放磁盘空间,同时将删除的数据挂载到另一服务器进行备份。步骤包括创建备份目录、挂载、验证挂载、更改权限、执行HDFS删除命令以及执行HDFS负载均衡。
摘要由CSDN通过智能技术生成

磁盘挂载应用:将Hadoop集群中部分文件挂载到B服务器上

应用场景:由于hdfs数据量过多,导致磁盘可用空间不足,需要删除过期的数据腾出空间,同时又要将被删除的数据进行备份处理,以免后期复用

需要删除的文件的hdfs目录:bin/hdfs dfs -ls /ibc/datalogs/apachelogs/archive/2018/201801*

删除的文件需要挂载备份到此目录下:/home/bigdata/mnt/backup

解释:

/ibc/datalogs/apachelogs/archive/2018/201801* —此目录为将要删除的hdfs文件目录

/home/bigdata/mnt/backup --文件挂载的目录

1.首先在bigdata用户下,创建目录

mnt/backup 即为 /home/bigdata/mnt/backup

2.切换到root用户

cd /home/bigdata/mnt/backup目录后,输入mount 10.10.3.201:/vol/bd_backup .

解释:

10.10.3.201:/vol/bd_backup --即为B服务器的目录地址,也就是挂载的服务器地址目录

3.挂载完之后,输入命令 df -h 去验证是否已经挂载成功,以及实时的查看挂载情况,磁盘使用以及剩余量

3d164f8141dbcc0af06ff8a6bd4f07a1.png

  • 0
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值