![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
HDFS
要树立远大的理想
生命只有一次,不因碌碌无为而羞耻,不因虚度年华而悔恨。
展开
-
HDFS的BLOCK损坏或丢失问题检查与处理
1. fsck命令介绍fsck是file system check的简写,中文名其实就是文件系统检查,通过hdfs fsck命令可以看出具体的参数。[hdfs@rtn01 ~]$ hdfs fsckUsage: DFSck <path> [-list-corruptfileblocks | [-move | -delete | -openforwrite] [-files [-b...原创 2019-11-25 15:44:29 · 5675 阅读 · 2 评论 -
手工转移HDFS位于磁盘的文件
假如,我是说假如不想使用diskbalancer来完成主机内部的磁盘平衡任务,我们可以用这个方法来完成数据的磁盘间转移(繁琐而又精细,我是不愿意这么搞!)前言如果你发现执行hdfs diskbalancer -query 主机名称这条命令报错如果你发现不报错但是你也不想这么干如果因为某种原因需要转移dfs的某个文件夹你就可以继续往下看了找到你想转移的文件夹停止hdfs服务(...原创 2019-03-12 15:37:47 · 493 阅读 · 0 评论 -
主机内部的磁盘间数据平衡(hdfs diskbalancer )
最好的办法就是参考官方网址 hdfs diskbalancer其实主要步骤有以下几个:新增hdfs配置否者就报错,如下图:hdfs diskbalancer -plan {主机名}hdfs diskbalancer -execute {/system/diskbalancer/XXXXX/{主机名}.plan.json}hdfs diskbalancer -query {...原创 2019-03-12 16:36:58 · 2356 阅读 · 0 评论