![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
HDFS
文章平均质量分 83
Alex_Sheng_Sea
这个作者很懒,什么都没留下…
展开
-
HDFS巡检
1.HDFS总体状态 1.HDFS状态,如下的红色提示需要关注 2.HDFS容量是否过阈值 2.HDFS UI巡检 1.Summary巡检 对应上图所示标号,逐一进行解释: (1)HDFS总文件数:此数值代表着HDFS存储内有多少文件,该数值的警告阈值为5000W (2)HDFS总存储容量:此数值代表HDFS总存储容量 (3)占用存储容量:此数值代表为占用的HDFS存储容量 (...原创 2021-02-01 16:11:59 · 476 阅读 · 0 评论 -
大数据基础运维:HDFS参数调优
1.NameNode数据目录 dfs.name.dir, dfs.namenode.name.dir 指定一个本地文件系统路径,决定NN在何处存放fsimage和editlog文件。可以通过逗号分隔指定多个路径. 目前我们的产线环境只配置了一个目录,并存放在了做了RAID1或RAID5的磁盘上。 2.DataNode数据目录 dfs.data.dir, dfs.datanode.data.dir 指定DN存放块数据的本地盘路径,可以通过逗号分隔指定多个路径。在生产环境可能会在一个...原创 2021-01-26 13:55:51 · 1452 阅读 · 0 评论