hadoop集群个别节点存储空间达到90%

一、很多网上转载解决如下：

修改hdfs-site.xml:添加

<property>
  <name>dfs.datanode.du.reserved</name>
  <value>214748364800</value>
  <description>Reserved space in bytes per volume. Always leave this much space free for non dfs use.200G  </description>
</property>

不同磁盘空间大小，hadoop将数据平均写入，hadoop并不会自动将数据写到有更大空闲空间的磁盘中，还是会将之前的小磁盘写满，小磁盘写满会使mapreduce产生的临时文件没有空间写，而导致mapreduce执行失败。所以需要小磁盘留有一定的空闲空间，查看hadoop资料，设置 dfs.datanode.du.reserved配置项可以使每个磁盘保留相应的磁盘空间，单位使用bytes，但是我设置之后起作用了，总体容量下降，依然往小盘上写数据，艹艹，我使用的hadoop版本是cloudera的cdh4.6。
————————————————
版权声明：本文为CSDN博主「danssion」的原创文章，遵循CC 4.0 BY-SA版权协议，转载请附上原文出处链接及本声明。
原文链接：https://blog.csdn.net/danssion/article/details/34427141

我们现在用的集群中，各个datanode使用空间差不多，但是由于有3台总的存储空间较小，导致使用量接近90%报警，网上查的方法都是说namenode写文件的时候

二、