CDH集群日志清理

一. 查看磁盘占用情况

df -h

二. 查看日志占用情况

1.1 cdh的各组件的日志一般在/var/log目录下(最好前面加上/data)，因此主要关注“/”

查看/data/var/log下使用空间较大的文件夹，并由大到小排列

cd /data/var/log/
du -s ./* | sort -nr

 

1.2 还有一个是 Cloudera Management Service服务产生的日志，存在/var/lib/...

cd /data/var/lib/cloudera-service-monitor
du -s ./* | sort -nr

 三. 清理日志

1.1 清理cm、cdh组件的日志数据

rm -rf /data/var/log/cloudera-scm-eventserver/*.out.*
rm -rf /data/var/log/cloudera-scm-firehose/*.out.*
rm -rf /data/var/log/cloudera-scm-agent/