Flink taskmanager.out文件太大磁盘使用率过高

#Flink常见故障 #大数据 #生产环境真实案例 #Flink #流式计算 #流批一体 #整理 #经验总结

说明：此篇总结Flink常见故障案例处理方案 结合自身经历 总结不易 +关注 +收藏 欢迎留言

更多Flink案例汇总方案 解决方案：Flink业务常见故障多案例解决方案

Flink taskmanager.out文件太大磁盘使用率过高

问题

Flink任务的taskmanager.out文件过大导致磁盘使用率过高。

原因

taskmanager.out和taskmanager.err没有经过log4j管控，业务侧的代码日志打印不规范，大量日志写入到了taskmanager.out中。

解决方法

停止任务后手动删除。找到超规格文件后使用> taskmanager.out清空内容。知会客户整改日志打印。

最后

谢谢大家 @500佰