- 博客(2)
- 收藏
- 关注
原创 hadoop小文件过多引起的负载过高
一.场景描述系统运行一段时间后,总是报负载过高的警告告警等级: Warning告警信息: Processor load is too high on hadoopmaster告警项目: system.cpu.load[all,avg1]问题详情: Processor load (1 min average per core) 4.43
2018-02-07 11:51:40 1889
原创 spark 历史和实时任务日志监控
一.spark on yarn historyserver(运行完毕日志) 1.配置yarn日志参数:yarn-site.xml yarn.log-aggregation-enable true yarn.log.server.url http://hadoop-senior01.ibeifeng.com:1988
2018-02-01 16:26:47 3059
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人