YARN SLS生成的jobruntime.csv中每个Application信息重复输出两次的代码分析
本文动机
在使用YARN SLS时,我们经常需要分析其运行结束时生成的jobruntime.csv文件来对调度效果进行分析。但是可以发现,在jobruntime.csv中每个Application的信息反复输出了两次,并且simulate_end_time时间不尽相同。为了了解其原因,我阅读了SLS的实现代码,弄清楚了其背后的原因。
使用的Hadoop版本为2.9.2,全部代码都在org.apac...
原创
2019-08-13 11:09:21 ·
259 阅读 ·
0 评论