进入spark运行历史界面:
可以查看运行时间,Jobs等详细信息
一般来说,每个Action的触发都会生成一个Job,一个 Job 会被拆分成stages,一个 stage由多个 task构成(Jobs–> Stages --> Tasks)
点击进入job(被分成2个stage)详细信息,查看运行时刻表、DAG可视化、输入数据、输出数据等信息。
Hue上查看spark运行信息(二)
最新推荐文章于 2021-05-22 16:00:42 发布
进入spark运行历史界面:
可以查看运行时间,Jobs等详细信息
一般来说,每个Action的触发都会生成一个Job,一个 Job 会被拆分成stages,一个 stage由多个 task构成(Jobs–> Stages --> Tasks)
点击进入job(被分成2个stage)详细信息,查看运行时刻表、DAG可视化、输入数据、输出数据等信息。