Spark | Stage进度条展示(showConsoleProgress)

最新推荐文章于 2021-02-27 16:01:42 发布

点滴笔记

最新推荐文章于 2021-02-27 16:01:42 发布

阅读量3.5k

点赞数 2

分类专栏： Spark 文章标签： spark

本文链接：https://blog.csdn.net/Sampson_Hugo/article/details/107617931

版权

spark.version = 2.4.4在执行Spark任务中，经常会看到以下类似的Stage进度日志信息，如下：[Stage 0:> (0 + 0) / 1753][Stage 0:> (0 + 65) / 1753][Stage 0:>

摘要由CSDN通过智能技术生成

spark.version = 2.4.4

在执行Spark任务中，经常会看到以下类似的Stage进度日志信息，如下：

[Stage 0:>                                                       (0 + 0) / 1753]
[Stage 0:>                                                      (0 + 65) / 1753]
[Stage 0:>                                                      (0 + 68) / 1753]
[Stage 0:>                                                      (0 + 71) / 1753]
[Stage 0:>                                                     (0 + 344) / 1753]
[Stage 0:>                                                     (0 + 376) / 1753]
[Stage 0:>                                                     (0 + 378) / 1753]
[Stage 0:>                                                     (4 + 375) / 1753]
[Stage 0:>                                                     (7 + 372) / 1753]
[Stage 0:>                                                     (8 + 371) / 1753]
[Stage 0:>                                                    (11 + 368) / 1753]
[Stage 0:>                                                    (16 + 363) / 1753]
[Stage 0:>                                                    (17 + 362) / 1753]
[Stage 0:>                                                    (20 + 359) / 1753]
[Stage 0:>                                                    (

最低0.47元/天解锁文章

点滴笔记

关注

2
点赞
踩
7

收藏

觉得还不错? 一键收藏
1
评论
Spark | Stage进度条展示(showConsoleProgress)

spark.version = 2.4.4在执行Spark任务中，经常会看到以下类似的Stage进度日志信息，如下：[Stage 0:> (0 + 0) / 1753][Stage 0:> (0 + 65) / 1753][Stage 0:>
复制链接

扫一扫

专栏目录