spark内核揭秘-08-spark的Web监控页面

最新推荐文章于 2024-06-23 16:52:06 发布

stark_summer

最新推荐文章于 2024-06-23 16:52:06 发布

阅读量2.2w

点赞数

分类专栏： spark 文章标签： SparkUI bind initialize JobsTab JettyServer

本文链接：https://blog.csdn.net/stark_summer/article/details/42913881

版权

在SparkContext中可以看到初始化UI代码：

// Initialize the Spark UI
private[spark] val ui: Option[SparkUI] =
  if (conf.getBoolean("spark.ui.enabled", true)) {
    Some(SparkUI.createLiveUI(this, conf, listenerBus, jobProgressListener,
      env.securityManager,appName))
  } else {
    // For tests, do not enable the UI
    None
  }

// Bind the UI before starting the task scheduler to communicate
// the bound port to the cluster manager properly
ui.foreach(_.bind())