Flink在IDEA中本地执行创建带有Web UI的Environment

Bulut0907

已于 2022-11-25 09:30:15 修改

阅读量2.2k

点赞数 2

分类专栏： # Flink 文章标签： flink idea web ui environment 本地开发

于 2022-06-24 09:16:16 首次发布

本文链接：https://blog.csdn.net/yy8623977/article/details/124124188

版权

Flink 专栏收录该内容

44 篇文章 17 订阅

订阅专栏

该博客介绍了如何在IDEA中为本地执行的Flink程序启用WebUI。通过在pom.xml中添加flink-runtime-web依赖，并使用特定方式创建Environment，设置rest.port属性，可以实现带有WebUI的本地环境。这样，在运行程序后，可以通过访问localhost:8081查看Flink的WebUI界面。

摘要由CSDN通过智能技术生成

1. 背景

在IDEA中本地执行Flink程序，直接通过下面的方式创建的Environment，是没有Web UI的

val senv = StreamExecutionEnvironment.getExecutionEnvironment

2. 解决方法

pom.xml添加依赖

        <dependency>
            <groupId>org.apache.flink</groupId>
            <artifactId>flink-runtime-web</artifactId>
            <version>1.15.0</version>
            <scope>provided</scope>
        </dependency>

通过下面的方式创建带有Web UI的本地Environment

import org.apache.flink.configuration.Configuration
import org.apache.flink.streaming.api.scala.StreamExecutionEnvironment

object MysqlCDC2Iceberg {

  def main(args: Array[String]): Unit = {

    val isTestValue = 1

    // 如果是本地执行，则创建带Web UI的环境
    var senv: StreamExecutionEnvironment = null
    if (isTestValue == 1) {
      val flinkConf: Configuration = new Configuration()
      flinkConf.setInteger("rest.port", 8081)
      senv = StreamExecutionEnvironment.createLocalEnvironmentWithWebUI(flinkConf)
    } else {
      senv = StreamExecutionEnvironment.getExecutionEnvironment
    }
    
  }

}

在IDEA中运行程序，然后访问localhost:8081，就可以看到下面的界面
Web UI