Flink实例（九十五）: flink 作业提交（五）开发环境搭建和应用的配置、部署及运行

王知无(import_bigdata)

已于 2022-07-05 21:41:38 修改

阅读量369

点赞数

分类专栏： Flink系统性学习专栏文章标签： flink java 大数据

于 2021-01-23 15:11:10 首次发布

原创文章禁止转载。否则追究法律后果。

本文链接：https://blog.csdn.net/u013411339/article/details/113050503

版权

Flink系统性学习专栏专栏收录该内容

256 篇文章 102 订阅 ¥39.90 ¥99.00

订阅专栏

超级会员免费看

本文详细介绍了Apache Flink的开发环境部署，包括必备工具、编译过程和环境配置。此外，还阐述了Flink应用的运行，包括单机、多机Standalone模式和Yarn集群模式。推荐使用IntelliJ IDEA作为IDE，并提供了配置Checkstyle的建议。文章还探讨了Flink运行时的组件、Task Slot和JobManager、TaskManager的角色。最后，讲解了Standalone模式下的高可用性配置，以及在Yarn模式下运行Flink作业的两种方式。

摘要由CSDN通过智能技术生成

本文主要面向于初次接触 Apache Flink（以下简称Flink）、或者对 Flink 有了解但是没有实际操作过的同学。希望帮助大家更顺利地上手使用 Flink，并着手相关开发调试工作。

课程内容包括：

Flink 开发环境的部署和配置
运行 Flink 应用（包括：单机 Standalone 模式、多机 Standalone 模式和 Yarn 集群模式）

一、Flink 开发环境部署和配置

Flink 是一个以 Java 及 Scala 作为开发语言的开源大数据项目，代码开源在 GitHub 上，并使用 Maven 来编译和构建项目。对于大部分使用 Flink 的同学来说，Java、Maven 和 Git 这三个工具是必不可少的，另外一个强大的 IDE 有助于我们更快的阅读代码、开发新功能以及修复 Bug。因为篇幅所限，我们不会详述每个工具的安装细节，但会给出必要的安装建议。

关于开发测试环境，Mac OS、Linux 系统或者 Windows 都可以。如果使用的是 Windows 10 系统，建议使用 Windows 10 系统的 Linux 子系统来编译和运行。