使用 .idea 远程调试 flink 程序

最新推荐文章于 2024-12-06 15:32:36 发布
最新推荐文章于 2024-12-06 15:32:36 发布
阅读量1.2k 收藏 4
点赞数 1
分类专栏： 日常记录 java 文章标签： java intellij idea flink
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/yuchuanchen/article/details/109097851
版权
本文介绍了如何配置Flink以进行远程调试，包括client、jobmanager和taskmanager的调试设置，并详细说明了在.IntelliJ IDEA中创建Remote配置的方法，以连接到指定端口的远程JVM进行调试。
摘要由CSDN通过智能技术生成
最低0.47元/天 解锁文章
Flink 远程调试
Emperor_CJ的博客
04-07 2954
背景： 很多小伙伴开发的时候都会在本地调试之后上真实的集群环境，但是本地环境和集群环境还是有本质区别的，当遇到集群环境问题时，所有人都会想如果也能像本地调试就好了，其实 Flink on yarn 远程调试也不复杂，只需要简单的配置即可。 远程调试基本配置 以最简单的java程序说起 IDEA不仅可以本地调试代码，也可以远程调试代码。 一、基本原理 本机和远程主机的两个 VM 之间使用 Debug 协议通过 Socket 通信，传递调试指令和调试信息。 被调试程序的...
使用IntelliJ IDEA进行远程调试Flink大数据代码
JieLun_C的博客
08-28 645
本文将介绍如何使用IntelliJ IDEA进行远程调试Flink代码的步骤，并提供相应的源代码示例。通过使用IntelliJ IDEA进行远程调试，我们可以方便地对Flink大数据代码进行调试和排查问题。本文介绍了使用IntelliJ IDEA进行远程调试Flink代码的步骤，并提供了一个简单的WordCount示例。在IntelliJ IDEA中，点击右上角的"Debug"按钮，选择之前创建的远程调试配置。在IntelliJ IDEA中，点击"Debug"按钮启动Flink作业。步骤4：启动远程调试。
IDEA调试远程服务器（详细）
最新发布
qq_43559922的博客
12-06 884
在本地代码中想要打断点的地方打上断点，访问远程服务的功能，即可实现远程调试。
IntelliJ IDEA 远程调试 Flink的方法
chenyulancn的专栏
02-26 7016
环境描述: flink 集群运行在centos8 下, idea 运行在windows10 下. Flink 集群开启调试功能 在文件　flink-conf.yaml　添加两行配置： # jobmanager debug端口 env.java.opts.jobmanager: "-agentlib:jdwp=transport=dt_socket,server=y,suspend=n...
【flink】Flink 使用IntelliJ IDEA 进行远程调试代码
九师兄
08-07 1967
1.概述 转载：Flink 使用IntelliJ IDEA 进行远程调试代码 Flink on Yarn 不好调试, 所以需要用到远程调试. 注意 : 开启远程调试的代码,必须与本地idea的代码必须保持一致. 二 .服务器端配置. 2.1. 设置启动远程debug端口 修改 服务器上的配置文件 ${FLINK_HOME}/flink-config.yaml 增加 环境变量即可. 参考的设置 组件环境变量设置Clientenv.java.opts.client: -agentlib:jdwp=transp.
大数据IDEA调试flink程序
weixin_30755709的博客
11-25 311
Flink在IDEA中开发是一件比较困难的事情，网上没有参考资料，就算就业说的太过笼统，不知道是会了不说还是不会瞎说，为了解决flink这个问题，本人特别做了一遍开发的简单说明。主要考虑两个问题，1、语言环境的搭建。2、flink代码编译通过并运行 获取更多大数据视频资料请加QQ群：947967114 首先解决第一个问题： 创建一个maven环境，maven的配置方式不在介绍。也就是说看本文之...
flink 作业远程调试和源码调试
liangfeng的博客
09-19 2355
flink 作业远程调试 背景：开发过程中有时候需要调试集群中的作业或者源码 集群配置： 文件flink-conf.yaml 添加两行 # jobmanager debug端口 env.java.opts.jobmanager: "-agentlib:jdwp=transport=dt_socket,server=y,suspend=n,address=5006" # taskmanager de...
idea远程debug flink任务
cn987654的博客
01-25 616
idea远程debug flink任务 主要记录一下远程debug flink的过程，使用的资源调度器是yarn。 版本信息：flink-1.11 idea-201803(安装后一直没更新) 配置 由于任务是调度在yarn上，这里存在多个flink任务，因此将java环境变量配置在任务启动过程中，其他flink配置正常使用。 -yD "env.java.opts.jobmanager=-agentlib:jdwp=transport=dt_socket,server=y,suspend=n,address
Flink 使用IntelliJ IDEA 进行远程调试代码
张伯毅的专栏
04-06 2233
.一 .前言二 .服务器端配置.2.1. 设置启动远程debug端口2.2. 具体操作三 .Idea配置3.1. 配置远程连接3.3. 启动调试 一 .前言 Flink on Yarn 不好调试, 所以需要用到远程调试. 注意 : 开启远程调试的代码,必须与本地idea的代码必须保持一致. 二 .服务器端配置. 2.1. 设置启动远程debug端口 修改 服务器上的配置文件 ${FLINK_HOME}/flink-config.yaml 增加 环境变量即可. 参考的设置 组件 环境变量设置
Flink on YARN 远程调试 大数据
2301_79366435的博客
09-18 133
在集成开发环境 (IDE) 中，创建一个新的远程调试配置，并指定主机和端口号。通过上述步骤，您可以在 Flink on YARN 环境中进行远程调试，以便更好地理解和调试您的大数据作业。在上述代码中，我们创建了一个简单的 Flink 作业，它从输入流中获取字符串，计算字符串的长度，并输出结果。接下来，我们需要启动 Flink on YARN 集群，并在远程调试模式下运行作业。在完成调试后，您可以停止调试器，并继续执行作业。接下来，我们将编写一个简单的 Flink 程序，用于演示远程调试的过程。
Flink开发IDEA环境搭建与测试的方法
08-19
主要介绍了Flink开发IDEA环境搭建与测试的方法,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
Flink 本地 idea 调试开启 WebUI
Jason不在家的博客
09-29 500
Flink 本地 idea 调试开启 WebUI
【Flink源码篇】Flink提交流程之脚本运行过程解析和IDEA本地调试debug
Bulut0907
08-19 1880
这里我们使用local的方式进行程序的运行，会在本地启动一个MiniCluster集群，application运行完成，集群关闭。在IDEA按下Ctrl + Shift + n，弹出文件搜索框，输入CliFrontend，就可以看到我们需要的CliFrontend.java类文件，点击跳转到CliFrontend.java。按下Ctrl + F12，弹出当前类CliFrontend的文件结构，找到main方法然后点击，就可以跳转到main方法。还可以按ctrl + h查看一个抽象方法的具体实现。......
【第二节】- Idea本地调试提交Flink程序
雾岛与鲸的博客
04-07 1082
2、在IDEA本地运行 CliFrontend。右键，Add as Libiary。
在IDEA下运行flink环境及web ui,debug调试
leichangqing的博客
09-19 1043
即使有一个很好的入门或一个伟大的（和免费的）实践培训，也总是有关于如何开始、如何调试问题或如何在 IDE 中启动项目的问题。在本文中，我们介绍了在本地环境中使用 Apache Flink 的基础知识和一些典型陷阱。在本地运行作业时，日志级别非常详细，可能很难在 Flink 消息之间找到您的消息。有关更多信息，请参阅 官方文档中的测试 Flink 作业。你也可以在官方的 Flink 训练测试中找到很好的例子。在 IDE 中运行 Flink 作业的好处之一是能够像往常一样使用断点调试 Flink 作业。
使用IDEA本地调试SQL
weixin_57254068的博客
09-07 1549
有Flink开发基础的同学应该很明白，FlinkSQL的开发底层是基于StreamTableEnvironment执行环境进行的，而此次介绍的方法很简单，就是基于Flink-client实现的，该方式的优点是1.无需手动启动本地集群提交任务，2.零代码开发，只需要导一些相关的依赖jar包，注意需要使用哪些连接器只需要导入对应的连接器依赖即可。5.mysql 要求开启了binlog日志，使用的用户需要具有对应的读取权限。文件，需要读取到Flink相关的配置。7.准备FlinkSQL文件。
使用IntelliJ IDEA本地启动调试Flink流计算工程的2个异常解决
zhangbeizhen18的博客
09-05 1657
记录：471 场景：使用IntelliJ IDEA本地启动调试Flink流计算时，报错一：加载DataStream报错java.lang.ClassNotFoundException。报错二：No ExecutorFactory found to execute the application。
Flink本地Debug调试的方法和注意点
weixin_44883450的博客
09-14 2516
flink项目如何本地debug调试，毕竟和后端项目不同。本文介绍flink项目本地debug方法和注意点。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值