95-070-040-源码-源码调试-FLINK源代码调试方式

最新推荐文章于 2022-08-19 15:44:58 发布
最新推荐文章于 2022-08-19 15:44:58 发布
阅读量606 收藏
点赞数
分类专栏： 大数据-flink 文章标签： flink java
本文为博主九师兄（QQ:541711153 欢迎来探讨技术）原创文章，未经允许博主不允许转载。
本文链接：https://blog.csdn.net/qq_21383435/article/details/105333299
版权
大数据-flink 专栏收录该内容
840 篇文章 855 订阅 ¥99.90 ¥299.90
订阅专栏
本文介绍了两种调试FLINK源代码的方法：直接通过IDEA进行Windows调试，以及设置远程调试参数详细步骤，包括在flink-conf.yaml中添加调试参数，启动应用，并在IDEA中配置远程连接进行断点调试。
摘要由CSDN通过智能技术生成

1.视界

在这里插入图片描述

FLINK有两种比较好的调试方式

第一种，直接通过IDEA WINDOWS调试

前提是Flink所有依赖已经导入，直接在Test中打断点，然后直接Debug。

第二种，远程调试

重复了：【flink】Flink 使用IntelliJ IDEA 进行远程调试代码

  • 1 设置DEBUG时候启动的jvm调试参数
    1.如果是yarn的模式直接在conf/flink-conf.yaml 目录下添加
    "env.java.opts: “-agentlib:jdwp=transport=dt_socket,server=y,suspend=y,address=9098”
    但是这里有bug，详情请看FLINK-5324<

了解本专栏 订阅专栏 解锁全文
九师兄
关注
专栏目录
订阅专栏
flink-streaming-platform-web 源码解读
litlit023的专栏
02-28 2501
1. 任务列表模块分析 任务列表模块如下图所示，其中新增和修改任务操作，对应到 job_config表里面插入、更新一条记录。在插入、更新时对任务配置进行检测。 1.0 页面交互部分代码结构 0、与页面交互的Controller API，代码位于： -> flink-streaming-web 模块 -> controller包 -> api 包里面 1.1 新增任务流程 -> addPage.ft...
FLINK源代码调试方式
weixin_33788244的博客
10-31 607
此文已由作者岳猛授权网易云社区发布。欢迎访问网易云社区，了解更多网易技术产品运营经验。第一种，直接通过IDEA WINDOWS调试前提是Flink所有依赖已经导入，直接在Test中打断点，然后直接Debug。第二种，远程调试1 设置DEBUG时候启动的jvm调试参数1.如果是yarn的模式直接在conf/flink-conf.yaml 目录下添加"env.java.opts: "-agentlib...
【Flink源码篇】Flink 1.15.0源码编译
Bulut0907
08-19 2418
在flink-parent的pom中给id为java11-target的profile，配置activateByDefault为true，这个对IDEA调式程序是不生效的。但是我们看IDEA配置的zulu-11的jdk-unsupported模块下是有sun.misc的，但是它明确表明这是不支持的。编译后的可执行文件不是一个jar包，是一个文件夹：flink-release-1.15.0\flink-dist\target\flink-1.15.0-bin\flink-1.15.0。......
eclipse中查看源代码
寻找手艺人的专栏
04-24 828
1.点 “window”-&gt; "Preferences" -&gt; "Java" -&gt; "Installed JRES"2.此时"Installed JRES"右边是列表窗格，列出了系统中的 JRE 环境，选择你的JRE，然后点边上的 "Edit..."， 会出现一个窗口(Edit JRE)3.选中rt.jar文件的这一项4.可以看到“Source Attachment:
Flink源码阅读(一)源码环境搭建
abcdef324的博客
04-20 4355
一 引言 Flink源码本身比较复杂，我打算以Flink的Standalone模式为入口，研究当一个jar包被提交进Flink后,flink如何处理的过程。 二 环境搭建 搭建过程可以参考官方文档 https://ci.apache.org/projects/flink/flink-docs-release-1.8/ops/depl...
flink-table-api-java-bridge_2.11-1.13.2-API文档-中英对照版.zip
06-05
赠送源代码：flink-table-api-java-bridge_2.11-1.13.2-sources.jar； 赠送Maven依赖信息文件：flink-table-api-java-bridge_2.11-1.13.2.pom； 包含翻译后的API文档：flink-table-api-java-bridge_2.11-1.13.2-...
flink-connector-redis-2.10-1.1.5-API文档-中文版.zip
07-14
赠送源代码：flink-connector-redis_2.10-1.1.5-sources.jar； 赠送Maven依赖信息文件：flink-connector-redis_2.10-1.1.5.pom； 包含翻译后的API文档：flink-connector-redis_2.10-1.1.5-javadoc-API文档-中文(简体...
flink-table-api-java-bridge_2.12-1.14.3-API文档-中英对照版.zip
06-06
赠送源代码：flink-table-api-java-bridge_2.12-1.14.3-sources.jar； 赠送Maven依赖信息文件：flink-table-api-java-bridge_2.12-1.14.3.pom； 包含翻译后的API文档：flink-table-api-java-bridge_2.12-1.14.3-...
Flink源码系列——Flink中一个简单的数据处理功能的实现过程
混混的博客
03-08 1万+
在Flink中，实现从指定主机名和端口接收字符串消息，对接收到的字符串中出现的各个单词，每隔1秒钟就输出最近5秒内出现的各个单词的统计次数。 代码实现如下： public class SocketWindowWordCount { public static void main(String[] args) throws Exception { /** 需要连接...
Flink SQL自定义聚合函数
张普的专栏
11-24 3641
点击上方蓝字关注~本篇幅介绍Flink Table/SQL中如何自定义一个聚合函数，介绍其基本用法、撤回定义以及与源码结合分析每个方法的调用位置。基本使用Flink Ta...
如何调试Flink源码
weixin_33860722的博客
11-23 735
原文地址：如何调试Flink源码最近在基于flink做实时计算平台，准备写博客记录一些日常的工作。本篇主要是记一下如何调试Flink的源码，以Standalone模式为例。 环境 Flink Standalone cluster环境的搭建看官方文档即可，这里不再赘述，我们讲下本地环境的准备：IDE: IntelliJ IDEA (需安装S...
调试flink源码
大数据星球-浪尖
11-22 2194
本文主要是讲讲flink的源码编译，案例运行，flink源码调试过程。调试flink的源码及案例，需要先clone工程，编一下源码，去掉规范检查，修改工程，最后才是调试运...
Flink专栏：栏目订阅 概述
九师兄
12-25 1022
1.美图 2.概述 本专栏是自己写的加上网上整理的（整理的是看着别人的走Flink 1.9的代码），格式清晰，如下 (base) lcc@lcc source_code$ ll ~/IdeaProjects/docs/doc-flink/ total 5560 lcc staff 12832 12 13 19:16 ./ lcc staff 608 12 23 19:54 ../...
Flink UI: Flink 1.10 如何查看 数据源 的背压（反压）情况（消费kafka）
九师兄
07-03 3144
1.美图 2. 概述 想对一个flink程序进行性能测试，因此你需要知道flink消费程序的上限，因此，怎么知道你flink程序有没有达到上限呢？在界面上就能看到，比如我kafka写入的速度是 每秒4万条数据写入到kafka。 在界面上找到你的数据源，然后点击，这个界面需要等待一会才有数据 如果出现上述情况，那么说明已经达到flink消费的最大速度了。背压很高 ...
教大家在eclipse中查看源码
热门推荐
04-24 1万+
作为一个java开发的程序员，特别是初学者的java程序员。有时候我们很有必要查看java本身的一些工具类的源码，但是在这之前需要进行一项设置才能顺利的查看得到我们JKD自身的源码。这个工作今天由我带着大家一起完成。 步骤如下： 1.导入源码： （1）打开eclipse 的Window-&gt;Preferences，打开Preferences选项卡。 （2）Preference...
手把手教你获取、编译和调试Flink的源代码
大数据
01-09 5016
导读：本文介绍如何导入Flink源代码，对源代码进行编译、构建及调试。作者：罗江宇 赵士杰 李涵淼 闵文俊来源：大数据DT（ID：hzdashuju）01 获取与导入Flink源代码1. ...
【flink】Flink 使用IntelliJ IDEA 进行远程调试代码
九师兄
08-07 1823
1.概述 转载：Flink 使用IntelliJ IDEA 进行远程调试代码 Flink on Yarn 不好调试, 所以需要用到远程调试. 注意 : 开启远程调试的代码,必须与本地idea的代码必须保持一致. 二 .服务器端配置. 2.1. 设置启动远程debug端口 修改 服务器上的配置文件 ${FLINK_HOME}/flink-config.yaml 增加 环境变量即可. 参考的设置 组件环境变量设置Clientenv.java.opts.client: -agentlib:jdwp=transp.
(第三弹)Flink——Flink源码调试
bigdata_player
06-25 1068
对于一个新框架的学习，第一步往往是对源码初步了解和DEBUG。这些都是学习的套路。 本文主要是讲讲flink的源码编译，案例运行，flink源码调试过程。调试flink的源码及案例，需要先clone工程，编一下源码，去掉规范检查，修改工程，最后才是调试运行。 一、clone源代码 git clone https://github.com/apache/fli...
flink shaded hadoop 2 uber 2.7.5-10.0 源码下载
最新发布
06-25
您需要找到适当的版本号并下载相应的源代码。此外，您还需要阅读有关如何使用flink shaded hadoop 2 uber 2.7.5-10.0的文档，并确保您的系统符合相应的要求。 要使用flink shaded hadoop 2 uber 2.7.5-10.0，您需要...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

九师兄

你的鼓励是我做大写作的动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值