本地IDEA环境，启动Flinkx，并给启动类CommandLine传递参数

最新推荐文章于 2023-10-24 14:22:28 发布
最新推荐文章于 2023-10-24 14:22:28 发布
阅读量880 收藏 1
点赞数
分类专栏： Flink 文章标签： IDEA启动Flinkx 传递启动参数 Program args
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/litlit023/article/details/108963290
版权
本文档详细介绍了如何在IDEA的本地环境中启动Flinkx，并通过Program arguments向启动类CommandLine传递参数。步骤包括将flinkx文件夹上传到服务器，执行启动命令，配置IDEA的Main类参数，以及使用Debug模式检查参数传递。
摘要由CSDN通过智能技术生成

介绍：在IDEA中，local模式启动Flinkx

1、上传flinkx文件夹到服务器

将flinkx文件夹复制到服务器的/work/flink/flinkx/目录下，即 $FLINKX_HOME=/work/flink/flinkx/flinkx

2、执行启动命令

cd $FLINKX_HOME

./bin/flinkx -mode local -job $FLINKX_HOME/flinkx-examples/examples/stream_example.json -pluginRoot $FLINKX_HOME/plugins  -flinkconf $FLINKX_HOME/flinkconf

在执行flinkx脚本的最后一行命令

nohup $JAVA_RUN -cp $JAR_DIR $CLASS_NAME $@ &

$@ 传递给Launcher启动类的参数是：

-mode local -job /work/flink/flinkx/flinkx/flinkx-examples/examples/stream_example.json -pluginRoot /work/flink/flinkx/flinkx/plugins -flinkconf /work/flink/flinkx/flinkx/flinkconf

3、在本地环境IDEA中，配置Main启动类的Program arguments参数

了解本专栏 订阅专栏 解锁全文 超级会员免费看
fragrans
关注
专栏目录
订阅专栏
本地IDEA环境调试Flinkx 启动Launcher过程分析
litlit023的专栏
10-12 763
本文主要包括：在IDEA环境中，通过设置Launcher类的启动参数，直接在idea中拉起Launcher类，从而启动整个flinkx项目 1. 在IDEA中设置Launcher启动类的Program arguments参数 在Program arguments参数项中设置参数值为： -mode local -job D:\IdeaProjects\flink\flinkx\flinkx-examples\examples\stream_example.json -pluginRoot D:\I
干货：Flink在IDEA上配置并且运行
热门推荐
qq_39923024的博客
11-24 1万+
Flink在IDEA中开发是一件比较困难的事情，网上没有参考资料，就算就业说的太过笼统，不知道是会了不说还是不会瞎说，为了解决flink这个问题，本人特别做了一遍开发的简单说明。主要考虑两个问题，1、语言环境的搭建。2、flink代码编译通过并运行 首先解决第一个问题： 创建一个maven环境，maven的配置方式不在介绍。也就是说看本文之前首先应该确保IDEA下的maven正常： 1、创建一个m...
Idea中Flink环境配置
TIMELIMITE的专栏
03-10 5239
Idea中Flink环境配置 下载Flink并解压,我选择的是Apache Flink 1.7.2 only. 在Idea中安装Scala插件和SDK.注意要和网站下载下来的编译Flink的scala版本对应,即2.11还是2.12 在Idea新建项目,选择Maven.勾选 Create from archetype,从列表中找到org.scala-tools.archetypes. 如果没有这...
idea里面，flink local模式的相关配置案例
Rocky
04-26 263
我们在本地进行flink datastream api的java代码开发的时候，需要方便我们在web页面端进行监控job的运行情况。需要在本地的idea里面做出相关的参数配置.通过在Configuration 对象中配置相关的参数，然后我们在idea里面run main函数，这样在本地浏览器打开：localhost://8081。这个页面就是flink的web监控页面。上面可以试试监控job执行中task上的运行健康情况。上面的代码是从配置文件中读取flink的配置参数。- web端配置参数。
【Flink---02】Flink开发环境：IDEA
渐渐的忘记，赶不上明天（读研ing，2024年毕业）
12-26 2922
第一步：创建项目 第二步：编辑pom.xml文件 第三步：配置日志 第四步：编写代码 (1) 数据准备 (2) 方式一：批处理 (3) 方式二：流处理 * 以有界流的方式 * 以无界流的方式
Flink 使用IntelliJ IDEA 进行远程调试代码
张伯毅的专栏
04-06 2117
.一 .前言二 .服务器端配置.2.1. 设置启动远程debug端口2.2. 具体操作三 .Idea配置3.1. 配置远程连接3.3. 启动调试 一 .前言 Flink on Yarn 不好调试, 所以需要用到远程调试. 注意 : 开启远程调试的代码,必须与本地idea的代码必须保持一致. 二 .服务器端配置. 2.1. 设置启动远程debug端口 修改 服务器上的配置文件 ${FLINK_HOME}/flink-config.yaml 增加 环境变量即可. 参考的设置 组件 环境变量设置
IDEA启动main函数时，Command line is too long Shorten command line for XXX or also问题解决
forward627的博客
10-14 1258
巧了，最近起了一个挺长的类名，启动main函数的时候，idea返回了一个Command line is too long Shorten command line的报错，请教研究之后，解决方法如下 方法一 找到 .idea 下面的 workspace.xml 找到标签 <component name="PropertiesComponent"> 在标签中新增一栏 <property name="dynamic.classpath" value="true" /> .
若依启动项目报Command line is too long. Shorten command line for……
猿小白的博客
07-11 6469
目录一、问题原因二、解决办法（1）选择Edit Configurationis... （2）展开Environment （3）设置Shorten command line三、启动项目这个异常的出现是因为运行项目的指令过长引起的，在IDEA进行代码运行时加载了很多指令，这些指令拼接后的长度超出了系统的最大长度，当你的命令行长度超过 32768 个字符时，idea就会提示你使用短一点的命令行。在此条目下选择Shorten command line默认选择的是此处可以选或者运行项目均可解决此问题 。...
IDEA运行项目报错：Command line is too long的解决办法
最新发布
sdujava2011
10-24 1428
现此问题的直接原因是：IDEA集成开发环境运行你的“源码”的时候（注意是源码基础上运行，并非打好的jar包哦），是通过命令（首行那个非常非常长的）来启动Java进程的。-classpath参数，它用于指定运行时jar包路径（因为jar包理论上是可以在任何地方的），这部分可能性就多了。在网上进行初步搜索，会发现有的文章提供了这几种解决办法，接下来我们就对下图几种解决办法进行测试，看看是否有效。经过测试，该篇文章中给出的4种方法，只有第3种是可行的，但也并不优雅，真的是误人子弟啊。4.调整JVM参数，经测试，
IDEA中搭建flink开发环境，看这一篇就够了，亲测有效
weixin_45701550的博客
07-10 7695
在使用flink进行应用开发的时候，通常都是将开发的应用程序，提交到flink集群中，但是这样对应用程序开发调试很不方便，所谓磨刀不误砍柴工，下面我整理一个在mac上使用idea开发flink程序的配置教程，具体如下。添加flink应用程序开发必要的依赖： 此时启动开发的应用程序，会报错，报错信息如下： 报错原因主要在于应用提交后，无法启动本地flink框架。需要添加flink启动必须的依赖，该依赖是：flink-dist_2.11-1.11.2.jar，依赖的版本取决于下载flink包的版本，下载链接参考
CommandLineRunner的用法
weixin_43830264的博客
11-08 1251
项目启动自动执行某方法 SpringBoot提供的一种简单的实现方案就是添加一个model并实现CommandLineRunner接口，实现功能的代码放在实现的run方法中 @Service public class RocketConsumer implements CommandLineRunner { @Override public void run(String… strings) throws Exception { // 需要执行的任务代码 } } ...
Flink传入自定义的参数或配置文件
lck_csdn的博客
06-09 1423
Flink传入自定义的参数或配置文件
带参数启动Flink任务
Smileyan's blog
08-14 1万+
1.编写目的 启动Flink任务方法的命令为 bin/flink run examples/myflink.jar 但是有时候我们启动时需要向里面传入一些参数，比如配置文件的路径。 2.详细过程 启动Flink任务时，需要添加参数path，指定配置文件的绝对路径。比如： bin/flink run examples/myflink.jar -path /usr/local/config/confi...
【Flink源码】Flink程序启动的那些事儿
wwb44444的博客
11-06 663
我想您一定曾经很好奇几个问题那就是 Flink 程序启动的时候究竟发生了什么？我们将用户程序提交上去之后它又是如何调用它的？本文就是为了解决您的这些疑惑在 Yarn 下 per-job 模式提交流程如下图。
通过IDEA在Window上启动Flink WebUI
Howe的博客
02-09 750
通过IDEA在Window上启动Flink WebUI
flink启动命令参数_flink使用和启动
weixin_39576066的博客
01-26 9318
Flink是一个针对流数据和批数据的分布式处理引擎。它主要是由Java 代码实现。Flink可以支持本地的快速迭代，以及一些环形的迭代任务。并且Flink 可以定制化内存管理。因此相对于spark不容易出现OOM (outof memory)。flink的特性:支持高吞吐、低延迟、高性能的流处理，spark Streaming无法支持低延迟，storm无法支持高吞吐支持带有事件时间的窗口(Wind...
如何使用 CommandLineRunner？
Osborn的博客
01-14 3021
要使用CommandLineRunner，我们创建一个实现CommandLineRunner接口的类，并重载它的run()方法，使用Spring如@Component之类注释此类，当Spring Boot应用启动时，就在完成启动之前，CommandLineRunner将会被执行。我们可以将命令行参数传递给 CommandLineRunner，它用于在主入口应用程序启动之前启动任何调度程序...
Flink获取外部传递参数的两种方式
mcdull213的博客
06-11 4795
目录 一、前言 二、实现 2.1 通过参数方式直接传递 2.2 通过配置文件来获取参数值 一、前言 在Spark或者Flink中，我们会对接Kafka，Kafka的参数比较多，如果我们希望通过灵活的方式修改参数，而不是把参数值硬编码到代码中，那么可以通过以下两种方式。 二、实现 我们可以使用Java的内置工具类ParameterTool.get()的方式获取传递的参数值 2.1 通过参数方式直接传递 /** * 从args中获取参数值 * 工具类：org.apac.
idea 启动 Error running ErsProviderApplication. Command line is too long
09-21
根据提供的引用内容，你遇到的问题是在启动IDEA时遇到了错误"Error running ErsProviderApplication. Command line is too long"。这个错误通常是由于命令行过长导致的。解决这个问题可以通过以下步骤： 1. 点击IDEA的菜单栏中的"Run"选项。 2. 选择"Edit Configurations"。 3. 在弹出的窗口中，选择左侧的应用程序配置。 4. 在右侧的选项卡中，找到"Modify options"部分。 5. 点击"Shorten command line"选项。 6. 在弹出的子选项中，选择"Jar manifest"。 7. 点击"Apply"保存更改。 这样设置之后，重新启动IDEA应该就不再出现"Error running ErsProviderApplication. Command line is too long"的错误了。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值