dolphinscheduler 3.0.1 IDEA远程调试配置

最新推荐文章于 2024-06-04 08:28:51 发布
最新推荐文章于 2024-06-04 08:28:51 发布
阅读量1.1k 收藏 2
点赞数 2
分类专栏： # dolphinscheduler 文章标签： intellij-idea java remote debug dolphinschedu
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_36434219/article/details/127125795
版权

一直使用的eclipse，身边同事一直建议使用IDEA，接受建议吧，感受一下到底哪里好

以API服务为例，配置调试参数

  • 配置debug参数：-Xdebug -Xrunjdwp:transport=dt_socket,address=8888,server=y,suspend=n
    在这里插入图片描述

  • 启动成功
    在这里插入图片描述

  • IDEA配置远程服务参数
    在这里插入图片描述
    在这里插入图片描述
    在这里插入图片描述
    在这里插入图片描述

  • 工作流定义方法打上断点

在这里插入图片描述

  • 报错工作流成功触发
    在这里插入图片描述
  • 快捷键设置成eclipse模式，这个挺好，省去了大量的学习成本
    在这里插入图片描述
韧小钊
关注
  • 2
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
DolphinScheduler配置Kerberos,过期重启解决问题(完结)
qq_18453581的博客
08-15 626
解决方法。
Apache DolphinScheduler——开源大数据调度器神器（国人之光）
男神的专栏
05-31 7831
本文已参与「新人创作礼」活动，一起开启掘金创作之路。
Apache DolphinScheduler征稿--如何针对源代码进行远程调试【以dolphinscheduler源码为例】
penriver的博客
03-03 958
海豚调度dolphinscheduler目前是 Apache 顶级项目，作为国内优秀的开源项目，它的架构设计理念会有很多值得我们学习和借鉴。 海豚调度dolphinscheduler是分布式易扩展的可视化DAG工作流任务调度系统 本文会包含如下内容： 如何针对源代码进行调试 如何调试dolphinscheduler的监控中心服务 本篇文章适合人群：架构师、技术专家以及对任务调度非常感兴趣的高级工程师 本文以海豚1.3.5的源代码，分析如何搭建调试环境。 1 远程调试 为了理解源代码的执行过程，节省无用的
dolphinscheduler调试问题记录
九万里
01-17 338
dolphinscheduler调试问题记录
DolphinScheduler 2.x版本在本地idea开发调试的环境配置
huni的博客
02-18 2246
本地idea开发调试2.x版本的dolphinscheduler
一文读懂idea如何快速启动DolphinScheduler，本地debug，秒查线上问题(Linux/MacOS)
游语
04-20 2236
摘要： 接触DS时间也不短了，遇到的问题千奇百怪，啥样的都有，很多问题自己解决，也有很多问题通过官方渠道解决了。但是我们在排查的过程中，光看日志，看源码解决问题实在是过于辛酸。一般我们也会通过启用远程debug的方式去查问题，但是有时候又担心影响线上。所以我们可以选择搭建一套本地DS环境，快速复现并debug定位解决问题，这样对我们理解源码也非常有帮助。 前置条件 5.7或以上Mysql数据源，并初始化DS数据库 JDK (1.8+) : 本机必装，请安装好后在/etc/profile下配置 JAVA_H
DolphinScheduler3.0.1（数据质量）
无语梦醒的博客
03-15 2520
一开始我在数据质量的模块里找了半天如何创建监控任务，直到我在工作类型中看到DATA_QUALITY，我……核心配置项如下，不同的监控规则可以在数据质量的规则管理界面查看。
dolphinscheduler 3.0.1功能梳理及源码解读
09-29 1602
dolphinscheduler 3.0.1功能梳理及源码解读
dolphinscheduler 3.0.1数据质量
10-26 3817
校验公式：[校验方式][操作符][阈值]，如果结果为真，则表明数据不符合期望，执行失败策略校验方式：[Expected-Actual][期望值-实际值] [Actual-Expected][实际值-期望值][Actual/Expected][实际值/期望值]x100%[(Expected-Actual)/Expected][(期望值-实际值)/期望值]x100%操作符：=、>、>=、
DolphinScheduler（apache-dolphinscheduler-3.0.0-beta-1-bin.tar.gz
06-23
Apache DolphinScheduler（apache-dolphinscheduler-3.0.0-beta-1-bin.tar.gz）是一个分布式易扩展的可视化DAG工作流任务调度开源系统。解决数据研发ETL 错综复杂的依赖关系，不能直观监控任务健康状态等问题。...
apache-dolphinscheduler-3.0.0-bin.tar.gz
09-14
apache-dolphinscheduler-3.0.0-bin.tar.gz
dolphinscheduler_dindgding_monitoring-1.0-SNAPSHOT.jar
09-03
dolphinscheduler_dindgding_monitoring-1.0-SNAPSHOT
PHPRPC远程过程调用协议 v3.0.1
05-08
PHPRPC是一个轻型的、安全的、跨网际的、跨语言的、跨平台的、跨环境的、跨域的、支持复杂对象传输的、支持引用参数传递的、支持内容输出重定向的、支持分级错误处理的、支持会话的、面向服务的高性能远程过程调用...
Lean Touch 3.0.1
04-01
Lean Touch 3.0.1
解决IDEA菜单栏找不到VCS的问题，且使用IDEA推送新项目到托管仓库
qq_42390993的博客
05-28 573
解决IDEA菜单栏找不到VCS的问题，且使用IDEA推送新项目到托管仓库
IntelliJ IDEA安装
最新发布
qq_44624290的博客
06-04 761
IDEA(https://www.jetbrains.com/idea/)是 JetBrains 公司的产品，公司旗下还有其它产品，比如：➢ WebStorm：用于开发 JavaScript、HTML5、CSS3 等前端技术；➢ PyCharm：用于开发 python➢ PhpStorm：用于开发 PHP➢ RubyMine：用于开发 Ruby/Rails➢ AppCode：用于开发 Objective - C/Swift➢ CLion：用于开发 C/C++
Idea可以运行Python！
weixin_45728126的博客
05-29 216
以下这篇文章为基础教程：idea编写运行python_idea创建python项目-CSDN博客
杨校老师课题之基于Idea的SSM实训项目案例开发之在线手机商城开发(一)【非常适合初学者】
杨校的博客
05-29 206
本文版权归作者所有，欢迎转载，但未经作者同意必须保留此段声明，且在文章页面明显位置给出, 如有问题， 可邮件（35725672@qq.com）咨询。分享是快乐的，也见证了个人成长历程，文章大多都是工作经验总结以及平时学习积累，基于自身认知不足之处在所难免，也请大家指正，共同进步。在main目录下创建两个目录，分别是java、resources。出处： https://mryang.blog.csdn.net。○ 全局配置： 所有新建的项目都会采用这个配置的内容。● 在如下界面进行的操作就是全局配置。
dolphinscheduler 3.0.1版本配置资源中心
03-29
1. 下载并安装Hadoop 下载Hadoop并解压缩到指定目录，配置Hadoop环境变量。 2. 下载并安装Zookeeper 下载Zookeeper并解压缩到指定目录，配置Zookeeper环境变量。 3. 下载并安装FastDFS 下载FastDFS并解压缩到指定目录，配置FastDFS环境变量。 4. 配置FastDFS 在FastDFS的安装目录下找到conf目录，将tracker.conf和storage.conf复制到另一个目录下作为配置文件。 修改tracker.conf和storage.conf配置文件中的IP地址和端口号。 启动tracker和storage服务： 进入FastDFS的安装目录，执行以下命令： ./trackerd /etc/fdfs/tracker.conf start ./storaged /etc/fdfs/storage.conf start 5. 配置dolphinscheduler 进入dolphinscheduler的安装目录，编辑conf/dolphinscheduler.properties文件。 配置资源中心相关属性： ``` # resource center properties ds.resourcemanager.url=http://localhost:8032 ds.resourcemanager.scheduler.address=http://localhost:8030 ds.resourcemanager.webapp.address=http://localhost:8088 ds.resourcemanager.webapp.https.address=https://localhost:8090 ds.resourcemanager.principal=hadoop/_HOST@EXAMPLE.COM ds.resourcemanager.keytab=/etc/security/keytabs/hdfs.headless.keytab ds.resourcemanager.default.queue=root.default ds.resourcemanager.fs.defaultFS=hdfs://localhost:9000 ds.fastdfs.tracker_servers=192.168.1.100:22122 ds.fastdfs.connect_timeout=5000 ds.fastdfs.network_timeout=30000 ds.fastdfs.charset=UTF-8 ds.fastdfs.http_anti_steal_token=false ds.fastdfs.http_secret_key=FastDFS1234567890 ds.fastdfs.http_tracker_http_port=8080 ds.fastdfs.tracker_http_port=8080 ds.fastdfs.http_tracker_https_port=8081 ds.fastdfs.tracker_https_port=8081 ``` 其中： - ds.resourcemanager.url：Hadoop的ResourceManager地址。 - ds.resourcemanager.scheduler.address：Hadoop的ResourceManager的scheduler地址。 - ds.resourcemanager.webapp.address：Hadoop的ResourceManager的webapp地址。 - ds.resourcemanager.webapp.https.address：Hadoop的ResourceManager的https地址。 - ds.resourcemanager.principal：Hadoop的ResourceManager的Kerberos principal。 - ds.resourcemanager.keytab：Hadoop的ResourceManager的Kerberos keytab文件路径。 - ds.resourcemanager.default.queue：Hadoop的ResourceManager的默认队列。 - ds.resourcemanager.fs.defaultFS：Hadoop的FileSystem的默认FileSystem。 - ds.fastdfs.tracker_servers：FastDFS的tracker服务器地址，多个地址用逗号分隔。 - ds.fastdfs.connect_timeout：FastDFS客户端连接超时时间，单位为毫秒。 - ds.fastdfs.network_timeout：FastDFS客户端网络超时时间，单位为毫秒。 - ds.fastdfs.charset：FastDFS客户端字符集。 - ds.fastdfs.http_anti_steal_token：FastDFS客户端是否开启防盗链。 - ds.fastdfs.http_secret_key：FastDFS客户端的secret_key。 - ds.fastdfs.http_tracker_http_port：FastDFS的tracker服务器的http端口。 - ds.fastdfs.tracker_http_port：FastDFS的tracker服务器的http端口。 - ds.fastdfs.http_tracker_https_port：FastDFS的tracker服务器的https端口。 - ds.fastdfs.tracker_https_port：FastDFS的tracker服务器的https端口。 6. 启动dolphinscheduler 进入dolphinscheduler的bin目录，执行以下命令： ./dolphinscheduler-daemon.sh start resourcemanager 启动成功后，可以访问http://localhost:12345/resourcemanager进行资源中心的管理。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

韧小钊

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值