DolphinScheduler技术分析（四）

最新推荐文章于 2024-09-09 19:35:23 发布
最新推荐文章于 2024-09-09 19:35:23 发布
阅读量410 收藏
点赞数
分类专栏： DophinScheduler 文章标签： java
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Choozz1/article/details/121071664
版权
本文深入分析DolphinScheduler的alert模块，包括其基本结构、plugin、processor、runner、utils等组件的功能，以及如何实现预警功能和管理警报插件，如钉钉、email等。
摘要由CSDN通过智能技术生成

 2021SC@SDUSC

DophinScheduler alert模块代码结构解析

1.基本结构

该模块包含预警相关的功能和方法，提供预警相关接口，接口主要包括警告两种类型的警告数据的存储、查询和通知功能。

 

2.plugin文件夹

用来加载已配置好的警报插件并管理它们。

 

3.processor文件夹

包含警报插件所需的各种处理器。 

4.runner文件夹

最低0.47元/天 解锁文章
Choozz1
关注
专栏目录
DolphinScheduler技术分析（七）
Choozz1的博客
11-21 269
2021SC@SDUSC
DolphinScheduler技术分析（五）
Choozz1的博客
11-14 414
2021SC@SDUSC
DolphinScheduler 3.1.4详细教程
Aidon博客
05-06 1万+
大数据目前比较火爆的任务调度平台DolphinScheduler，一篇详细讲解DolphinScheduler的教程。DolphinScheduler 3.1.4详细教程共计分为四章： 第一章 DolphinScheduler介绍 第二章 DolphinScheduler系统架构 第三章 DolphinScheduler安装部署，包含DolphinScheduler单机版快速安装部署和DolphinScheduler集群安装部署 第四章 DolphinScheduler应用，包含工作流定义、任务、数据质量等
DolphinScheduler的优点以及多种部署模式的介绍和优缺点
最新发布
weixin_66276176的博客
09-09 1189
DolphinScheduler 以 DAG（Directed Acyclic Graph，DAG）流式方式组装任务，可以及时监控任务的执行状态，支持重试、指定节点恢复失败、暂停、恢复、终止任务等操作。这种模式适用于生产环境，可以配置多个Master和多个Worker，通常用于处理复杂的工作流和大量数据处理任务。配置复杂：集群配置相对复杂，需要设置ZooKeeper集群，并在Master和Worker节点上配置相应的参数。高可用性：多个服务器节点可以提供高可用性，一个节点失效不会影响整个系统的运行。
DolphinScheduler技术分析（八）
Choozz1的博客
11-28 693
2021SC@SDUSC
DolphinScheduler技术分析（十一）
Choozz1的博客
12-19 451
2021SC@SDUSC
DolphinScheduler技术分析（三）
Choozz1的博客
10-24 384
2021SC@SDUSC DophinScheduler dao模块下 实体详细解析 下面来分析一下几个重要实体的内容 1. AccessToken实体主要是用来存放访问令牌的相关数据，该实体属性主要有primary_key（主键）、user_id、token（一串字符）、expire_time（失效时间）、create_time（创建时间）、update_time（更新时间）、userName。 2.alert相关的实体 此实体包含属性有primary_key、title（...
DolphinScheduler技术分析（一）
Choozz1的博客
10-10 1061
2021SC@SDUSC 一.DolphinScheduler系统架构图： 二.模块划分： 1.dolphinscheduler-ui 前端页面模块 2.dolphinscheduler-server 核心模块。包括master/worker等功能 3.dolphinscheduler-common 公共模块。公共方法或类 4.dolphinscheduler-api Restful接口。前后端交互层，与master/worker交互等功能5.dolphinscheduler-dao 数.
DolphinScheduler技术分析（二）
Choozz1的博客
10-17 388
2021SC@SDUSC DophinScheduler dao模块代码结构解析 1.基本结构 dolphinscheduler-dao模块是数据操作层。主要包含实体定义、数据存储相关代码。 2.datasource文件夹 存放数据源连接工厂文件，实现连接数据源，获取数据源、映射器（mapper）以及SqlSessionFactory对象，创建SqlSession对象操作数据库。 3.entity文件夹 存放各种与数据库操作相关实体的定义，过后再详细分析。 4....
DolphinScheduler技术分析（十）
Choozz1的博客
12-12 860
2021SC@SDUSC
DolphinScheduler技术分析（九）
Choozz1的博客
12-05 424
2021SC@SDUSC
dolphinscheduler 2.0.4 告警alert-email使用
03-02 3548
海豚调度2.0.4 告警alert-email使用告警实例查询不到插件启动alert服务问题记录UnknownHostException虚拟机不通外网导致结果日志邮箱 告警实例查询不到插件 服务未启动，数据库没有初始化数据 启动alert服务 [dolphinscheduler@host1 bin]$ sh dolphinscheduler-daemon.sh start alert-server Begin start alert-server...... starting alert-server, l
DolphinScheduler告警模块源码分析
皮皮虾的博客
08-10 1462
DolphinScheduler 版本 1.3.5版本，现在时间为2021年8月10 日。此时为次新版本 DolphinScheduler 服务 MasterServer ----- master服务 WorkerServer ----- worker服务 LoggerServer ----- logger服务 ApiApplicationServer ----- api服务 AlertServer ----- alert服务 ...
杭州思科对 Apache DolphinScheduler Alert 模块的改造
Apache DolphinScheduler开源社区
04-07 2072
点击上方 蓝字关注我们杭州思科已经将 Apache DolphinScheduler 引入公司自建的大数据平台。目前，杭州思科大数据工程师 李庆旺 负责 Alert 模块的改造已基本完成，以更完善的 Alert 模块适应实际业务中对复杂告警的需求。 class="video_iframe rich_pages" data-vidtype="2" data-mpvid="wxv_2289233522324406276" data-cover="http%3A%2F%2Fmmbiz
企业级应用如何用 Apache DolphinScheduler 有针对性地进行告警插件开发？
Apache DolphinScheduler开源社区
05-23 782
点击蓝字 关注我们作者 | 刘宇星Apache DolphinScheduler的2.0.1版本加入了插件化架构改进，将任务、告警组件、数据源、资源存储、注册中心等都将被设计为扩展点，以此来提高 Apache DolphinScheduler 本身的灵活性和友好性。在企业级应用中不同公司的告警需求可能各有不同，针对性的告警插件开发可以很好地解决这一痛点。版本：3.1.2告警插件开发先来看下aler...
插件扩充，血缘耦合系统，生产环境优化，提高Apache DolphinScheduler易用性的应用改造...
Apache DolphinScheduler开源社区
05-09 1797
Apache DolphineScheduler作为新一代的大数据任务调度系统，是为了让调度变得更加容易。为了更好的满足用户使用平台，Apache DolphineScheduler Contributor 张柏强针对一些现有的易用性及优化问题，比如任务扩展、任务血缘耦合、任务日志优化等，提供了一些解决方案，并在 Apache DolphineScheduler 4月线...
任务调度器-DolphinScheduler配置告警
白杨Shayne的博客
06-01 5152
调度器必不可少的就是任务失败告警，前面已经安装好了DolphinScheduler，今天在海豚上配置一下告警试试，海豚支持短信告警、邮件告警等等，告警类型非常丰富，因为工作上用到邮件和钉钉进行沟通交流，所以今天试试邮件告警以及钉钉告警配置。
Apache DolphinScheduler——开源大数据调度器神器（国人之光）
男神的专栏
05-31 1万+
本文已参与「新人创作礼」活动，一起开启掘金创作之路。
主流大数据调度工具对比
热门推荐
qq_40822132的博客
11-22 2万+
大数据环境下，调度工具比不可少，离线批任务和准实时任务都需要调度去驱动。下文介绍主流大数据调度工具对比DolphinScheduler 、Azkaban、Airflow、Oozie、Xxl-job 非常推荐Apache DolphinScheduler —— 调度选的好，下班回家早；调度选的对，半夜安心睡； Apache DolphinScheduler是一个分布式去中心化，易扩展的可视化DAG工作流任务调度系统。致力于解决数据处理流程中错综复杂的依赖关系，使调度系统在数据处理流程中开箱即用，目
dolphinscheduler 源码分析
10-18
关于dolphinscheduler的源码分析，我可以给你一些简单的介绍。 DolphinScheduler是一个分布式的、易扩展的、高可用的、易维护的开源工作流调度系统，它支持多租户、多语言、多种任务类型，并且提供了丰富的监控和告...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值