DophinScheduler
文章平均质量分 66
Choozz1
这个作者很懒,什么都没留下…
展开
-
DolphinScheduler技术分析(十二)
2021SC@SDUSCDolphinScheduler任务日志打印功能分析(2)接上一篇logback.xml配置文件dolphinscheduler-daemon.sh文件中有一个关于日志的配置。-Dlogging.config=classpath:master_logback.xml有两个appender,其中TASKLOGFILE有一个比较关键的filter,用来区分workerlogfile这个appender的。两个appender,会通过filter分别筛选出各.原创 2021-12-27 21:49:17 · 1098 阅读 · 0 评论 -
DolphinScheduler技术分析(十一)
2021SC@SDUSC原创 2021-12-19 23:23:53 · 445 阅读 · 0 评论 -
DolphinScheduler技术分析(十)
2021SC@SDUSC原创 2021-12-12 20:07:13 · 852 阅读 · 0 评论 -
DolphinScheduler技术分析(九)
2021SC@SDUSC原创 2021-12-05 22:51:52 · 415 阅读 · 0 评论 -
DolphinScheduler技术分析(八)
2021SC@SDUSC原创 2021-11-28 16:49:07 · 677 阅读 · 0 评论 -
DolphinScheduler技术分析(七)
2021SC@SDUSC原创 2021-11-21 23:58:24 · 264 阅读 · 0 评论 -
DolphinScheduler技术分析(六)
2021SC@SDUSC原创 2021-11-14 23:00:03 · 332 阅读 · 0 评论 -
DolphinScheduler技术分析(五)
2021SC@SDUSC原创 2021-11-14 22:57:15 · 405 阅读 · 0 评论 -
DolphinScheduler技术分析(四)
2021SC@SDUSCDophinScheduler alert模块代码结构解析1.基本结构原创 2021-10-31 23:43:09 · 403 阅读 · 0 评论 -
DolphinScheduler技术分析(三)
2021SC@SDUSCDophinScheduler dao模块下 实体详细解析下面来分析一下几个重要实体的内容1.AccessToken实体主要是用来存放访问令牌的相关数据,该实体属性主要有primary_key(主键)、user_id、token(一串字符)、expire_time(失效时间)、create_time(创建时间)、update_time(更新时间)、userName。2.alert相关的实体此实体包含属性有primary_key、title(...原创 2021-10-24 23:59:08 · 375 阅读 · 0 评论 -
DolphinScheduler技术分析(二)
2021SC@SDUSCDophinScheduler dao模块代码结构解析1.基本结构dolphinscheduler-dao模块是数据操作层。主要包含实体定义、数据存储相关代码。2.datasource文件夹存放数据源连接工厂文件,实现连接数据源,获取数据源、映射器(mapper)以及SqlSessionFactory对象,创建SqlSession对象操作数据库。3.entity文件夹存放各种与数据库操作相关实体的定义,过后再详细分析。4....原创 2021-10-17 23:48:20 · 383 阅读 · 0 评论 -
DolphinScheduler技术分析(一)
2021SC@SDUSC一.DolphinScheduler系统架构图:二.模块划分:1.dolphinscheduler-ui 前端页面模块2.dolphinscheduler-server 核心模块。包括master/worker等功能3.dolphinscheduler-common 公共模块。公共方法或类4.dolphinscheduler-api Restful接口。前后端交互层,与master/worker交互等功能5.dolphinscheduler-dao 数.原创 2021-10-10 23:43:22 · 1046 阅读 · 0 评论 -
DolphinScheduler综述报告
2021SC@SDUSC一.概述:Apache DolphinScheduler是一个分布式、去中心化、易扩展的可视化DAG工作流任务调度系统,其致力于解决数据处理流程中错综复杂的依赖关系,使调度系统在数据处理流程中开箱即用。二.必备软件安装:Mysql (5.5+)JDK (1.8+)ZooKeeper(3.4.6+)Hadoop(2.6+):选装, 如果需要使用到资源上传功能,MapReduce任务提交则需要配置 Hadoop(上传的资源文...原创 2021-09-30 17:44:15 · 9025 阅读 · 1 评论