分布式调度平台的使用

最新推荐文章于 2024-07-11 17:24:34 发布
最新推荐文章于 2024-07-11 17:24:34 发布
阅读量406 收藏 3
点赞数 12
分类专栏： 调度器 文章标签： java 服务器 前端
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_74356429/article/details/137842670
版权

一、代码

1 、引入依赖

<dependency>
            <groupId>com.xuxueli</groupId>
            <artifactId>xxl-job-core</artifactId>
            <version>2.4.0</version>
        </dependency>

2、书写对应的执行任务，这里书写了三个任务

demoyuanyuanJobHandler，call-rabbitmq-yuan，call-rabbitmq-yuan-jiaohuanji
package com.yy.xxljob;

import cn.hutool.core.util.StrUtil;
import cn.hutool.http.HttpRequest;
import cn.hutool.http.Method;
import cn.hutool.json.JSONArray;
import cn.hutool.json.JSONObject;
import cn.hutool.json.JSONUtil;
import com.xxl.job.core.context.XxlJobHelper;
import com.xxl.job.core.handler.annotation.XxlJob;
import lombok.extern.slf4j.Slf4j;
import org.springframework.http.HttpHeaders;
import org.springframework.http.MediaType;
import org.springframework.http.ResponseEntity;
import org.springframework.stereotype.Component;

import java.nio.charset.StandardCharsets;
import java.util.Base64;
import java.util.HashMap;
import java.util.List;
import java.util.Map;

@Component
@Slf4j
public class OrderXxlJob {
    /**
     * 1、简单任务示例（Bean模式）
     */
    @XxlJob("demoyuanyuanJobHandler")//括号中填写任务名
    public void demoJobHandler() throws Exception {
        XxlJobHelper.log("demoJobHandler 执行了");
        log.info("demoJobHandler 执行了");
    }

    /**
     * 2、检测队列中消息是否超过5任务
     */
   @XxlJob("call-rabbitmq-yuan")//括号中填写任务名
    public void demoJobHandler2() throws Exception {
        String param = XxlJobHelper.getJobParam();
        HashMap paramObj = JSONUtil.toBean(param, HashMap.class);
        Object host = paramObj.get("host");
        Object port = paramObj.get("port");
        String url  = StrUtil.format("http://{}:{}/api/queues/%2F/范鹏磊.%23",host,port);
        String body = HttpRequest.of(url).method(Method.GET).header("Authorization", "Basic Z3Vlc3Q6Z3Vlc3Q=").execute().body();

        JSONObject jsonObject = JSONUtil.parseObj(body);
        Object messages = jsonObject.get("messages");
        Object queueName = jsonObject.get("name");
        int messageCount = Integer.parseInt(messages.toString());
        if(messageCount >= 5){
            log.debug("报警-> 队列{},消息数量：{}",queueName,messageCount);
        } else {
            log.debug("正常");
        }


        log.info("参数:{}",param);
    }

//检查交换机的所有队列中消息是否超过5发送钉钉提醒任务
@XxlJob("call-rabbitmq-yuan-jiaohuanji")//括号中填写任务名
public void demoJobHandler3() throws Exception {
    String param = XxlJobHelper.getJobParam();
    HashMap paramObj = JSONUtil.toBean(param, HashMap.class);
    Object host = paramObj.get("host");  //http://192.168.11.99:15672/#/exchanges/%2F/ex.game
    Object port = paramObj.get("port");
    String url  = StrUtil.format("http://{}:{}/api/vhosts",host,port);
    String body = HttpRequest.of(url).method(Method.GET).header("Authorization", "Basic Z3Vlc3Q6Z3Vlc3Q=").execute().body();

    JSONArray queues = JSONUtil.parseArray(body);
    for (Object queue : queues) {
        JSONObject jsonObject = JSONUtil.parseObj(queue);
        Object name = jsonObject.get("name");
        Object messages = jsonObject.get("messages");
        Object queueName = jsonObject.get("name");
        int messageCount = Integer.parseInt(messages.toString());
        if(messageCount >= 5){
            sendDingDing(queueName.toString(),messages.toString());
            log.debug("钉钉报警-> 队列{},消息数量：{}",queueName,messageCount);
        } else {
            log.debug("正常");
        }
        log.info("参数:{}",param);
    }

    // Object messages = jsonObject.get("messages");
    // Object queueName = jsonObject.get("name");
    // int messageCount = Integer.parseInt(messages.toString());
    // if(messageCount >= 5){
    //     log.debug("报警-> 队列{},消息数量：{}",queueName,messageCount);
    // } else {
    //     log.debug("正常");
    // }


    log.info("参数:{}",param);
}

//钉钉发送消息的方法
    private void sendDingDing(String name,String message){
        String url = "https://oapi.dingtalk.com/robot/send?access_token=afa3850182a65faee2ee6913746793f65fb1f858bb7c921aaf5c7c49a9b33d9e";
        JSONObject msg = new JSONObject();
        String json= "{\n" +
                "    \"msgtype\": \"text\",\n" +
                "    \"text\": {\n" +
                "        \"content\": \"注意！！！！！队列"+name+"有"+message+"条消息，请及时审核处理1111\"\n" +
                "    }\n" +
                "}";
        String result = HttpRequest.post(url)
                .body(json)
                .execute().body();
        log.debug("警告发送成功，队列{}的消息{}条，超过了限制",name,message);
    }


}

 在application.properties文件中配置参数

spring.application.name=yuan-yuan

#日志配置
logging.level.root=error
logging.level.com.yy = debug
#
## Spring Task 调度线程池大小，默认为 1，建议根据任务量进行调整。
## 如果不开启异步，可以理解为工厂经理们亲自处理任务
#spring.task.scheduling.thread-name-prefix = jingli-
#spring.task.scheduling.pool.size = 1
##当开启异步后，@EnableAsync 经理就不再干活了，而是工人干，经理只负责调度，管理
#
## 配置工人，调度线程名称前缀
#spring.task.execution.thread-name-prefix = worker-
## 任务执行线程池配置,核心线程池大小，默认为 8，长工2个
#spring.task.execution.pool.core-size= 2
## 最大线程池大小，可以根据实际情况调整，临时工+长工最多为6个
#spring.task.execution.pool.max-size= 6
## 线程空闲时间（超时时间），超过这个时间没有任务则关闭线程，单位秒
#spring.task.execution.pool.keep-alive= 60s
## 队列容量，用于存放等待执行的任务，如果不指定，int.max
#spring.task.execution.pool.queue-capacity= 2
## 拒绝策略，当线程池和队列都满时如何处理新提交的任务，可选值有 AbortPolicy, CallerRunsPolicy 等
#spring.task.execution.pool.rejection-policy= CallerRunsPolicy


#定时任务
spring.task1.period=5000

#xxl-job配置
### xxl-job admin address list, such as "http://address" or "http://address01,http://address02"
xxl.job.admin.addresses=http://192.168.11.99:8080/xxl-job-admin

### xxl-job, access token
xxl.job.accessToken=default_token

### xxl-job executor appname
xxl.job.executor.appname=yuanyuan
### xxl-job executor registry-address: default use address to registry , otherwise use ip:port if address is null
xxl.job.executor.address=
### xxl-job executor server-info
xxl.job.executor.ip=

### xxl-job executor log-path
xxl.job.executor.logpath=/data/applogs/xxl-job/jobhandler
### xxl-job executor log-retention-days
xxl.job.executor.logretentiondays=30

 执行器配置，xxlJobConfig

package com.yy.xxljob;

import cn.hutool.core.util.StrUtil;
import cn.hutool.http.HttpRequest;
import cn.hutool.http.Method;
import cn.hutool.json.JSONArray;
import cn.hutool.json.JSONObject;
import cn.hutool.json.JSONUtil;
import com.xxl.job.core.context.XxlJobHelper;
import com.xxl.job.core.handler.annotation.XxlJob;
import lombok.extern.slf4j.Slf4j;
import org.springframework.http.HttpHeaders;
import org.springframework.http.MediaType;
import org.springframework.http.ResponseEntity;
import org.springframework.stereotype.Component;

import java.nio.charset.StandardCharsets;
import java.util.Base64;
import java.util.HashMap;
import java.util.List;
import java.util.Map;

@Component
@Slf4j
public class OrderXxlJob {
    /**
     * 1、简单任务示例（Bean模式）
     */
    @XxlJob("demoyuanyuanJobHandler")//括号中填写任务名
    public void demoJobHandler() throws Exception {
        XxlJobHelper.log("demoJobHandler 执行了");
        log.info("demoJobHandler 执行了");
    }

    /**
     * 2、检测队列中消息是否超过5任务
     */
   @XxlJob("call-rabbitmq-yuan")//括号中填写任务名
    public void demoJobHandler2() throws Exception {
        String param = XxlJobHelper.getJobParam();
        HashMap paramObj = JSONUtil.toBean(param, HashMap.class);
        Object host = paramObj.get("host");
        Object port = paramObj.get("port");
        String url  = StrUtil.format("http://{}:{}/api/queues/%2F/队列名",host,port);
        String body = HttpRequest.of(url).method(Method.GET).header("Authorization", "Basic Z3Vlc3Q6Z3Vlc3Q=").execute().body();

        JSONObject jsonObject = JSONUtil.parseObj(body);
        Object messages = jsonObject.get("messages");
        Object queueName = jsonObject.get("name");
        int messageCount = Integer.parseInt(messages.toString());
        if(messageCount >= 5){
            log.debug("报警-> 队列{},消息数量：{}",queueName,messageCount);
        } else {
            log.debug("正常");
        }


        log.info("参数:{}",param);
    }

//检查交换机的所有队列中消息是否超过5发送钉钉提醒任务
@XxlJob("call-rabbitmq-yuan-jiaohuanji")//括号中填写任务名
public void demoJobHandler3() throws Exception {
    String param = XxlJobHelper.getJobParam();
    HashMap paramObj = JSONUtil.toBean(param, HashMap.class);
    Object host = paramObj.get("host");  //http://192.168.11.99:15672/#/exchanges/%2F/ex.game
    Object port = paramObj.get("port");
    String url  = StrUtil.format("http://{}:{}/api/queues",host,port);
    String body = HttpRequest.of(url).method(Method.GET).header("Authorization", "Basic Z3Vlc3Q6Z3Vlc3Q=").execute().body();

    JSONArray queues = JSONUtil.parseArray(body);
    for (Object queue : queues) {
        JSONObject jsonObject = JSONUtil.parseObj(queue);
        Object name = jsonObject.get("name");
        Object messages = jsonObject.get("messages");
        Object queueName = jsonObject.get("name");
        int messageCount = Integer.parseInt(messages.toString());
        if(messageCount >= 5){
            sendDingDing(queueName.toString(),messages.toString());
            log.debug("钉钉报警-> 队列{},消息数量：{}",queueName,messageCount);
        } else {
            log.debug("正常");
        }
        log.info("参数:{}",param);
    }

    // Object messages = jsonObject.get("messages");
    // Object queueName = jsonObject.get("name");
    // int messageCount = Integer.parseInt(messages.toString());
    // if(messageCount >= 5){
    //     log.debug("报警-> 队列{},消息数量：{}",queueName,messageCount);
    // } else {
    //     log.debug("正常");
    // }


    log.info("参数:{}",param);
}

//钉钉发送消息的方法
    private void sendDingDing(String name,String message){
        String url = "https://oapi.dingtalk.com/robot/send?access_token=afa3850182a65faee2ee6913746793f65fb1f858bb7c921aaf5c7c49a9b33d9e";
        JSONObject msg = new JSONObject();
        String json= "{\n" +
                "    \"msgtype\": \"text\",\n" +
                "    \"text\": {\n" +
                "        \"content\": \"注意！！！！！队列"+name+"有"+message+"条消息，请及时审核处理1111\"\n" +
                "    }\n" +
                "}";
        String result = HttpRequest.post(url)
                .body(json)
                .execute().body();
        log.debug("警告发送成功，队列{}的消息{}条，超过了限制",name,message);
    }


}

二、开启任务

1、点击添加执行器，AppName要应项目中配置的名称

 

 2、新建任务

监控队列时填写任务参数和任务名

查看执行日志

 

牛奶味的团子
关注
  • 12
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
浅谈分布式调度
快乐小码农的博客
10-07 6775
浅谈分布式调度 什么是分布式调度？ 要说分布式调度，那么先来谈下什么是分布式。 分布式：百度百科上是这么说的，当计算机的程序和数据通过网络分布在多于一个的计算机上时，计算就成为“分布式的”。通俗的说，平台是分布式部署的，各个节点之间可以无状态和无限的水平扩展。 那么什么是分布式调度？分布式调度就是运⾏在分布式集群环境下的调度任务。它有两层含义： 同⼀个定时任务程序部署多份，只应该有⼀个定时任务在执⾏ 定时任务的拆分，即为把⼀个⼤的作业任务拆分为多个⼩的作业任务，同时执⾏ 下面我们通过一个图来简单了解下分
分布式调度的理解
charnliu的博客
10-18 3021
1 概念 分布式调度，指的是在分布式条件下，定时任务的执行和管理 定时任务是一个很常见的场景，比如： 订单审核、出库 订单超时⾃动取消、⽀付退款 礼券同步、⽣成、发放作业 物流信息推送、抓取作业、退换货处理作业 数据积压监控、⽇志监控、服务可⽤性探测作业 定时备份数据 ⾦融系统每天的定时结算 数据归档、清理作业 报表、离线数据分析作业 2 分布式调度的特性。 主要有两个特性 运⾏在分布式集群环境下的调度任务，同⼀个定时任务程序可以部署多份，但是只应该有⼀个定时任务在执行 可以把⼀个⼤的作业任务拆分为多
什么是分布式、什么是分布式调度、分布式调度要实现的目标
郝开的博客
11-10 894
软件架构的发展过程，单体架构→单体集群架构→分布式架构→微服务架构。分布式架构就是将单体结构拆分为若干服务，服务之间通过网络交互来完成用户的业务处理，以广泛的电商来说，可以将一个单体架构拆分为下面的分布式架构。分布性：每个部分都可以独立部署，服务之间交互通过网络进行通信，比如上图的订单服务和商品服务伸缩性：每个部分都可以集群方式部署，并可针对部分结点进行硬件及软件扩容，具有一定的伸缩能力高可用：每个部分都可以集群拆分，保证高可用。
分布式任务调度平台一站式讲解
Gblfy_Blog
03-24 2390
文章目录一、传统的定时任务1. 传统的定时任务存在那些缺点2. 定时任务集群幂等性问题二、传统定时任务的实现方案2.1. 多线程2.2. TimeTask2.3. 线程池2.4. SpringBoot注解形式2.5. 基于Quartz三、分布式任务调度平台架构设计原理3.1. xxl-job项目模块讲解3.2. 最佳实战3.3. Xxl-job定时任务框架实现原理四、常见面试题4.1. XXL-JOB与ElasticJob区别之间区别4.2. 分布式任务调度分片集群策略原理4.3. 如何保证任务调度平台
分布式调度
幕峰的博客
01-19 3786
分布式调度 本博文可以分三部分进行学习，分布式调度的了解，Quartz 使用，Elastic-Job 使用。 分布式调度定义 分布式任务调度有两层含义 运行在分布式集群环境下的调度任务（同一个定时任务部署多分，只应该有一个定时任务在执行） 分布式调度–> 定时任务的分布式 --> 定时任务的拆分 （把一个大的作业任务拆分为多个小的作业） 定时任务的场景 每个一定时间，特定某一时刻执行 订单审核、出库 订单超时⾃动取消、⽀付退款 礼券同步、⽣成、发放作业 物流信息推送、抓取作业、退换货处
面向大数据的分布式调度
02-25
本文从调度、分布式调度的特征展开，再对大数据调度个性化特征的一些阐述，由满足大数据使用的架构和业务场景的需求上娓娓道来，从实践的角度分享如何打造一个高可用、高效率、灵活性的大数据调度平台。从上个世纪50...
分布式任务调度中心平台使用教程.pdf
09-10
本文将详细介绍如何使用一个典型的分布式任务调度中心平台，包括任务的创建、启动、监控以及执行器的管理。 首先，要使用调度中心平台，我们需要确保“调度中心”和“执行器”项目已经成功部署并启动。调度中心是...
后端开发-基于Java的分布式调度后端实现.zip
04-02
在Java环境下，我们可以使用Quartz或ElasticJob等库来实现分布式调度。 三、Quartz分布式调度 Quartz是一个开源的作业调度框架，支持复杂的调度逻辑和触发器。通过实现Clustered Quartz，可以创建一个集群，使得多...
Antares分布式任务调度平台
08-08
Antares分布式任务调度平台是一款基于Java开发的高效、稳定且可扩展的任务调度系统，专为大规模分布式环境设计。它能够帮助企业在复杂的业务场景下实现任务的自动化调度，提高整体工作效率和资源利用率。作为一款...
配置Java开发环境
Broken_x的博客
07-10 1257
Java开发环境配置
关于static定义初始化块和静态变量以及初始化块的执行顺序问题
你我约定有三的博客
07-08 382
第二步：在类加载的时候，按照从上到下执行static修饰的代码，此时执行static Test2 test1 = new Test2()，也就是创建出一个名为test1的对象。第六步：此时除了main方法，所有由static修饰的代码全部执行完毕(static修饰的代码只执行一次)，类初始化完成，开始执行main方法，main方法中只有一条语句(中的代码,此时输出aa以及a的值(由于第一步没赋初值，并且给了默认值为0 所以输出0)//首先输出a的值为10 然后输出bb，最后将a的值定义为11。
java Object 转 Integer
servepeople的博客
07-09 1352
在 Java 中，可以通过多种方法将一个Object转换为Integer。
解决分布式环境下session共享问题
shenxiaomo1688的博客
07-06 2364
在分布式环境下，session会存在两个问题第一个问题:不同域名下，浏览器存储的jsessionid是没有存储的。比如登录时认证服务auth.gulimall.com存储了session，但是搜索服务search.gulimall.com是没有这个session的；
已解决 javax.xml.transform.TransformerFactoryConfigurationError 异常的正确解决方法，亲测有效！！！
小明的Java问道之路
07-08 1977
已解决 javax.xml.transform.TransformerFactoryConfigurationError 异常的正确解决方法，亲测有效！！！
java占位符替换五种方式
weixin_61478518的博客
07-08 472
在业务开发中，经常需要输出文本串。其中，部分场景下大部分文本内容是一样的，只有少部分点是不一样。简单做法是直接拼接字段，但是这会有个问题。后面如果想要修改内容，那么每个地方都要修改，这不符合设计模式中的开闭原则，面向应该对扩展开放，对修改关闭。如何解决这个问题？先来看现实生活中的例子，个人信息填写。一般会要填写表格，已经定义好了姓名，性别，年龄等字段，只要填写对应的个人信息就好了。在程序开发中，我们会预先定义好一个字符串模板，需要改动的点使用占位符。
Java方法练习-双色球彩票系统
最新发布
T1798218285的博客
07-11 208
红色球号码从1-33中选择；蓝色球号码从1-16中选择。投注号码由6个红色球号码和1个蓝色球号码组成。三等奖 5+1 / 5+0 3000。四等奖4+1 / 4+0 200。六等奖1+1 / 1+0 5。一等奖6+1 1000w。二等奖6+0 500w。五等奖3+1 / 2+1。
AI技术的转变：从辨别式到生成式
学IT，找陈寒
07-09 3188
李彦宏在2024世界人工智能大会上的发言，提醒我们在AI技术发展的道路上，不要盲目追求技术本身或表面的用户数据，而应更多地关注技术的实际应用和产业价值。在大模型技术与个性化应用之间找到平衡，将是未来发展的关键。作为AI从业者和技术爱好者，我们应以务实的态度，探索AI技术在各个领域的实际应用，为产业发展和社会进步贡献力量。通过李彦宏的发言，我深刻认识到AI技术发展的方向和挑战，也更加坚定了自己在这一领域继续探索和创新的信心。未来，愿我们共同努力，推动AI技术更好地服务于社会和产业，为人类创造更美好的未来。
springboot中抽离日志
qq_24223159的博客
07-08 359
【代码】springboot中抽离日志。
JavaSE 面向对象程序设计进阶 IO流 字节流详解 抛出异常
牛马程序员的博客
07-10 742
存储和读取数据的解决方案内存中数据不能永久化存储 程序停止运行 数据消失File只能对文件本身进行操作 不能读写文件里存储的数据读写数据必须要有IO流可以把程序中的数据保存到文件当中还可以把本地文件中的数据读取到数据当中。
分布式调度xxl-job
01-17
分布式调度XXL-Job是一个专为互联网企业设计的分布式任务调度平台，它的核心目标在于提供快速的开发、简单的学习曲线、轻量级的特性以及良好的扩展性。该系统广泛应用于周期性业务场景，如消息推送、支付对账、数据...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值