Kubernetes v1.21.5部署xxl-job 2.3.1

已于 2022-09-18 20:58:29 修改
阅读量1k 收藏 1
点赞数
分类专栏： 问题记录 文章标签： kubernetes docker 容器
于 2022-09-18 15:21:49 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/TT1024167802/article/details/126918017
版权

目录

1、软件版本

2、制作xxl-job-admin的docker镜像

           Dockerfile：

           执行命令：

3、部署xxl-job

3.0、创建MySQL的xxl-job数据库，导入SQL脚本

3.1、xxl-job-admin的rabc.yaml

3.2、xxl-job-admin的config-map.yaml

3.3、xxl-job-admin的deployment.yaml

3.4、xxl-job-admin的service.yaml

3.5、容器启动日志

3.6、访问xxl-job-admin

4、部署executor执行器

 4.1、Dockerfile：xxl-job-executor-sample-springboot

构建镜像：

 4.2、部署xxl-job-executor-sample-springboot的pod

          4.3、部署xxl-job-executor-sample-springboot的服务

xxl-job-executor-sample-springboot启动日志

 4.4、xxl-job-admin页面新建执行器

自定义添加执行器在数据库的保存

等待一会儿，自动注册方式，Online的机器地址会显示出来 

5、执行测试

5.1、任务管理新建任务

5.2、运行模式GLUE(Java)，编辑内容

5.3、在容器中查看运行日志

5.4、xxl-job-admin调度日志

附录：

1、软件版本

Kubernetesv1.21.5
kubespherev3.2.1
xxl-jobv2.3.1
mysql5.7
xxl-job官网
 		分布式任务调度平台XXL-JOB (xuxueli.com)

2、制作xxl-job-admin的docker镜像

Dockerfile：

FROM java:8
MAINTAINER demo
RUN mkdir -p /app/config/
ENV MYPATH /app
WORKDIR $MYPATH
ENV PARAMS="--spring.config.location=file:/app/config/application.properties"
ENV TZ=PRC
RUN ln -snf /usr/share/zoneinfo/$TZ /etc/localtime && echo $TZ > /etc/timezone
ADD target/xxl-job-admin-*.jar app.jar
EXPOSE 8080
EXPOSE 6666
EXPOSE 9999
ENTRYPOINT ["sh","-c","java -jar $JAVA_OPTS -Xdebug -Xrunjdwp:transport=dt_socket,server=y,suspend=n,address=6666 app.jar $PARAMS"]

执行命令：

docker build -t zhxl1989/xxl-job:2.3.1 .
docker push zhxl1989/xxl-job:2.3.1

3、部署xxl-job

3.0、创建MySQL的xxl-job数据库，导入SQL脚本

3.1、xxl-job-admin的rabc.yaml

apiVersion: v1
kind: ServiceAccount
metadata:
  name: xxl-job
  namespace: default
---
apiVersion: rbac.authorization.k8s.io/v1
kind: RoleBinding
metadata:
  name: xxl-job
  namespace: default
roleRef:
  apiGroup: rbac.authorization.k8s.io
  kind: Role
  name: xxl-job
subjects:
- kind: ServiceAccount
  name: xxl-job
  namespace: default
---
kind: Role
apiVersion: rbac.authorization.k8s.io/v1
metadata:
  namespace: default
  name: xxl-job
rules:
- apiGroups: [""]
  resources: ["pods"]
  verbs: ["get", "watch", "list"]

3.2、xxl-job-admin的config-map.yaml

apiVersion: v1
kind: ConfigMap
metadata:
  name: xxl-job-config
  namespace: default
data:
  application.properties: |
    ### web
    server.port=${server.port}
    server.servlet.context-path=${server.servlet.context-path}
    
    ### actuator
    management.server.servlet.context-path=/actuator
    management.health.mail.enabled=false
    
    ### resources
    spring.mvc.servlet.load-on-startup=0
    spring.mvc.static-path-pattern=/static/**
    spring.resources.static-locations=classpath:/static/
    
    ### freemarker
    spring.freemarker.templateLoaderPath=classpath:/templates/
    spring.freemarker.suffix=.ftl
    spring.freemarker.charset=UTF-8
    spring.freemarker.request-context-attribute=request
    spring.freemarker.settings.number_format=0.##########

    ### mybatis
    mybatis.mapper-locations=classpath:/mybatis-mapper/*Mapper.xml
    #mybatis.type-aliases-package=com.xxl.job.admin.core.model

    ### xxl-job, datasource
    spring.datasource.url=${datasource.url}
    spring.datasource.username=${datasource.username}
    spring.datasource.password=${datasource.password}
    spring.datasource.driver-class-name=${datasource.driver.class.name}

    ### datasource-pool
    spring.datasource.type=com.zaxxer.hikari.HikariDataSource
    spring.datasource.hikari.minimum-idle=10
    spring.datasource.hikari.maximum-pool-size=30
    spring.datasource.hikari.auto-commit=true
    spring.datasource.hikari.idle-timeout=30000
    spring.datasource.hikari.pool-name=HikariCP
    spring.datasource.hikari.max-lifetime=900000
    spring.datasource.hikari.connection-timeout=10000
    spring.datasource.hikari.connection-test-query=SELECT 1
    spring.datasource.hikari.validation-timeout=1000

    ### xxl-job, email
    spring.mail.host=${mail.host}
    spring.mail.port=${mail.port}
    spring.mail.username=${mail.username}
    spring.mail.from=${mail.username}
    spring.mail.password=${mail.password}
    spring.mail.properties.mail.smtp.auth=${mail.properties.mail.smtp.auth}
    spring.mail.properties.mail.smtp.starttls.enable=${mail.properties.mail.smtp.starttls.enable}
    spring.mail.properties.mail.smtp.starttls.required=${mail.properties.mail.smtp.starttls.required}
    spring.mail.properties.mail.smtp.socketFactory.class=${mail.properties.mail.smtp.socketFactory.class}

    ### xxl-job, access token
    xxl.job.accessToken=default_token

    ### xxl-job, i18n (default is zh_CN, and you can choose "zh_CN", "zh_TC" and "en")
    xxl.job.i18n=${i18n}

    ## xxl-job, triggerpool max size
    xxl.job.triggerpool.fast.max=${fast}
    xxl.job.triggerpool.slow.max=${slow}

    ### xxl-job, log retention days
    xxl.job.logretentiondays=${logretentiondays}

3.3、xxl-job-admin的deployment.yaml

apiVersion: apps/v1
kind: Deployment
metadata:
  name: xxl-job
  namespace: default
spec:
  replicas: 1
  selector:
    matchLabels:
      app: xxl-job
  strategy:
    type: RollingUpdate
    rollingUpdate:
      maxUnavailable: 25%
      maxSurge: 25%
  revisionHistoryLimit: 10
  progressDeadlineSeconds: 600
  template:
    metadata:
      labels:
        app: xxl-job
        release: default
    spec:
      restartPolicy: Always
      terminationGracePeriodSeconds: 30
      dnsPolicy: ClusterFirst
      serviceAccountName: xxl-job
      serviceAccount: xxl-job
      securityContext: {}
      schedulerName: default-scheduler
      containers:
      - name: xxl-job
        image: zhxl1989/xxl-job:2.3.1
        imagePullPolicy: Always
        ports:
        - containerPort: 8080
          name: http
        - containerPort: 6666
          name: transport
        - containerPort: 9999
          name: executor
        resources:
            limits:
              cpu: '1'
              memory: 2Gi
              #nvidia.com/gpu: 4k
            requests:
              cpu: 500m
              memory: 1Gi
              #nvidia.com/gpu: 4k
        env:
        - name: server.port
          value: "8080"        
        - name: server.servlet.context-path
          value: "/xxl-job-admin"
        - name: datasource.url
          value: "jdbc:mysql://mysql.shenyu.svc.cluster.local:3306/xxl_job?useUnicode=true&characterEncoding=UTF-8&autoReconnect=true&serverTimezone=Asia/Shanghai"
        - name: datasource.username
          value: "root"
        - name: datasource.password
          value: "123456"
        - name: datasource.driver.class.name
          value: "com.mysql.cj.jdbc.Driver"
        - name: mail.host
          value: "smtp.qq.com"
        - name: mail.port
          value: "25"
        - name: mail.username
          value: "1024122298@qq.com"
        - name: mail.password
          value: "thomsesuwwfcf19jcnwrddi"
        - name: mail.properties.mail.smtp.auth
          value: "true"
        - name: mail.properties.mail.smtp.starttls.enable
          value: "true"
        - name: mail.properties.mail.smtp.starttls.required
          value: "true"
        - name: mail.properties.mail.smtp.socketFactory.class
          value: "javax.net.ssl.SSLSocketFactory"
        - name: i18n
          value: "zh_CN"
        - name: fast
          value: "200"
        - name: slow
          value: "100"
        - name: logretentiondays
          value: "30"      
        - name: real_host
          valueFrom:
            fieldRef:
              fieldPath: status.podIP
        volumeMounts:
        - mountPath: /etc/localtime
          name: volume-localtime
        - name: config
          mountPath: /app/config/application.properties
          #对应面下面的path，保持一致
          subPath: application.properties
        terminationMessagePath: /dev/termination-log
        terminationMessagePolicy: File
      volumes:
        - hostPath:
            path: /etc/localtime
            type: ''
          name: volume-localtime
        - name: config
          configMap:
            #对应config-map的名称
            name: xxl-job-config
            items:
            - key: application.properties
              #对应上面的subPath，保持一致
              path: application.properties

3.4、xxl-job-admin的service.yaml

apiVersion: v1
kind: Service
metadata:
  name: xxl-job
  namespace: default
  labels:
    service: xxl-job
spec:
  sessionAffinity: "ClientIP"
  ports:
    - name: transport
      port: 6666
      protocol: TCP
      targetPort: 6666
      nodePort: 30666
    - name: http
      port: 8080
      protocol: TCP
      targetPort: 8080
      nodePort: 30888
    - name: executor
      port: 9999
      protocol: TCP
      targetPort: 9999
      nodePort: 31999
  selector:
    app: xxl-job
  type: NodePort

3.5、容器启动日志

3.6、访问xxl-job-admin

任务调度中心

4、部署executor执行器

4.1、Dockerfile：xxl-job-executor-sample-springboot

FROM java:8
MAINTAINER demo
RUN mkdir -p /data/applogs/xxl-job/jobhandler
ENV MYPATH /
WORKDIR $MYPATH
ENV PARAMS=""
ENV TZ=PRC
RUN ln -snf /usr/share/zoneinfo/$TZ /etc/localtime && echo $TZ > /etc/timezone
ADD target/xxl-job-executor-sample-springboot-*.jar /app.jar
EXPOSE 8081
EXPOSE 9999
ENTRYPOINT ["sh","-c","java -jar $JAVA_OPTS /app.jar $PARAMS"]

构建镜像：

docker build -t zhxl1989/xxl-job-executor-sample-springboot:2.3.1 .
docker push zhxl1989/xxl-job-executor-sample-springboot:2.3.1

4.2、部署xxl-job-executor-sample-springboot的pod

apiVersion: apps/v1
kind: Deployment
metadata:
  name: xxl-job-executor-sample-springboot
  namespace: default
spec:
  replicas: 1
  selector:
    matchLabels:
      app: xxl-job-executor-sample-springboot
  strategy:
    type: RollingUpdate
    rollingUpdate:
      maxUnavailable: 25%
      maxSurge: 25%
  revisionHistoryLimit: 10
  progressDeadlineSeconds: 600
  template:
    metadata:
      labels:
        app: xxl-job-executor-sample-springboot
        release: default
    spec:
      restartPolicy: Always
      containers:
      - name: xxl-job-executor-sample-springboot
        image: zhxl1989/xxl-job-executor-sample-springboot:2.3.1
        imagePullPolicy: Always
        ports:
        - containerPort: 8081
          name: http
        - containerPort: 9999
          name: executor
        resources:
            limits:
              cpu: '1'
              memory: 2Gi
            requests:
              cpu: 500m
              memory: 1Gi
        volumeMounts:
        - mountPath: /etc/localtime
          name: volume-localtime
      volumes:
        - hostPath:
            path: /etc/localtime
            type: ''
          name: volume-localtime

4.3、部署xxl-job-executor-sample-springboot的服务

apiVersion: v1
kind: Service
metadata:
  name: xxl-job-executor-sample-springboot
  namespace: default
  labels:
    service: xxl-job-executor-sample-springboot
spec:
  ports:
    - name: executor
      port: 9999
      protocol: TCP
      targetPort: 9999
      nodePort: 30999
    - name: http
      port: 8081
      protocol: TCP
      targetPort: 8081
      nodePort: 30881
  selector:
    app: xxl-job-executor-sample-springboot
  type: NodePort

xxl-job-executor-sample-springboot启动日志

4.4、xxl-job-admin页面新建执行器

AppName为POD（xxl-job-executor-sample-springboot-54dfccf96b-8th69）的应用名称，名称自定义。

自定义添加执行器在数据库的保存

在表xxl_job_registry和xxl_job_group中可以看到添加的内容

等待一会儿，自动注册方式，Online的机器地址会显示出来 

5、执行测试

5.1、任务管理新建任务

5.2、运行模式GLUE(Java)，编辑内容

在右侧“操作”中选择GLUE IDE编辑内容，编辑后保存，每两分钟执行定时任务。

 5.3、在容器中查看运行日志

5.4、xxl-job-admin调度日志

附录：

docker stop test && docker rm test
docker images  | grep zhxl1989 | awk '{print $3}' | xargs docker rmi
docker build -t zhxl1989/xxl-job:2.3.1 .
docker push zhxl1989/xxl-job:2.3.1

kubectl describe pod xxl-job


docker stop test && docker rm test
docker run -itd --privileged=true --name test -p 8080:8080 -v /home/deploy/:/app/config/ --restart unless-stopped zhxl1989/xxl-job:2.3.1
docker logs -f test
	
kubectl exec -it dnsutils nslookup kubernetes.default



kubectl exec -it dnsutils -- cat /etc/resolv.conf

kubectl get pods --namespace=kube-system -l k8s-app=kube-dns


kubectl get endpoints coredns --namespace=kube-system


kubectl describe svc coredns --namespace=kube-system


kubectl -n kube-system edit configmap coredns


kubectl logs -f  --namespace=kube-system -l k8s-app=kube-dns



kubectl get svc kube-dns -n kube-system
kubectl get deployment coredns -n kube-system

青春不流名
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
使用Kubernetes部署xxl-job-admin及xxl-job执行器服务
迪八戈的博客
01-01 3097
使用Kubernetes部署xxl-job-admin及xxl-job执行器服务
分布式定时任务系列1：XXL-job安装
weigeshikebi的博客
12-26 719
分布式定时任务系列1：
XXL-Job 2.3.1 Docker部署
qq_43159578的博客
06-02 1121
xxl_job 部署
容器化部署（k8s）任务调度平台xxl-job（部署过程及踩坑问题记录）
多喝清晨的粥
11-15 4219
容器化部署（k8s）任务调度平台xxl-job（部署过程及踩坑问题记录）
docker安装xxl-job
码农的专栏
04-23 810
一、初始化db:https://codechina.csdn.net/mirrors/xuxueli/xxl-job/-/blob/2.2.0/doc/db/tables_xxl_job.sql 二、安装 docker pull xuxueli/xxl-job-admin:2.2.0 docker run -d \ -e PARAMS="--spring.datasource.url=jdbc:mysql://192.168.1.113:3306/xxl_job?useUnicode=true&amp
javax.servlet.jsp-api-2.3.1.jar
01-27
javax.servlet.jsp-api-2.3.1.jar
com.xuxueli xxl-job-core 2.2.0-SNAPSHOT 相关jar
11-10
依赖 <groupId>com.xuxueli</groupId> <artifactId>xxl-job-core <version>2.2.0-SNAPSHOT </dependency>
xxl-job-2.3.1
06-19
通过xxl-job-2.3.1的压缩包，我们可以获取到完整的源码、配置文件、文档等资源，便于学习、定制和部署。对于开发者而言，理解并掌握XXL-JOB的原理和使用方法，将有助于提升系统的自动化水平和运维效率。
xxl-job-2.3.0.tar.gz
08-24
3. **XXL-JOB Executor**：执行器是实际执行任务的组件，每个执行器都可以看作一个任务执行节点，它可以部署在多个服务器上，根据调度中心的指令执行任务。执行器支持多种任务类型，如Java、Shell、Python等，具备...
xxl-job-admin-2.3.0-SNAPSHOT
07-19
5. **任务执行器（Executor）**：XXL-JOB的核心组件之一，负责实际的任务执行，可以部署在多个节点上，实现任务的分布式执行。 6. **调度中心（Admin）**：XXL-JOB的另一个核心组件，负责任务的调度，包括任务的...
k8s中部署xxl-job2.3.0
进行中
11-17 3468
方式一：使用阿里云acr加ack部署 1、首先下载对应xxl，我是直接下载的镜像 地址https://gitee.com/xuxueli0323/xxl-job/tree/2.1.2 这个和我部署的版本不同，我用的是2.3.0的 首先是执行对应的数据库脚本 docker pullxuxueli/xxl-job-admin:2.3.0 2、我这里是将镜像推送到了阿里云的容器镜像服务 3、部署，我这里是手工部署，没有使用helm脚本，注意添加一个环境变量 方式二：使用本地集群部署 编...
微服务docker部署-jar包打包成docker镜像
orange_bug的博客
01-15 7241
1、打包微服务成单独的jar包 首先将自己的项目跳过test打包成jar，并在自己本地先用java -jar xxx.jar启动下，看是否可以启动。 随后将自己的jar包同级目录创建一个Dockerfile文件，并用notepad打开 文件无后缀。 Dockerfile: FROM openjdk:8-jre-alpine USER root #中文乱码问题 ENV LC_ALL en_US.UTF-8 ENV LANG en_US.UTF-8 # 时间 ENV TZ=PRC RUN ln -snf /us
docker 制作jar包 镜像 运行
厚积薄发博客
07-12 7348
先准备Docker文件 # 基础镜像是docker仓库的java:8 FROM java:8 # 作者签名 MAINTAINER lch ENV PARAMS="" ENV TZ=PRC RUN ln -snf /usr/share/zoneinfo/$TZ /etc/localtime && echo $TZ > /etc/timezone ADD xxl...
kubesphere多集群管理，实现kubernetes多集群同时应用部署
bacawa的博客
06-13 2978
kubesphere多集群管理,从集群创建，到多集群管理功能的完整性验证
openjdk镜像时区问题解决
zhanjixun
04-03 2051
在Dockerfile文件中添加 ENV TZ=PRC RUN ln -snf /usr/share/zoneinfo/$TZ /etc/localtime && echo $TZ > /etc/timezone FROM openjdk:8-jre-alpine ENV TZ=PRC RUN ln -snf /usr/share/zoneinfo/$TZ /etc/l...
SpringBoot整合XXL-Job
weixin_53998054的博客
07-27 5715
SpringBoot整合XXL-Job
分布式任务调度系统xxl-job搭建(基于docker)
shykevin的博客
01-21 7139
分布式任务调度系统xxl-job搭建(基于docker) 一、简介 XXL-JOB是一个轻量级分布式任务调度平台，其核心设计目标是开发迅速、学习简单、轻量级、易扩展。现已开放源代码并接入多家公司线上产品线，开箱即用。 更多介绍，请访问官网： http://www.xuxueli.com/xxl-job/#/ 接下来，本文将详...
分布式任务调度平台XXL-JOB--源码解析二:基于docker搭建admin调度中心和executor执行器运行部署环境
xiongxianze的博客
11-19 5819
一, 搭建admin调度中心 1.1 安装docker运行环境 采用yum源安装直接安装:yum install -y docker 启动docker: service docker start 停止docker:service docker stop 1.2 拉取tomcat和mysql这两个docker镜像 这里使用网易公有镜像库, 访问: https://c.163yun.com...
使用xxl-job调度kettle
pomelo
09-24 6167
1.部署xxl-job调度平台 从GitHub上下载源码，参考官网部署好xxl-job. 2.调度kettle （1）、新增一个调度任务，运行模式选择为GLUE(shell) （2）、选择GLUE IDE编辑 （3）、在shell界面编辑好kettle调度命令即可 随后启动定时任务，作业即可进入调度周期了。 小结：此方式是直接通过xxl-job和kitchen.ba...
xxl-job2.3.1 oracle
最新发布
09-01
您好！针对您提到的xxl-job2.3.1和Oracle，我能够提供以下信息： xxl-job是一个分布式任务调度平台，可以帮助开发人员实现任务的定时执行、任务调度监控、任务日志查看等功能。它支持多种任务执行模式，包括Java、Shell脚本、命令行等。 至于Oracle，它是一种关系型数据库管理系统，被广泛应用于企业级应用程序开发。它具备高性能、高可靠性和丰富的功能，可以处理大量数据和复杂查询。 如果您有关于xxl-job或者Oracle的具体问题或者需要进一步的信息，欢迎您告诉我，我将尽力为您解答。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值