记录一次elastic-job分片查询及基础概念理解

概念
任务:从sap同步商品数据
作业服务器节点:商品中心部署了几台服务器
分片总数shardingTotalCount:把任务分成几部分执行
分片索引/分片项shardingItem:分片总数/服务节点

如果:
2个节点A,B,2个分片,分片索引:0,1 A对应0,B对应1
3个节点A,B,C,10个分片,分片索引就是:0,1,2,
数据id/分片=分片项,即根据数据id区分不同服务节点处理的数据
A服务器节点处理 id除以分片 结果分片项是0的数据
如果id 1-10,处理id为3,6,9的数据

配置信息
指定任务执行周期和分片总数
task:
    test:
      cron: 0/5 * * * * ?
      #作业分片总数
      shardingTotalCount: 3
      shardingItemParameters: 0=Beijing,1=Shanghai,2=Guangzhou
      description: 描述
      
查询sql
from mid_base_product_info where mod(id, #{shardingContext.shardingTotalCount,jdbcType=INTEGER}) =
    #{shardingContext.shardingItem,jdbcType=INTEGER}
    and process_flag=0

取余是用函数mod(numer1,number2),其返回的值为其余数值
如:mod(id,2) = 1 返回id号是奇数的id

参考:https://blog.csdn.net/qq924862077/article/details/82956790
    

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值