使用 MySQL 实现无锁任务队列(using MySQL as a job queue)

目录

场景

N 个生产者往 db 里面插入新任务,N 个消费者从 db 取出新任务执行并更新任务状态为“已执行”。

CREATE TABLE `t_job_queue` (
  `id` INT NOT NULL AUTO_INCREMENT,
  `status` INT NOT NULL DEFAULT '0',
  `params` VARCHAR(1024) NOT NULL DEFAULT '',
  `result` VARCHAR(1024) NOT NULL DEFAULT '',
  PRIMARY KEY (`id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8;

关键问题

避免多个消费者取到同一个新任务。

有问题的解决方案

方案1 - 锁表

LOCK TABLES t_job_queue WRITE, t_job_queue as t1 READ;
SELECT id, status, params FROM t_job_queue WHERE status=
  • 0
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
队列是一种线程安全的数据结构,可以在多线程环境下高效地进行数据交换。C11标准引入了原子变量,可以用来实现队列。 无队列实现思路是利用原子变量的CAS操作(Compare-And-Swap)来实现队列的入队和出队操作。CAS操作是原子性的,可以保证在多线程环境下的正确性。 下面是一个使用原子变量实现队列的代码示例: ```c #include <stdatomic.h> #define QUEUE_CAPACITY 100 typedef struct { atomic_int head; // 队头索引 atomic_int tail; // 队尾索引 int data[QUEUE_CAPACITY]; // 队列数据 } queue_t; // 初始化队列 void queue_init(queue_t *q) { atomic_init(&q->head, 0); atomic_init(&q->tail, 0); } // 入队操作 void queue_push(queue_t *q, int value) { int tail = atomic_load(&q->tail); int next_tail = (tail + 1) % QUEUE_CAPACITY; while (next_tail == atomic_load(&q->head)) { // 队列已满,等待空闲位置 } q->data[tail] = value; atomic_store(&q->tail, next_tail); } // 出队操作 int queue_pop(queue_t *q) { int head = atomic_load(&q->head); int next_head = (head + 1) % QUEUE_CAPACITY; while (head == atomic_load(&q->tail)) { // 队列为空,等待数据 } int value = q->data[head]; atomic_store(&q->head, next_head); return value; } ``` 在这个代码中,我们使用了atomic_int类型来定义队头和队尾的原子变量。入队操作中,我们使用while循环来等待队列中有空闲位置,然后使用CAS操作将数据存入队列。出队操作中,我们使用while循环来等待队列中有数据可取,然后使用CAS操作将数据取出队列。 需要注意的是,这个代码示例中没有考虑在多线程环境下的竞争问题,可能会出现ABA问题等问题。在实际应用中需要根据具体情况进行优化和改进。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值