Redis bio

还是一个很小的模块。

bio就是background io的意思,既然要background,就要创建线程,创建几个线程呢?有几种类型的io,就创建几个线程。同一种类型的job需要排队,所以存放各自的工作链表里面。

redis目前有两种类型的job:

一个是close file descriptor,另一个是aof sync。

线程的堆栈默认设为4M,每个线程运行开始时还要把SIG_ALRM(定时器信号)block掉,保证watchdog发出的信号只有主线程接收到。

介绍下接口:


// 初始化bio的结构

void bioInit(void);


// 添加job
void bioCreateBackgroundJob(int type, void *arg1, void *arg2, void *arg3);


// 对于指定类型的bio,当前pending队列中的job数量是多少
unsigned long long bioPendingJobsOfType(int type);


// 以下两个接口不再使用,不必关心
void bioWaitPendingJobsLE(int type, unsigned long long num);
time_t bioOlderJobOfType(int type);


看看其中要到的结构和数据:

struct bio_job {
    time_t time; // Job创建时间
    void *arg1, *arg2, *arg3;    // 执行job需要带的ca
};


// 涉及多线程,就要考虑同步的问题,这是锁和条件变量,条件变量用于队列非空时激活线程去处理

static pthread_mutex_t bio_mutex[REDIS_BIO_NUM_OPS];
static pthread_cond_t bio_condvar[REDIS_BIO_NUM_OPS];


// 任务队列
static list *bio_jobs[REDIS_BIO_NUM_OPS];


// 这个变量完全是多余,直接就是bio_jobs的链表长度

static unsigned long long bio_pending[REDIS_BIO_NUM_OPS];

  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Redis是一个开源的高性能键值存储系统,它在内存中操作数据,提供快速的数据存取。Redis的开发过程可以分为几个主要时期: 1. **单线程(Single-threaded, Bio时期)**: Redis最初的版本是从2009年开始开发的,那时候它是由Antirez(Salvatore Sanfilippo,Redis的创始人)创建的。这个时期的Redis是基于单线程模型设计的,所有的客户端请求都由同一线程处理,没有使用异步IO或多路复用技术。这使得Redis在处理大量并发请求时可能会遇到性能瓶颈,因为它无法利用多核CPU的并行能力。 2. **单线程与事件(Single-threaded with Events)**: 针对这个问题,Redis开始引入了简单的事件通知机制,但仍然保持单线程结构。这意味着即使有多个客户端连接,Redis会逐个处理这些请求,而不是同时处理多个。 3. **多路复用器(Multi-Reading/Multi-Writing, MWMR)**: 随着时间的推移,Redis引入了epoll(Linux)或kqueue(FreeBSD)这样的多路复用技术,允许一个线程同时处理多个连接,通过IO多路复用机制提高了对并发连接的处理效率。 4. **异步处理(Asynchronous I/O)**: Redis 5.0引入了异步IO,即AOF(Append Only File)持久化和RDB(Redis Database)快照功能,以及部分命令的异步执行,进一步提升了系统的吞吐量和响应速度。 5. **集群与分布式(Cluster and Distributed)**: Redis从3.0版本开始支持主从复制和集群模式,后续的版本如6.x引入了更高级别的集群解决方案,如Sentinel用于高可用管理和自动故障转移。 总结来说,RedisBio时期开始,逐渐引入了多路复用和异步IO等技术,不断优化其并发能力和扩展性,使其成为现代高性能数据缓存和消息队列解决方案的重要选择。如果你对特定版本或某个时期的细节感兴趣,我可以帮你深入探讨。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值