满满的干货!典型服务器模式原理分析与实践,看了就能懂

文章介绍了服务器优化中的prefork模式、多线程并发和reactor模式(包括epoll的LT和ET模式),讨论了它们的优缺点,以及如何解决连接数有限和惊群等问题。重点在于C10K问题的解决方案和IO多路复用在高并发场景的应用。
摘要由CSDN通过智能技术生成

}

printf(“child exit, pid: %d\n”, getpid());
fflush(stdout);
exit(EXIT_SUCCESS);
}
// 父进程
else
{
close(iConnectFd);
}
}

预先派生子进程服务器

既然fork进程时的开销比较大,因此很自然的一种优化方式是,在服务器启动的时候就预先派生子进程,即prefork。每个子进程自己进行accept,大概的流程图如下(图片来自网络,侵删):

满满的干货!典型服务器模式原理分析与实践,看了就能懂

相比于pcc模式,prefork在建立连接时的开销小了很多,但是另外两个问题——连接数有限和进程间通信复杂的问题还是存在。除此之外,prefork模式还引入了新的问题,当有一个新的连接到来时,虽然只有一个进程能够accept成功,但是所有的进程都被唤醒了,这个现象被称为惊群。惊群导致不必要的上下文切换和资源的调度,应该尽量避免。好在linux2.6版本以后,已经解决了惊群的问题。对于惊群的问题,也可以在应用程序中解决,在accept之前加锁,accept以后释放锁,这样就可以保证同一时间只有一个进程阻塞accept,从而避免惊群问题。进程间加锁的方式有很多,比如文件锁,信号量,互斥量等。

无锁版本的代码在prefork_server目录。加锁版本的代码在prefork_lock_server目录,使用的是进程间共享的线程锁。

多线程并发服务器

线程是一种轻量级的进程(linux实现上派生进程和线程都是调用do_fork函数来实现),线程共享同一个进程的地址空间,因此创建线程时不需要像fork那样,拷贝父进程的资源,维护独立的地址空间,因此相比进程而言,多线程模型开销要小很多。多线程并发服务器模型与多进程并发服务器模型类似。

image.png

多线程并发服务器模型,与多进程并发服务器模型相比,开销小了很多。但是同样存在连接数很有限这个限制。除此之外,多线程程序还引入了新的问题

  • 多线程程序不如多进程程序稳定,一个线程崩溃可能导致整个进程崩溃,最终导致服务完全不可用。而多进程程序则不存在这样的问题
  • 多线程程序共享了地址空间,省去了多进程程序之间复杂的通信方法。但是却需要对共享资源同时访问时进行加锁保护
  • 创建线程的开销虽然比创建进程的开销小,但是整体来说还是有一些开销的。

预先派生线程服务器

和预先派生子进程相似,可以通过预先派生线程来消除创建线程的开销。

满满的干货!典型服务器模式原理分析与实践,看了就能懂

预先派生线程的代码在pthread_server目录。

reactor模式

前面提及的几种模式都没能解决的一个问题是——连接数有限。而IO多路复用就是用来解决海量连接数问题的,也就是所谓的C10K问题。

IO多路复用有三种实现方案,分别是select,poll和epoll,关于三者之间的区别就不在赘述,网络上已经有很多文章讲这个的了,比如这篇文章 Linux IO模式及 select、poll、epoll详解。

epoll因为其可以打开的文件描述符不像select那样受系统的限制,也不像poll那样需要在内核态和用户态之间拷贝event,因此性能最高,被广泛使用。

epoll有两种工作模式,一种是LT(level triggered)模式,一种是ET(edge triggered)模式。LT模式下,假如来了4k的数据,但是程序只读了前面2k的数据,那么再次阻塞在epoll_wait上时,x系统还会再次通知该文件可读。而ET模式下,如果只读了2k的数据,然后就退出并重新阻塞在epoll上时,系统不会通知该文件可读,除非又有新的数据发送过来。因此,ET模式下每次通知可读时就要把发送过来的数据全部读完。这个特性使得ET模式下只能采用非阻塞IO,在while循环中读取这个文件描述符中的数据,直到read或write返回EAGAIN。如果采用阻塞IO,read或write在多次循环读完了数据,最后一次的读写操作会一直阻塞,导致进程或者线程没有阻塞在epoll_wait上,IO多路复用就失效了。非阻塞IO配合IO多路复用就是reactor模式。reactor是核反应堆的意思,光是听这名字我就觉得牛不不要不要的了。

epoll编码的核心代码,我直接从man命令里的说明里拷贝过来了,我们的实现在目录reactor_server里。

#define MAX_EVENTS 10
struct epoll_event ev, events[MAX_EVENTS];
int listen_sock, conn_sock, nfds, epollfd;

/* Set up listening socket, ‘listen_sock’ (socket(),bind(), listen()) */

// 创建epoll句柄
epollfd = epoll_create(10);
if (epollfd == -1) {
perror(“epoll_create”);
exit(EXIT_FAILURE);
}

// 将监听套接字注册到epoll上
ev.events = EPOLLIN;
ev.data.fd = listen_sock;
if (epoll_ctl(epollfd, EPOLL_CTL_ADD, listen_sock, &ev) == -1) {
perror(“epoll_ctl: listen_sock”);
exit(EXIT_FAILURE);
}

for (;😉 {
// 阻塞在epoll_wait
nfds = epoll_wait(epollfd, events, MAX_EVENTS, -1);
if (nfds == -1) {
perror(“epoll_pwait”);
exit(EXIT_FAILURE);
}

for (n = 0; n < nfds; ++n) {
if (events[n].data.fd == listen_sock) {
conn_sock = accept(listen_sock, (struct sockaddr *) &local, &addrlen);
if (conn_sock == -1) {
perror(“accept”);
exit(EXIT_FAILURE);
}

// 将连接套接字设定为非阻塞、边缘触发,然后注册到epoll上
setnonblocking(conn_sock);
ev.events = EPOLLIN | EPOLLET;
ev.data.fd = conn_sock;
if (epoll_ctl(epollfd, EPOLL_CTL_ADD, conn_sock,
&ev) == -1) {
perror(“epoll_ctl: conn_sock”);
exit(EXIT_FAILURE);
}
} else {
do_use_fd(events[n].data.fd);
}
}
}

然后我们再分析一下epoll的原理。

epoll_create创建了一个文件描述符,这个文件描述符实际是指向的一个红黑树。当用epoll_ctl函数去注册文件描述符时,就是往红黑树中插入一个节点,该节点中存储了该文件描述符的信息。当某个文件描述符准备好了,回去调用一个回调函数ep_poll_callback将这个文件描述符准备好的信息放到rdlist里,epoll_wait则阻塞于rdlist直到其中有数据。

image.png

proactor模式

proactor模式就是采用异步IO加上IO多路复用的方式。使用异步IO,将读写的任务也交给了内核来做,当数据已经准备好了,用户线程直接就可以用,然后处理业务逻辑就OK了。

多种模式的服务器该如何选择

常量连接常量请求,如:管理后台,政府网站,可以使用ppc和tpc模式

常量连接海量请求,如:中间件,可以使用ppc和tpc模式

海量连接常量请求,如:门户网站,ppc和tpc不能满足需求,可以使用reactor模式

海量连接海量请求,如:电商网站,秒杀业务等,ppc和tpc不能满足需求,可以使用reactor模式

自我介绍一下,小编13年上海交大毕业,曾经在小公司待过,也去过华为、OPPO等大厂,18年进入阿里一直到现在。

深知大多数Java工程师,想要提升技能,往往是自己摸索成长或者是报班学习,但对于培训机构动则几千的学费,着实压力不小。自己不成体系的自学效果低效又漫长,而且极易碰到天花板技术停滞不前!

因此收集整理了一份《2024年Java开发全套学习资料》,初衷也很简单,就是希望能够帮助到想自学提升又不知道该从何学起的朋友,同时减轻大家的负担。img

既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,基本涵盖了95%以上Java开发知识点,真正体系化!

由于文件比较大,这里只是将部分目录截图出来,每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频,并且会持续更新!

如果你觉得这些内容对你有帮助,可以扫码获取!!(备注Java获取)

img

最后

对于很多Java工程师而言,想要提升技能,往往是自己摸索成长,不成体系的学习效果低效漫长且无助。

整理的这些资料希望对Java开发的朋友们有所参考以及少走弯路,本文的重点是你有没有收获与成长,其余的都不重要,希望读者们能谨记这一点。

再分享一波我的Java面试真题+视频学习详解+技能进阶书籍

美团二面惜败,我的凉经复盘(附学习笔记+面试整理+进阶书籍)

《互联网大厂面试真题解析、进阶开发核心学习笔记、全套讲解视频、实战项目源码讲义》点击传送门即可获取!

[外链图片转存中…(img-KEs2Tj0H-1713751826924)]

《互联网大厂面试真题解析、进阶开发核心学习笔记、全套讲解视频、实战项目源码讲义》点击传送门即可获取!

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值