一、高并发架构简述
考试系统是一个百万级高并发的系统,可能同时有百万级的用户参加考试。
考试系统主要涉及到高并发的功能为:用户报名考试、获取试卷、用户提交试卷答案、返回用户得分。
考试系统其余主要功能为:管理员与老师管理试卷、老师查看自己班的考生得分、考试记录推送到其它系统等。
考试系统使用了30多个服务器,其中某些服务器上(性能比较好的),1个服务器部署2个项目实例。
考试系统后台大部分为springboot项目。
●架构记录如下:
1.使用nginx做网关,实现负载均衡、静态资源访问、后台请求转发。
使用2台服务器,2个nginx;1个供老师、学员、管理员入口使用,1个供IM及时通讯使用。
2.前端项目中,将index.html等项目放到nginx服务器指定目录中,剩余的大部分文件上传到CDN上。
3.后端项目中,按照业务划分,分为5个子项目:
(1)基本信息项目,提供用户基本信息等,使用dubbo与其他项目通信;在7台服务器上部署了12个实例。
(2)试卷标签项目,提供给试卷或题目加标签以及查询搜索等服务,使用http(Controller)与其他项目通信;在5台服务器上部署了6个实例。
(3)学员考试项目,提供学员报名考试、获取试卷、提交答案、获取分数等服务,仅为移动端后台项目;在9台服务器上部署了14个实例。
(4)PC端管理系统项目,供老师或管理员查询自己班级内学员基本信息、考试信息、编辑试卷、导出报表等使用,并发量不高;在2台服务器上部署了2个实例,其中1个实例供基本使用,另一个实例仅供导出报表使用。
(5)移动端管理系统项目,与PC端管理项目管理系统项目类似;在2台服务器上部署了2个实例。
4.在2台服务器上搭建了Mysql服务器,主从关系。
5.在2台服务器上搭建了Redis服务器,集群关系。
6.在3台服务器上搭建了Kafka消息队列,集群关系。(旧版本Kafka,使用时必须安装zookeeper)
使用消息队列实现异步操作,缓解高并发压力。
主要在学员报名考试、学员提交考试答案、老师修改试卷导致缓存失效通知事件等。
7.在3台服务器上搭建了3个IM即时通信项目,GoLang;作用如下:
当学员提交答案时,存入kafka队列(异步操作解决高并发问题),服务器从kafka队列获得信息、计算完分数后,主动将分数回传给学员