SpringBoot+Netty+Redis 搭建长连接集群

点击上方“芋道源码”,选择“设为星标

管她前浪,还是后浪?

能浪的浪,才是好浪!

每天 10:33 更新文章,每天掉亿点点头发...

源码精品专栏

 

来源:网络


1.背景

公司在做一个社交项目,音视频技术是使用的第三方技术,直播间开播,进出房间,以及推送相关功能需要自己完成开发,因而需要自己搭建长连接服务器。

于是在技术选型上,为了保证服务高并发性能,以及长连接性能,在本身就是微服务架构上,采用了SpringBoot + Netty实现了长连接服务搭建,关于SpringBoot和Netty框架相关,本文不是重点,本文重点在于Netty集群搭建实现消息转发功能。

基于 Spring Boot + MyBatis Plus + Vue & Element 实现的后台管理系统 + 用户小程序,支持 RBAC 动态权限、多租户、数据权限、工作流、三方登录、支付、短信、商城等功能。

项目地址:https://github.com/YunaiV/ruoyi-vue-pro

2.技术选项&实现

2.1 关于Netty长连接

Netty是一个非常优秀的NIO异步事件驱动框架,在JDK NIO的基础上,封装并拓展包装,使得NIO的API简单易用,很多框架底层也应用了(比如Dubbo),Netty是可以做为一个长连接服务的,使用ws协议,可以构建一个高性能的长连接服务器,据说单机就能支持1万左右的连接。

熟悉Netty或NIO的都了解,其底层数据传输时通过一个网络连接Channel,对于单机Netty来说,Channel都连接在同一台服务器上,Channel之间的通信可以直接根据绑定的用户信息进行获取并转发。但是对于Netty集群来说,每个客户端的连接可能在不同的服务器上,这样在Channel互相通信时,需要判断是否在当前节点,并实现消息的转发。

2.2 技术选项

实现消息转发,有多种技术框架可以实现,比如ZK,MQ,Redis等,由于当前项目已经搭建了自己的MQ和Redis服务,因此考虑成本,目前只在MQ和Redis中选择。

如上文,Netty集群搭建后,Channel收到消息后,需要判断目标用户的Channel是否在本节点,如果不在,就需要做消息转发,转发到目标节点上,并将消息写到Channel中。因而MQ的广播机制和Redis的发布订阅就可以实现功能。

对比如下:

  • MQ:专门做消息队列的,可靠性高,但重量级,异步,不能保证实时。

  • Redis:较轻量级,低延迟,高并发,低可靠性。

两者在项目均在使用,考虑到直播消息更加保证时效性,故而选择Redis发布订阅功能,相对而言集成较为简单。

2.3 实现架构图
5c8e847a5c261dc18dc3bd8535e81cb1.png

①服务启动时,向Redis注册自己的节点信息,并指定监听频道。

②客户端连接Netty Server成功后,并在Redis缓存中绑定用户加入的节点,以便后续信息转发,将信息转发到指定的频道。

③在Channel转发时,判断如果当前用户在本节点,就直接转发,如果不在,从Redis获取到注册的节点信息,并将消息发布到指定的频道节点。

基于微服务的思想,构建在 B2C 电商场景下的项目实战。核心技术栈,是 Spring Boot + Dubbo 。未来,会重构成 Spring Cloud Alibaba 。

项目地址:https://github.com/YunaiV/onemall

3.代码实现

45077134b372776df765ee4246b0e818.png

绑定当前节点,服务启动并监听指定的频道,指定Listener。

e674f5faccf4b536f10b76b7d5407ea1.png

订阅节点生成器 本机 ip + 服务端口

04902b78c088eb08eac6672f3a12eea6.png

监听器实现,监听的频道收到消息,处理并发送到对应Channel

1148f4bec7b1d7765d3eb85f11ae0b7d.png

消息转发Sender

4.总结

①通过应用Redis发布订阅,Netty Server多个集群,追加多节点时,新增节点会自动注册监听对于的频道,消息转发时也会自动投递到新注册的节点频道上,可扩展性强。

②当前Redis 5中有很多新增的高级特性,笔者也在慢慢学习中,可应用到项目业务场景中也比较多。



欢迎加入我的知识星球,一起探讨架构,交流源码。加入方式,长按下方二维码噢

5b7ec7e3a4d01f5614902e70d24c7c15.png

已在知识星球更新源码解析如下:

3a6a4aae2f6b3cfdb66635a509a06363.png

11b78c1786719d70a6cbdc083a80edd2.png

9c7c9cbfad441f336bf8b03602deae25.png

25a136f2e801675265c3c44ea9054165.png

最近更新《芋道 SpringBoot 2.X 入门》系列,已经 101 余篇,覆盖了 MyBatis、Redis、MongoDB、ES、分库分表、读写分离、SpringMVC、Webflux、权限、WebSocket、Dubbo、RabbitMQ、RocketMQ、Kafka、性能测试等等内容。

提供近 3W 行代码的 SpringBoot 示例,以及超 4W 行代码的电商微服务项目。

获取方式:点“在看”,关注公众号并回复 666 领取,更多内容陆续奉上。

文章有帮助的话,在看,转发吧。
谢谢支持哟 (*^__^*)
  • 0
    点赞
  • 6
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Spring Boot是一个用于简化创建独立、基于生产级别的Spring应用程序的框架。它集成了许多常见的开发任务,包括应用程序配置、安全性、数据库访问和即时通讯等。而Netty是一个事件驱动的异步网络应用程序框架,它可以快速高效地开发可扩展性强的网络服务器和客户端应用程序。 在实现基于Spring Boot和Netty的即时通讯系统时,可以使用Netty来处理网络连接和数据传输,而Spring Boot提供了各种功能和组件来支持应用程序的开发和管理。 在上述引用中,提供了一个可以运行的Spring Boot和Netty框架下的聊天系统的源码,则记录了使用Spring Boot和Netty构建即时通讯模块的学习历程和实际应用。 为了实现这样的即时通讯系统,可以使用Spring Boot来配置和管理应用程序的各个组件和功能,例如数据库访问、安全性和授权等。而Netty则可以负责处理网络连接、数据传输和协议解析等。 在具体的实现过程中,可以创建一个ChannelInitializer来初始化Netty的管道(ChannelPipeline),并添加相应的处理器(handler)。在初始化器中,可以使用HttpServerCodec来进行请求的解码和响应的编码,同时还可以添加自定义的处理器来实现具体的业务逻辑。 总的来说,使用Spring Boot和Netty可以实现一个基于即时通讯的系统,其中Spring Boot用于提供应用程序的各种功能和组件,而Netty则用于处理网络连接和数据传输。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* [基于SpringBoot +mina或netty即时通讯聊天系统源码.zip](https://download.csdn.net/download/yhsbzl/85345702)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] - *2* *3* [SpringBoot+Netty开发IM即时通讯系列(一)](https://blog.csdn.net/qq_26975307/article/details/85004424)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值