基于Tornado的Websocket集群

最新推荐文章于 2024-09-23 08:37:45 发布
最新推荐文章于 2024-09-23 08:37:45 发布
阅读量1.1k 收藏 2
点赞数 2
分类专栏： Python RabbitMQ Tornado 文章标签： websocket集群 python tornado rabbitmq
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/mx472756841/article/details/89474966
版权
Python 同时被 3 个专栏收录
27 篇文章 2 订阅
订阅专栏
RabbitMQ
11 篇文章 0 订阅
订阅专栏
Tornado
3 篇文章 0 订阅
订阅专栏

背景

我们部署单点websocket服务时很简单就可以实现，但是现实中的业务往往对性能要求非常高， 因此单点服务并不能满足我们的需求，所以我们需要横向的扩展服务，来满足性能要求。

举个简单的例子，我们建立一个简单的聊天室，人数少的时候可以正常提供服务，但当聊天的人数超过单台服务器所能服务的数量时，服务器就不能提供相应的服务。我们可以通过提高服务器的配置来继续满足，但是提升配置后依然会达到上限。所以我们需要提供分布式的websocket服务，不再集中在一台服务器上，我们可以通过横向扩展，在多台服务器上部署相同的服务，来满足我们的扩展需求。

设计

原理

Websocket服务中正常启动后，每个用户连接后会一直存在，因此连接要保存在内存中，并在服务中管理起来，根据不同的需要，服务确定是否要通知集群中其他连接信息

基本的原理

  1. websocket服务中，单独启用一个线程来订阅MQ，线程中收到订阅，根据业务需求来确定通知所有连接与否。

  2. 单独提供一个RabbitMQ服务

    • 接收websocket的发送业务处理集群的消息
    • 接收业务处理集群发送websocket的消息，这里采用的是广播，不再对业务中进行判断是否发送，由websocket服务判断是要发送给哪个连接

  3. 业务服务集群，监听mq提供的业务处理消息，然后再将结果发送到websocket订阅的消息队列中。

架构图

在这里插入图片描述

代码

关注微信公众号：战渣渣
回复关键字 “ws集群” 获取源码

战渣渣
关注
专栏目录
python非阻塞多线程socket_Tornado WebSocket使用线程处理非阻塞请求。我做得对吗？...
weixin_31207855的博客
01-30 861
我是Python新手，我要解决的问题是要有一个持续的websocket连接，它可以接收请求，在进行calc时等待一段时间，准备好后返回结果，同时不阻止来自其他用户/客户机/连接的其他请求。我已经做到了这一点，它的工作相当不错，但想检查这是否是正确的解决方案。我的另一个关键动作是在一段时间内完成的。在import tornado.webimport tornado.websocketimport t...
WebSocket消息实时提醒
09-19
7. **负载均衡与集群**：对于大型实时应用，可能需要考虑WebSocket的负载均衡和集群部署，确保服务的稳定性和可扩展性。 8. **断线重连**：客户端需要有断线重连的策略，当检测到连接断开时，尝试重新建立连接。 9...
Tornado实现多线程、多进程HTTP服务
weixin_30892763的博客
09-30 222
背景 线上有一个相关百科的服务，返回一个query中提及的百科词条。该服务是用python实现的，以前通过thrift接口访问，现要将其改为通过HTTP访问。之前没有搭建HTTPServer的经验，因此想用python的web Framework来做这件事，于是有了下面的工作。第一部分是框架选择，这一部分没有太仔细考虑，只是大概看了一些文章。第二部分是根据所需要的功能，学习及测试在框架上应该如何实...
详解 web 框架 tornado
最新发布
面向命运编程
09-23 1243
Tornado 是一个强大的 Web 框架，特别适合高并发、长连接、实时通信的应用场景。虽然它的异步编程模型可能比其他框架复杂，但它的高性能和灵活性使其在需要处理大量并发请求的项目中有明显的优势。如果你的项目需要处理 WebSocket 或需要高效的异步处理能力，Tornado 是一个非常好的选择。
tornado websocket
weixin_30412577的博客
05-13 249
tornado websocket 轮询 客户端定时去请求服务端， 是客户端主动请求来促使数据更新 长轮询 客户端请求服务端，但是服务端并不是即时返回，而是当有内容更新的时候才返回内容给客户端，从流程上讲，可以理解为服务器向客户端推送内容； websocket WebSocket是通过单个TCP连接提...
tornado实现websocket
weixin_42289273的博客
08-31 390
1. 相同点 （1）都是基于TCP的，都是可靠的传输协议 （2）都是应用层协议 2. 不同点 （1）websocket是双向通信协议，模拟socket协议，可以双向发送或接收消息，http是单向的 3. 联系 websocket在建立握手时，数据是通过http传输的，当建立连接成功后，在数据传输时不是通过Http而是通过单独建立的tcp通道传输的。 websocket：它实现了浏览器与服务器全双工(full-duplex)通信。其本质是保持TCP连接，在浏览器和服务端通过Socket进行通信。
基于TimeLine模型的消息同步机制
11-08 1263
我们当前的IM虽然进行了微服务化，但是核心的消息投递模式仍然采用下图描绘的方式，参看《一个海量在线用户即时通讯系统（IM）的完整设计》。在这个方式下，消息同步的基本思路和步骤如下（序号不对应图中序号）1、把消息存储到离线收件箱2...
利用tornado搭建高可用的WebSocket服务
本章节还阐述了本文研究的目标和意义，即通过Tornado框架搭建高可用的WebSocket服务，以满足实时通信场景下对稳定性和性能的要求。最后，介绍了全文的结构安排和各章节的主要内容。 ## WebSocke
Tornado高级应用技巧：WebSocket与长连接快速上手
Tornado框架简介与WebSocket基础 ## 1.1 Tornado框架概述 Tornado 是一个开源的 Python web 框架和异步网络库，它被设计用于支持可扩展的高性能 web 应用程序。与传统 web 框架相比，Tornado 的最大特点是其非...
基于WebSocket的多人协同编辑器的实现
# 1. 简介 ## 1.1 什么是协同编辑器 协同编辑器是一种支持多个用户同时进行...WebSocket协议通过在客户端和服务器之间建立持久连接，实现了双向通信，允许服务器主动推送信息给客户端，而不需要客户端先发起请求。
处理WebSocket
02-26
9. **规模与负载均衡**: 当WebSocket应用需要服务于大量用户时，可能需要考虑负载均衡和集群部署。这时，需要确保WebSocket连接能在服务器之间正确地建立和迁移。 10. **资源管理与优化**: 长连接意味着更多的资源...
Tornado实现多进程/多线程的HTTP服务详解
09-18
主要介绍了Tornado实现多进程/多线程的HTTP服务详解,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值
RabbitChat, 在 RabbitMQ Tornado web socket Pika上，一个简单的聊天系统基于.zip
09-18
RabbitChat, 在 RabbitMQ Tornado web socket Pika上，一个简单的聊天系统基于 RabbitChatRabbitChat - 基于 RabbitMQ Tornado web socket的简单网络聊天系统。版权所有( C ) 2011，Haridas N haridas.nss@gmail.com检查
通过WebSocket实现RabbitMQ的发送数据实时显示
07-14
使用RabbitMQ消息队列，实现使用Java代码向MQ发送消息，将发送的消息实时显示到Web页面上
Tornado实现多线程、多进程HTTP服务【未实践】
走在搬砖的路上！
01-16 828
背景 线上有一个相关百科的服务，返回一个query中提及的百科词条。该服务是用python实现的，以前通过thrift接口访问，现要将其改为通过HTTP访问。之前没有搭建HTTPServer的经验，因此想用python的web Framework来做这件事，于是有了下面的工作。第一部分是框架选择，这一部分没有太仔细考虑，只是大概看了一些文章。第二部分是根据所需要的功能，学习及测试在框架上应该如何...
Tornado 多进程 & 异步
06-10 1671
基本版：#coding=utf-8import tornado.web import tornado.httpserver import tornado.options import tornado.ioloopfrom tornado.options import options , define define("port",default=8001,help="跑在8001",type=int)
【转】分布式websocket服务器
sinolover的专栏
12-16 468
最近在开发一个游戏的客服系统，同一时间咨询问题的玩家多，为了保证服务器高可用，需要利用分布式，另外服务器宕机还需要玩家无感知重连，最关键的一点是如何实现服务器的高扩展性，即性能不足时，如何以最少的代价增加一台新的服务器。 1.单台websocket 单台消息互传实现十分简单，通过websocket中转就可以了，不再多加赘述。 2.多台websocket 当客户端不在同一台服务器上时，如何实现消息互通？ 一开始的时候，我是想着把server A 与 server B 通过websocket连
tornado websocket模块
weixin_43056654的博客
02-09 218
websocket """ 概述 HTML5 中提出的新的客户端-服务器通信协议，本身使用新的 ws://url 创建在TCP协议之上，和HTTP的唯一关系是 使用HTTP协议的101状态码 使用客户端与服务端之间的数据交互更加简单，允许服务器直接向客户端推送数据 目前大多数主流浏览器都支持websocket """ WebSocketHandle # 处理通信的类 open() ...
WebSocket集群解决方案，不用MQ
yy的博客
07-18 409
那么，我们能不能给每一个socket服务器增加一个标识，然后在用户连接的时候将用户与socket服务器的关系绑定起来，然后在使用的时候再去判断用户存在哪，再给指定的服务器发送消息不就解决问题了吗？首先我们理解一个逻辑，为什么WebSocket不能直接做集群，socket是一个长链接，当我们要给socket用户发送消息的时候，我们不知道用户是连接到哪一个服务上面的，这样就无法直接发送消息了。需要注意的是动态服务名这里，每个服务的名字都是不一样的，这样就保证了每个服务的一个唯一性。再来个Service。
tornado中websocket
04-23
Tornado是一个Python的Web框架，它支持异步编程和非阻塞IO操作。Tornado中的WebSocket是一种实现了全双工通信的协议，它允许服务器和客户端之间进行实时的双向通信。 在Tornado中使用WebSocket，你可以通过继承tornado.websocket.WebSocketHandler类来创建一个WebSocket处理器。WebSocketHandler提供了一些方法来处理WebSocket连接的不同事件，例如连接建立、消息接收和连接关闭等。 以下是使用Tornado中WebSocket的一般步骤： 1. 创建一个WebSocket处理器类，继承自tornado.websocket.WebSocketHandler。 2. 在处理器类中实现on_message()方法，用于处理接收到的消息。 3. 在处理器类中实现open()方法，用于处理WebSocket连接建立时的操作。 4. 在处理器类中实现on_close()方法，用于处理WebSocket连接关闭时的操作。 5. 在Tornado应用程序中定义路由，将URL映射到WebSocket处理器类。 6. 启动Tornado应用程序。 下面是一个简单的示例代码，演示了如何在Tornado中使用WebSocket： ```python import tornado.websocket import tornado.web import tornado.ioloop class WebSocketHandler(tornado.websocket.WebSocketHandler): def open(self): print("WebSocket连接建立") def on_message(self, message): print("接收到消息：", message) self.write_message("服务器已收到消息：" + message) def on_close(self): print("WebSocket连接关闭") app = tornado.web.Application([ (r"/websocket", WebSocketHandler), ]) if __name__ == "__main__": app.listen(8888) tornado.ioloop.IOLoop.current().start() ``` 在上面的示例中，我们创建了一个WebSocket处理器类WebSocketHandler，并实现了open()、on_message()和on_close()方法来处理不同的事件。在应用程序中，我们将URL "/websocket" 映射到WebSocketHandler类。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值