网易来聊聊子弹短信的消息漫游技术

“子弹短信”炸翻了创投圈,上线短短7天,掀起IM行业一股巨浪。网易云信作为子弹短信IM以及音视频通话技术提供者,今天来聊聊子弹短信这款即时通讯产品里面一个重要功能—消息漫游。【知识点消息漫游是指即时通讯产品将用户聊天记录保存在云端,用户在任何一个终端设备上都能获取到全部的聊天记录。

聊聊子弹短信怎么实现消息漫游

消息漫游在即时通讯领域是相对高级的功能,很多社交软件没有提供该功能,下面我们来分析下子弹短信消息漫游的技术实现。

1. 子弹短信即时通讯的消息交互

发送者 A通过连接层x将消息发往业务逻辑层,业务逻辑层APP(保存着A和B的在线状态)通过连接层y将消息转给接收者B,完成了一次消息发送过程。

2. 子弹短信多端在线的消息交互

发送者A有多个终端在线时,在A用手机将消息发送给B的同时会给A的电脑终端发送一条通知,从而完成消息的多端同步

3. 子弹短信消息漫游的实现

多端消息交互过程如果用户一个终端不在线,那么不在线的一端是无法同步到聊天记录的,此时就需要用到消息漫游功能,当发送者A将消息发给B时,APP会把消息存储起来,Cache中保存着用户近期的聊天记录,DB采用时间序列数据库,保存着用户的历史聊天记录,客户端保存着消息同步的时间戳,登录时根据时间戳,通过缓存加历史的方式拉取数据,从而实现完整会话消息的漫游

漫游消息的存储方式

即时通讯中产生了海量的消息,如果使用了消息漫游的功能,消息的存储就是一个不小的挑战。首先用户在会话中产生的消息是有个TimeLine的,在存储上也需要按照时间来存储。图中给出了两种存储方式,1中的写入方式是按照会话来存的,这样存消息的好处是,多个人的消息只存一份,即按照会话来存储,但是这种方式带来了一个问题,就是A要拉取消息记录时需要去A的每个会话中分别读取,产生了读扩散;2中的写入方式是按照用户来存的,这样存消息的好处是读取方便,但是一个会话的消息被存了多次,产生了写扩散。上面介绍的两种存储方式各有优缺点,究竟哪一种存储方式更好呢?

首先来看下即时通讯的应用场景,对于消息记录写入非常频繁,而读取动作一般发生在登陆时的情况较少;再来看下DB选型:使用写扩散方式时一条消息会写入两条记录,读取时一次可查询出所有记录;使用读扩散方式时一条消息写入一条记录,读取时需要根据会话数量读取多次;传统的关系型数据库应对读扩散会非常吃力,只能使用写扩散的方式实现,如果使用nosql数据库存储则两种方式都可以实现。

子弹短信使用的混合存储方式

子弹短信使用了内存数据库+时间序列数据库的存储方式。内存数据库采用读扩散的方式存储近期消息,时间序列数据库则采用写扩散的方式存储历史消息。这样的存储方式有以下几个考量:

  • 内存数据库的高TPS和低RT对用户正常的消息收发影响很小,采用异步写入让吞吐量进一步提升* 内存数据使用读扩散的存储方式,首先内存的成本相对较高,需尽可能的减少空间占用,再则内存数据库的低RT可以应对读扩散带来的延时问题* 历史消息量较大,采用存储介质较为廉价的数据库存储,同时为了保证查询性能,存储方式使用了写扩散的形式,选用支持时间序列的数据库,对比关系型数据库有更好的读写表现* 历史消息使用异步写入,对业务流程无影响* 客户端保存上次同步的时间戳,除了用户卸载应用或者长时间不登录的情况下,读请求都会落在内存数据库上,用户体验比较好即时通讯平台的消息漫游设计理念

1. 中心化存储

作为即使通讯Paas平台,需要对业务方提供消息内容审核机制,也要对监管方提供消息数据。中心化的集中存储实现消息内容审核较容易,也能及时响应监管方的消息核查需求。保证消息不丢失,IM系统中心化有助于实现多端漫游功能,用于解决用户在多个设备,多个场景下切换账号时消息同步的问题,提升了用户体验。

2. 信息安全

在数据访问的制度管理上:平台方一般会使用私有云方案,数据中心均不提供外网访问,租户网络下访问也加入了权限限制在数据存储的安全方面:使用了私有协议的数据编码和加密机制存取消息,即使发生了拖库也无法解出消息内容在数据传输协议方面:网络通信使用了自定义编解码报文和加密算法,API接口等支持SSL加密,辅之以业务层鉴权机制,有效保证了信息的传输安全。

以上就是对于子弹短信消息漫游技术浅析。学习网络安全技术的方法无非三种:

第一种是报网络安全专业,现在叫网络空间安全专业,主要专业课程:程序设计、计算机组成原理原理、数据结构、操作系统原理、数据库系统、 计算机网络、人工智能、自然语言处理、社会计算、网络安全法律法规、网络安全、内容安全、数字取证、机器学习,多媒体技术,信息检索、舆情分析等。

第二种是自学,就是在网上找资源、找教程,或者是想办法认识一-些大佬,抱紧大腿,不过这种方法很耗时间,而且学习没有规划,可能很长一段时间感觉自己没有进步,容易劝退。

如果你对网络安全入门感兴趣,那么你需要的话可以点击这里👉网络安全重磅福利:入门&进阶全套282G学习资源包免费分享!

第三种就是去找培训。

image.png

接下来,我会教你零基础入门快速入门上手网络安全。

网络安全入门到底是先学编程还是先学计算机基础?这是一个争议比较大的问题,有的人会建议先学编程,而有的人会建议先学计算机基础,其实这都是要学的。而且这些对学习网络安全来说非常重要。但是对于完全零基础的人来说又或者急于转行的人来说,学习编程或者计算机基础对他们来说都有一定的难度,并且花费时间太长。

第一阶段:基础准备 4周~6周

这个阶段是所有准备进入安全行业必学的部分,俗话说:基础不劳,地动山摇
image.png

第二阶段:web渗透

学习基础 时间:1周 ~ 2周:

① 了解基本概念:(SQL注入、XSS、上传、CSRF、一句话木马、等)为之后的WEB渗透测试打下基础。
② 查看一些论坛的一些Web渗透,学一学案例的思路,每一个站点都不一样,所以思路是主要的。
③ 学会提问的艺术,如果遇到不懂得要善于提问。
image.png

配置渗透环境 时间:3周 ~ 4周:

① 了解渗透测试常用的工具,例如(AWVS、SQLMAP、NMAP、BURP、中国菜刀等)。
② 下载这些工具无后门版本并且安装到计算机上。
③ 了解这些工具的使用场景,懂得基本的使用,推荐在Google上查找。

渗透实战操作 时间:约6周:

① 在网上搜索渗透实战案例,深入了解SQL注入、文件上传、解析漏洞等在实战中的使用。
② 自己搭建漏洞环境测试,推荐DWVA,SQLi-labs,Upload-labs,bWAPP。
③ 懂得渗透测试的阶段,每一个阶段需要做那些动作:例如PTES渗透测试执行标准。
④ 深入研究手工SQL注入,寻找绕过waf的方法,制作自己的脚本。
⑤ 研究文件上传的原理,如何进行截断、双重后缀欺骗(IIS、PHP)、解析漏洞利用(IIS、Nignix、Apache)等,参照:上传攻击框架。
⑥ 了解XSS形成原理和种类,在DWVA中进行实践,使用一个含有XSS漏洞的cms,安装安全狗等进行测试。
⑦ 了解一句话木马,并尝试编写过狗一句话。
⑧ 研究在Windows和Linux下的提升权限,Google关键词:提权
image.png
以上就是入门阶段

第三阶段:进阶

已经入门并且找到工作之后又该怎么进阶?详情看下图
image.png

给新手小白的入门建议:
新手入门学习最好还是从视频入手进行学习,视频的浅显易懂相比起晦涩的文字而言更容易吸收,这里我给大家准备了一套网络安全从入门到精通的视频学习资料包免费领取哦!

如果你对网络安全入门感兴趣,那么你需要的话可以点击这里👉网络安全重磅福利:入门&进阶全套282G学习资源包免费分享!

  • 18
    点赞
  • 19
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值