集群通信组件tribes之集群的平行通信

最新推荐文章于 2020-11-21 23:20:14 发布
最新推荐文章于 2020-11-21 23:20:14 发布
阅读量3k 收藏
点赞数
文章标签： tribes tomcat ChannelSender 集群 通信
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/wangyangzhizhou/article/details/46945525
版权
本文详细探讨了Tomcat Tribes组件中的集群通信机制，特别是ChannelSender如何实现平行发送数据到集群成员。通过 MembershipService 获取成员信息，利用TCP/IP协议进行通信。在遇到发送失败时，Tribes会尝试重新发送并抛出异常。同时，介绍了基于ACK协议的可靠性保障，确保数据被正确接收。通信效率通过使用NIO模式提升，避免阻塞IO。
摘要由CSDN通过智能技术生成

前面的集群成员维护服务为我们提供了集群内所有成员的地址端口等信息，可以通过MembershipService可以轻易从节点本地的成员列表获取集群所有的成员信息，有了这些成员信息后就可以使用可靠的TCP/IP协议进行通信了。这节讨论的正是实际中真正用于消息传送通道的相关机制及实现细节。

如下图，四个节点本地都拥有了一张集群成员的信息列表，这时节点1有这么一个需求：为了保证数据的安全可靠，在往自己的内存存放一份数据的同时还要同步到其他三个节点的内存中。节点1有一个专门负责发送的组件ChannelSender，首先从成员列表中获取其他三个节点的通信地址和端口，再分别向此三个节点建立TCP/IP

了解本专栏 订阅专栏 解锁全文 超级会员免费看
超人汪小建(seaboat)
关注
专栏目录
订阅专栏
集群通信组件Tribes之整体介绍
seaboat——a free boat on the sea.（公众号：远洋号）
07-04 3593
接下来一系列文章会对集群通信框架tribes进行源码级别的分析，欢迎讨论。把若干机器组合成一个集群，集群为了能协同工作，成员之间的通信是必不可少的，当然可以说这也是集群实现中重点需要解决的核心问题，一个强大的通信协同机制是集群的基础。简约地说，Tribes是一个具备让你通过网络向组成员发送和接收信息、动态检测发现其他节点的组通信能力的高扩展性的独立的消息框架。在组成员之间进行信息复制及成员维护是一
集群通信组件tribes之使用方法
seaboat——a free boat on the sea.（公众号：远洋号）
08-15 3051
上面已经对tribes的内部实现机制及原理进行了深入的剖析，在理解它的设计原理后看看如何使用tribes，整个使用相当简单便捷，只需要四步：①　定义一个消息对象，由于这个消息对象是要在网络之间传递的，网络传输涉及到序列化，所以需要实现Serializable接口。public class MyMessage implements Serializable { private String mess
集群RPC通信
seaboat——a free boat on the sea.（公众号：远洋号）
11-20 6702
RPC即远程过程调用，它的提出旨在消除通信细节、屏蔽繁杂且易错的底层网络通信操作，像调用本地服务一般地调用远程服务，让业务开发者更多关注业务开发而不必考虑网络、硬件、系统的异构复杂环境。先看看集群中RPC的整个通信过程，假设从节点node1开始一个RPC调用，①先将待传递的数据放到NIO集群通信框架（这里使用的是tribes框架）中；②由于使用的是NIO模式，线程无需阻塞直接返回；③由于与集群其他
集群通信介绍
weixin_34405332的博客
08-22 2760
一、集群通信系统的概念集群(英文名为：Trunking),是一种多用户共用一组通信信道而不互相影响的技术。集群这一技术概念其实已在双向的无线通信领域中被广泛应用。集群通信系统能使大量的用户共享相对有线的频率资源，即系统的所有可用信道可为系统内所有用户共用，具有自动识别用户，自动并动态地分配无线信道的功能，是一种多用途，高效率的移动调度通信系统二、集群通信系统的特点1、集...
zookeeper集群工作原理_解析k8s中工作节点组件和集群通信原理
weixin_39628041的博客
11-21 233
文章首发解析k8s中工作节点组件和集群通信原理本文会分析node节点的两个组件（kube-proxy和kubelet）同集群如何建立通信的过程。 这两个组件其实已经覆盖了从集群外（非POD形式）和集群进行通信的所有可能，为什么这么说，我们可以看一下这两个组件的特点： - kube-proxy：只是做client和集群进行通信 - kubelet：即作为客户端去监听和获取集群中的信息，又要作为服务端...
集群通信组件Tribes之如何维护集群成员信息
seaboat——a free boat on the sea.（公众号：远洋号）
07-12 2762
一个集群包含若干成员，要对这些成员进行管理就必须要有一张包含所有成员的列表，当要对某个节点做操作时通过这个列表可以准确找到该节点的地址进而对该节点发送操作消息。如何维护这张包含所有成员的列表是本节要讨论的主题。成员维护是集群的基础功能，一般划分一个独立模块或层完成此功能，它提供成员列表查询、成员维护、成员列表改变事件通知等能力。由于tribes定位于基于同等节点之间的通信，所以并不存在主节点选举的
集群通信组件tribes之集群的消息接收通道
seaboat——a free boat on the sea.（公众号：远洋号）
07-25 2931
与消息发送通道对应，发送的消息需要一个接收端接收消息，它就是ChannelReceiver。接收端负责接收处理其他节点从消息发送通道发送过来的消息，实际情况如图每个节点都有一个ChannelSender和ChannelReceiver，ChannelSender向其他节点的ChannelReceiver发送消息。本质是每个节点暴露一个端口作为服务端监听客户端，而每个节点又充当客户端连接其他节点的服
集群通信组件tribes之应用程序处理入口
seaboat——a free boat on the sea.（公众号：远洋号）
08-09 2819
Tribes为了更清晰更好地划分职责，它被设计成用IO层和应用层，IO层专心负责网络传输方面的逻辑处理，把接收到的数据往应用层传送，当然应用层发送的数据也是通过此IO层发送，数据传往应用层后必须要留一些处理入口供应用层进行逻辑处理，而考虑系统解耦，这个入口最好的方式是使用监听器模式，在底层发生各种事件时触发所有安装好的监听器，使之执行监听器里面的处理逻辑。这些事件主要包含了集群成员的加入和退出、消
Zookeeper笔记⑤——集群模式一致性的保证（同步数据和客户端请求）
ww0peo的博客
12-07 582
每个服务器会开放三个端口 客户端访问的端口 负责通过数据，与其他服务器通信的端口 负责投票的端口 containsQuorum方法负责处理投票处理 判断是否过半 在配置文将中可以配置peerType属性，这个属性是服务器的类型（一般用于配置观察者） 快照和事务日志来实现容灾备份 快照会存储着事务id，如果有些数据还没有打快照会像从事务日志中查找，将所有持久化的数据重新执行一遍 在集群模式下每一个服...
ES多集群间数据同步
热门推荐
阿东的博客
05-16 2万+
ES多集群间数据同步1.引言   自己在google上搜了一下，自己总结了一下集群中某节点要访问远程集群节点中的数据，并保证数据的一致性和稳定性。举个例子，现有三个集群分别是：集群A、集群B和集群C，每个集群对应的有三个节点，一共是九个节点；集群A中的node1中的业务数据需要从集群C中node1中某索引中获取（意思是说：集群A需要的一部分数据被分割在其他两个集群中），这时就需要考虑同步远程集群数...
Redis集群（转）
munchkin0329的博客
04-28 247
Redis集群的概念： RedisCluster是redis的分布式解决方案，在3.0版本后推出的方案，有效地解决了Redis分布式的需求，当一个服务挂了可以快速的切换到另外一个服务，当遇到单机内存、并发等瓶颈时，可使用此方案来解决这些问题 一、分布式数据库概念 分布式数据库把整个数据按分区规则映射到多个节点，即把数据划分到多个节点上，每个节点负责整体数据的一个子集。比如我们库有900条用户数据...
数据库集群技术分析和比较
瞧字不识
04-19 1537
<br /> <br />一、引言<br /> <br />数据库是用来保存计算的最终结果的，所以是整个信息系统的最重要组成部分。在许多人看来，当前的数据库技术已经可以说是非常地成熟了。然而，在满足不断增长的联机事务处理应用方面，当前的数据库技术其实还存在不少急迫需要解决的技术问题。<br /> <br />对于所有的数据库而言，除了记录正确的处理结果之外，它们都面临着四方面的挑战：如何提高处理速度，数据可用性、数据安全性和数据集可扩性，也就是说，如何使当前的数据库具有这四方面的可伸缩性，使客户能同时得到更
tomcat源码阅读之Tribes.RpcChannel
weixin_30724853的博客
01-04 213
一、RpcChannel简介： 1、RPC即远程过程调用，它的提出旨在消除通信细节、屏蔽繁杂且易错的底层网络通信操作，像调用本地服务一般地调用远程服务，让业务开发者更多关注业务开发而不必考虑网络、硬件、系统的异构复杂环境。 2、假设一个集群环境中有node1, node2, node3, node4四个集群节点，现在node1调用RPC接口向node2, node3, node4进行服务请求，...
如何实现集群多个节点之间的数据同步
fei的专栏
08-29 1万+
集群中节点的配置文件或脚本文件发生改变后，如何将数据同步到其他节点？
集群RPC通信怎么做
weixin_34404393的博客
12-05 177
RPC RPC即远程过程调用，它的提出旨在消除通信细节、屏蔽繁杂且易错的底层网络通信操作，像调用本地服务一般地调用远程服务，让业务开发者更多关注业务开发而不必考虑网络、硬件、系统的异构复杂环境。 RPC过程 先看看集群中RPC的整个通信过程，假设从节点node1开始一个RPC调用， 先将待传递的数据放到NIO集群通信框架中； 由于使用的是NIO模式，线程无需阻塞直接返回； 由于与集群其他节点通信...
HeartBeat 集群组件概述
乐沙弥的世界
11-04 5085
Heartbeat 是一个基于Linux开源的高可用集群系统。主要包括心跳服务和资源接管两个高可用集群组件。心跳监测服务可以通过网络链路和串口进行，而且支持冗余链路， 它们之间相互发送报文来告诉对方自己当前的状态，如果在指定的时间内未收到对方发送的报文，那么就认为对方失效，这时需启动资源接管模块来接管运行在对方主机上的资源或者服务。
Tomcat7集群配置与Session复制详解
- `Channel`元素表示集群间通信的通道，`className="org.apache.catalina.tribes.group.GroupChannel"`指定使用GroupChannel类。 - `Membership`元素定义了集群成员资格，`McastService`类负责多播服务，设置其...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

超人汪小建(seaboat)

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值