分布式集群技术

大部分开发人员都专注于单机的开发，随着大数据时代的到来，分布式计算、分布式服务器集群、分布式存储等都已经成为高级开发人员必须掌握的技术。

可以自己搭建一套高可用性的Web服务器集群系统，让您能轻松的拥抱分布式技术。

1.分布式集群

1.1.分布式系统架构

下图分布式系统架构好处有两点：一是系统可以适用于各种规模的企业，（图中每个节点代表一台应用服务器，并不见得是一台物理意义上的计算机）；二是可以方便地进行服务器管理，管理员可以在任何一个远程客户端上登录，基于Web浏览器进行服务器管理。

1.2.增强的安全特性和事务处理功能

提供身份验证、授权机制、加密机制和安全数据存储等增值服务，为用户提供安全、可靠的分布式企业级应用；为保证应用数据和业务逻辑的的完整性，除了提供完全符合规范的事务管理之外，还支持死锁检测、并发控制、JMS全局事务等特性。

1.3.服务器集群的可扩展性和高可用性

多个应用服务器组成一个服务器集群，其优点在于：通过负载均衡和失效恢复机制可以解决网络拥塞问题，服务就近提供，实现地理位置无关性；可以为用户提供更好的访问质量；可以提高服务器响应速度，提高服务器及其他资源的利用效率；避免了网络关键部位出现单点失效问题；增强了服务器的可扩展性。

一个集群系统是一群松散结合的服务器组，形成一个虚拟的服务器，为客户端用户提供统一的服务。对于这个客户端来说，通常在访问集群系统时不会意识到它的服务是由具体的哪一台服务器提供。集群系统一般应具高可用性、可伸缩性、负载均衡、故障恢复和可维护性等特殊性能。

高可用性是集群系统最基本的要求，它是对整个系统运行稳定性的一个评价。可伸缩性是指整个系统在随着客户端用户数量的增加而继续保持有效响应时间的能力。在一个可伸缩性系统中，随着用户数量的增加，有效响应时间变长，成线性变化关系，这也体现一个系统的峰值负载处理能力，但随着越来越多的系统处于Internet上，用户访问的峰值负载有效预测已变的不可能。用户访问量的猛增，使系统的有效响应时间成非线性变化，响应时间急剧变长，知道系统不堪重负而停机。一般的解决方法就是通过提升系统硬件系统，或通过增加服务器。但是不合理的增加服务器只能使整个集群系统变的越来越庞大，系统的这种复杂化就意味系统故障率变高，随之整个系统可靠性、可维护性都会降低。

所以，一个系统的可用性和可伸缩性是一对矛盾的关系，而且和整个集群系统的实现方法有很大的关系。

1.4.EJB技术

EJB是J2EE应用平台的核心。Sun在EJB2.0规范中对EJB定义如下：EJB是用于开发和部署具多层结构的、分布式的、面向对象的Java应用系统跨平台的构件体系结构。EJB组件有三中类型：会话bean、实体bean、消息驱动bean。其中会话bean分为有状态和无状态两种。

EJB服务器的核心是提供EJB使用的一个或者多个EJB容器（Container）。EJB容器管理它所包含的EJB，为EJB组件的生存和执行提供了运行环境，同时也负责EJB的事务管理，安全管理，资源访问控制和一些异常处理。EJB容器不允许J2EE的客户端程序直接访问容器中EJB对象，当一个客户端用户想访问一个EJB，EJB规范中要求客户使用Java名字和目录接口JNDI（JavaNamingandDirectoryInterface）API来定位Bean的home接口。

1.5.EJB服务器集群

EJB服务器的集群是基于组件的一种集群方式，和普通WebServer集群技术有很大的不同。实现的方法也不相同。又由于EJB规范中没有提供任何有关支持集群的标准，即使有的厂商在EJB服务器中提供了集群特性，但如何具体实现集群也是由厂商自己确定。实现的方法也各不相同。目前，大多数J2EE应用服务器都提供了集群功能，如BeaWebLogic应用服务器，开放源码的JBoss应用服务器，Sybase公司提供的J2EE应用服务器等都提供了集群功能。在EJB服务器集群设计中，负载均衡（LoadBalance），EJB集群和HttpSession集群技术是设计中涉及到的主要技术。其中EJB集群的实现是整个系统实现的核心。

2.负载均衡(LoadBalance)

LoadBalance主要的目的在于将访问系统的负荷分散在不同的机器上，使整个系统吞吐量和并发性得到提高,它能让多台服务器共同承担一些繁重的计算或IO任务，从而消除网络瓶颈，提高网络的灵活性和可靠性。常见的方法如下：

• 循环DNS

DNS负载均衡是一种简单而有效的方法，该方法使用简单的域名查询IP地址来实现一种简单的负载均衡。任意给出一个地址，DNS服务器都有一个IP地址池与之对应。每次请求将域名转换成IP地址时，循环返回IP地址池中的下一个地址。故被称作DNSround-robin。当一个Client访问时，给请求JNDI的InitialContext客户端传递一个DNS名，作为命名服务器的URL，每个DNS名字被转换成一个不同的地址，使用这个技术，每个客户端InitailContext请求就被直接发送到不同的服务器上。负载均衡的一大缺点是：一旦某个服务器出现故障，即使及时修改了DNS设置，还是要等待足够的时间（因为DNS需要一定的刷新时间）才能发挥作用，在此期间，有些客户端用户访问仍旧将发送故障服务器上。

• 软件Proxy

软件Proxy维护连接到一系列服务器上的打开连接。当一个Client访问服务器时，先要经过这个软件代理，这个代理能通过一些负载均衡的算法（如采用类似DNSRound-robin、随机方法、访问权衡算法）把一个用户的访问重新定向到一个服务器。这个软件代理方法能够及时发现服务器死机或没有响应，有效地避免了DNSround-robin方法中出现地故障访问。

• 硬件均衡器

这种硬件均衡器一般采用地址转换技术，将一个外部IP地址映射为多个内部IP地址，对每次TCP连接请求动态使用其中一个内部地址，达到负载均衡的目的。一般可采用第四层（或4层以上）的交换机来实现，这种交换机是按照IP地址和TCP端口进行虚拟连接的交换，直接将数据包发送到目的计算机的相应端口。通过交换机就能将来自外部的初始连接请求，分别与内部的多个地址相联系，从而建立虚拟连接实现负载均衡。这种第四层交换基于硬件芯片，因此网络传输速度和交换速度远远超过普通软件代理方式。如采用CiscoCSS11150（一种L4Switch）可以实现硬件均衡。

转载： 点击打开链接