Zookeeper + ActiveMQ 集群整合

一、使用ZooKeeper实现的Master-Slave实现方式，是对ActiveMQ进行高可用的一种有效的解决方案，高可用的原理：使用ZooKeeper（集群）注册所有的ActiveMQ Broker。只有其中的一个Broker可以对外提供服务（也就是Master节点），其他的Broker处于待机状态，被视为Slave。如果Master因故障而不能提供服务，则利用ZooKeeper的内部选举机制会从Slave中选举出一个Broker充当Master节点，继续对外提供服务。

二：部署方案，ActiveMQ集群环境准备：

（1）首先我们下载apache-activemq-5.11.1-bin.tar.gz，到我们的一台主节点上去，然后我们在（192.168.100.142一个节点上实现集群即可）
（2）Zookeeper方案

主机IP                         消息端口        通信端口        节点目录/usr/local/下
192.168.100.142        2181            2888:3888          zookeeper
192.168.100.143        2181            2888:3888           zookeeper
192.168.100.144        2181            2888:3888          zookeeper

（3）ActiveMQ方案
主机IP                      集群通信端口        消息端口         控制台端口          节点目录/usr/local/下
192.168.100.142     62621                    51511                 8161                 activemq/node1/
192.168.100.142    62622                    51512                8162                 activemq/node2/
192.168.100.142     62623                    51513                8163                 activemq/node3/

2：首先搭建zookeeper环境

1）在192.168.100.142节点下，创建/usr/local/zookeeper

文件夹，解压zookeeper-3.4.5.tar.gz文件，然后对解压好的文件改名，操作如下：
1 .1命令：mkdir /usr/local/zookeeper
1.2命令：tar -zxvf zookeeper-3.4.5.tar.gz

1.3配置环境变量命令：vim /etc/profile

export ZOOKEEPER_HOME=/usr/local/zookeeper/zookeeper-3.4.5
export PATH=$ZOOKEEPER_HOME/bin:$PATH

1.4:使环境变量生效：source /etc/profile

1.5 cd /usr/local/zookeeper/zookeeper-3.4.5/conf

    复制一份zoo_sample.cfg改名为zoo.cfg

 vim zoo.cig

  修改

dataDir=/usr/local/zookeeper/zookeeper-3.4.5/data

 增加

server.0=192.168.100.142:2888:3888
server.1=192.168.100.143:2888:3888
server.2=192.168.100.144:2888:3888

1.6:启动zookeeper:zkServer.sh start

1.7、通过zkServer.sh status查看状态

3：继续搭建activemq环境

（1）在192.168.100.142节点下，创建/usr/local/activemq
文件夹，解压apache-activemq-5.11.1-bin.tar.gz文件，然后对解压好的文件改名，操作如下：
1 命令：mkdir /usr/local/activemq
3 命令：tar -zxvf apache-activemq-5.11.1-bin.tar.gz
4 命令：cd /usr/local/activemq/
5 命令：mv apache-activemq-5.11.1/ node1 如此操作，再次反复解压apache-activemq-5.11.1-bin.tar.gz文件到/usr/local/activemq/下，建立node2和node3文件夹，如下：

（2）那我们现在已经解压好了三个mq节点也就是node1、node2、node3，下面我们要做的事情就是更改每个节点不同的配置和端口（由于是在一台机器上实现集群）。

1 修改控制台端口（默认为8161）,在mq安装路径下的conf/jetty.xml进
行修改即可。（三个节点都要修改，并且端口都不同）
命令：vim /usr/local/activemq/node1/conf/jetty.xml

三个节点都需要修改为8161、8162、8163

2 集群配置文件修改：我们在mq安装路径下的conf/activemq.xml进行修改其中的持久化适配器，修改其中的bind、zkAddress、hostname、zkPath。
然后也需要修改mq的brokerName，并且每个节点名称都必须相同。
命令：vim /usr/local/activemq-cluster/node1/conf/activemq.xml
第一处修改：brokerName=”activemq-cluster”（三个节点都需要修改）

第二处修改：添加新的leveldb配置如下（三个节点都需要修改）：

Node1:

   <persistenceAdapter>
                <!--kahaDB directory="${activemq.data}/kahadb"/ -->
                <replicatedLevelDB
                directory="${activemq.data}/leveldb"
                replicas="3"
                bind="tcp://0.0.0.0:62621"
                zkAddress="192.168.100.142:2181,192.168.100.143:2181,192.168.100.144:2181"
                hostname="localhost.localdomain"
                zkPath="/activemq/leveldb-stores"
                />
                </persistenceAdapter>

Node2:
<persistenceAdapter>
<!--kahaDB directory="${activemq.data}/kahadb"/ -->
<replicatedLevelDB
directory="${activemq.data}/leveldb"
replicas="3"
bind="tcp://0.0.0.0:62622"
  zkAddress="192.168.100.142:2181,192.168.100.143:2181,192.168.100.144:2181"
     hostname="localhost.localdomain"
zkPath="/activemq/leveldb-stores"
/>
</persistenceAdapter>

Node3:
<persistenceAdapter>
<!--kahaDB directory="${activemq.data}/kahadb"/ -->
<replicatedLevelDB
directory="${activemq.data}/leveldb"
replicas="3"
bind="tcp://0.0.0.0:62623"
  zkAddress="192.168.100.142:2181,192.168.100.143:2181,192.168.100.144:2181"
     hostname="localhost.localdomain"
zkPath="/activemq/leveldb-stores"
/>
</persistenceAdapter>

第四处修改：（修改通信的端口，避免冲突）
命令：vim /usr/local/activemq-cluster/node1/conf/activemq.xml

修改这个文件的通信端口号，三个节点都需要修改（51511,51512,51513）

三：测试启动activemq集群：
第一步：启动zookeeper集群，命令：zkServer.sh start
第二步：启动mq集群：顺序启动mq:命令如下：
/usr/local/activemq/node1/bin/activemq start（关闭stop）
/usr/local/activemq/node2/bin/activemq start（关闭stop）
/usr/local/activemq/node3/bin/activemq start（关闭stop）
第三步：查看日志信息：
tail -f /usr/local/activemq/node1/data/activemq.log
tail -f /usr/local/activemq/node2/data/activemq.log
tail -f /usr/local/activemq/node3/data/activemq.log
如果不报错，我们的集群启动成功，可以使用控制台查看！

第四步：集群的brokerUrl配置进行修改即可：
failover:(tcp://192.168.100.142:51511,tcp://192.168.100.143:51512,tcp://192.168.1.144:51513)?Randomize=false
/usr/local/activemq/node1/bin/activemq stop
/usr/local/activemq/node2/bin/activemq stop
/usr/local/activemq/node3/bin/activemq stop

测试代码：生产者：Sender

import javax.jms.Connection;
import javax.jms.ConnectionFactory;
import javax.jms.DeliveryMode;
import javax.jms.Destination;
import javax.jms.MessageProducer;
import javax.jms.Session;
import javax.jms.TextMessage;

import org.apache.activemq.ActiveMQConnectionFactory;

public class Sender {

	public static void main(String[] args) {
		try {
			// 第一步：建立ConnectionFactory工厂对象，需要填入用户名、密码、以及要连接的地址，均使用默认即可，默认端口为"tcp://localhost:61616"
			ConnectionFactory connectionFactory = new ActiveMQConnectionFactory("xjd", "xjd",
					"failover:(tcp://192.168.100.142:51511,tcp://192.168.100.143:51512,tcp://192.168.100.144:51513)?Randomize=false");

			// 第二步：通过ConnectionFactory工厂对象我们创建一个Connection连接，并且调用Connection的start方法开启连接，Connection默认是关闭的。
			Connection connection = connectionFactory.createConnection();
			connection.start();

			// 第三步：通过Connection对象创建Session会话（上下文环境对象），用于接收消息，参数配置1为是否启用是事务，参数配置2为签收模式，一般我们设置自动签收。
			Session session = connection.createSession(Boolean.FALSE, Session.AUTO_ACKNOWLEDGE);

			// 第四步：通过Session创建Destination对象，指的是一个客户端用来指定生产消息目标和消费消息来源的对象，在PTP模式中，Destination被称作Queue即队列；在Pub/Sub模式，Destination被称作Topic即主题。在程序中可以使用多个Queue和Topic。
			Destination destination = session.createQueue("first");

			// 第五步：我们需要通过Session对象创建消息的发送和接收对象（生产者和消费者）MessageProducer/MessageConsumer。
			MessageProducer producer = session.createProducer(null);

			// 第六步：我们可以使用MessageProducer的setDeliveryMode方法为其设置持久化特性和非持久化特性（DeliveryMode），我们稍后详细介绍。
			// producer.setDeliveryMode(DeliveryMode.NON_PERSISTENT);

			// 第七步：最后我们使用JMS规范的TextMessage形式创建数据（通过Session对象），并用MessageProducer的send方法发送数据。同理客户端使用receive方法进行接收数据。最后不要忘记关闭Connection连接。

			for (int i = 0; i < 500000; i++) {
				TextMessage msg = session.createTextMessage("我是消息内容" + i);
				// 第一个参数目标地址
				// 第二个参数 具体的数据信息
				// 第三个参数 传送数据的模式
				// 第四个参数 优先级
				// 第五个参数 消息的过期时间
				producer.send(destination, msg, DeliveryMode.NON_PERSISTENT, 0, 1000L);
				System.out.println("发送消息：" + msg.getText());
				Thread.sleep(1000);

			}

			if (connection != null) {
				connection.close();
			}
		} catch (Exception e) {
			e.printStackTrace();
		}

	}
}

消费者：

import javax.jms.Connection;
import javax.jms.ConnectionFactory;
import javax.jms.Destination;
import javax.jms.MessageConsumer;
import javax.jms.Session;
import javax.jms.TextMessage;

import org.apache.activemq.ActiveMQConnectionFactory;

public class Receiver {

	public static void main(String[] args) {
		try {
			// 第一步：建立ConnectionFactory工厂对象，需要填入用户名、密码、以及要连接的地址，均使用默认即可，默认端口为"tcp://localhost:61616"
			ConnectionFactory connectionFactory = new ActiveMQConnectionFactory("xjd", "xjd",
					"failover:(tcp://192.168.100.142:51511,tcp://192.168.100.143:51512,tcp://192.168.100.144:51513)?Randomize=false");

			// 第二步：通过ConnectionFactory工厂对象我们创建一个Connection连接，并且调用Connection的start方法开启连接，Connection默认是关闭的。
			Connection connection = connectionFactory.createConnection();
			connection.start();

			// 第三步：通过Connection对象创建Session会话（上下文环境对象），用于接收消息，参数配置1为是否启用是事务，参数配置2为签收模式，一般我们设置自动签收。
			Session session = connection.createSession(Boolean.FALSE, Session.AUTO_ACKNOWLEDGE);

			// 第四步：通过Session创建Destination对象，指的是一个客户端用来指定生产消息目标和消费消息来源的对象，在PTP模式中，Destination被称作Queue即队列；在Pub/Sub模式，Destination被称作Topic即主题。在程序中可以使用多个Queue和Topic。
			Destination destination = session.createQueue("first");
			// 第五步：通过Session创建MessageConsumer
			MessageConsumer consumer = session.createConsumer(destination);

			while (true) {
				TextMessage msg = (TextMessage) consumer.receive();
				if (msg == null)
					break;
				System.out.println("收到的内容：" + msg.getText());
			}
		} catch (Exception e) {
			e.printStackTrace();
		}

	}
}

打开浏览器输入192.168.100.142:8161/admin查看队列的消费情况，然后stop192.168.100.142的activemq服务，就可以完成故障转。移到另外2台机器的任意一台。