Zookeeper + ActiveMQ 集群整合

一、使用ZooKeeper实现的Master-Slave实现方式,是对ActiveMQ进行高可用的一种有效的解决方案,高可用的原理:使用ZooKeeper(集群)注册所有的ActiveMQ Broker。只有其中的一个Broker可以对外提供服务(也就是Master节点),其他的Broker处于待机状态,被视为Slave。如果Master因故障而不能提供服务,则利用ZooKeeper的内部选举机制会从Slave中选举出一个Broker充当Master节点,继续对外提供服务。

二:部署方案,ActiveMQ集群环境准备:

(1)首先我们下载apache-activemq-5.11.1-bin.tar.gz,到我们的一台主节点上去,然后我们在(192.168.100.142一个节点上实现集群即可)
(2)Zookeeper方案

主机IP                         消息端口        通信端口        节点目录/usr/local/下
192.168.100.142        2181            2888:3888          zookeeper
192.168.100.143        2181            2888:3888           zookeeper
192.168.100.144        2181            2888:3888          zookeeper

(3)ActiveMQ方案
主机IP                      集群通信端口        消息端口         控制台端口          节点目录/usr/local/下
192.168.100.142     62621                    51511                 8161                 activemq/node1/
192.168.100.142    62622                    51512                8162                 activemq/node2/
192.168.100.142     62623                    51513                8163                 activemq/node3/

2:首先搭建zookeeper环境

1)在192.168.100.142节点下,创建/usr/local/zookeeper

文件夹,解压zookeeper-3.4.5.tar.gz文件,然后对解压好的文件改名,操作如下:
1 .1命令:mkdir /usr/local/zookeeper
1.2命令:tar -zxvf zookeeper-3.4.5.tar.gz

1.3配置环境变量命令:vim /etc/profile


   
   
  1. export ZOOKEEPER_HOME=/usr/local/zookeeper/zookeeper-3.4.5
  2. export PATH=$ZOOKEEPER_HOME/bin:$PATH

1.4:使环境变量生效:source /etc/profile

1.5 cd /usr/local/zookeeper/zookeeper-3.4.5/conf

    复制一份zoo_sample.cfg改名为zoo.cfg

 vim zoo.cig
   
   

  修改

dataDir=/usr/local/zookeeper/zookeeper-3.4.5/data
   
   

 增加


   
   
  1. server.0=192.168.100.142:2888:3888
  2. server.1=192.168.100.143:2888:3888
  3. server.2=192.168.100.144:2888:3888

1.6:启动zookeeper:zkServer.sh start

1.7、通过zkServer.sh status查看状态




3:继续搭建activemq环境

(1)在192.168.100.142节点下,创建/usr/local/activemq
文件夹,解压apache-activemq-5.11.1-bin.tar.gz文件,然后对解压好的文件改名,操作如下:
1 命令:mkdir /usr/local/activemq
3 命令:tar -zxvf apache-activemq-5.11.1-bin.tar.gz
4 命令:cd /usr/local/activemq/
5 命令:mv apache-activemq-5.11.1/ node1 如此操作,再次反复解压apache-activemq-5.11.1-bin.tar.gz文件到/usr/local/activemq/下,建立node2和node3文件夹,如下:


(2)那我们现在已经解压好了三个mq节点也就是node1、node2、node3,下面我们要做的事情就是更改每个节点不同的配置和端口(由于是在一台机器上实现集群)。

1 修改控制台端口(默认为8161),在mq安装路径下的conf/jetty.xml进
行修改即可。(三个节点都要修改,并且端口都不同)
命令:vim /usr/local/activemq/node1/conf/jetty.xml


三个节点都需要修改为8161、8162、8163

2 集群配置文件修改:我们在mq安装路径下的conf/activemq.xml进行修改其中的持久化适配器,修改其中的bind、zkAddress、hostname、zkPath。
然后也需要修改mq的brokerName,并且每个节点名称都必须相同。
命令:vim /usr/local/activemq-cluster/node1/conf/activemq.xml
第一处修改:brokerName=”activemq-cluster”(三个节点都需要修改)


第二处修改:添加新的leveldb配置如下(三个节点都需要修改):


   
   
  1. Node1:
  2. <persistenceAdapter>
  3. <!--kahaDB directory="${activemq.data}/kahadb"/ --&gt;</span></div></div></li><li><div class="hljs-ln-numbers"><div class="hljs-ln-line hljs-ln-n" data-line-number="5"></div></div><div class="hljs-ln-code"><div class="hljs-ln-line"> <span class="hljs-tag">&lt;<span class="hljs-name">replicatedLevelDB</span></span></div></div></li><li><div class="hljs-ln-numbers"><div class="hljs-ln-line hljs-ln-n" data-line-number="6"></div></div><div class="hljs-ln-code"><div class="hljs-ln-line"> <span class="hljs-attr">directory</span>=<span class="hljs-string">"${activemq.data}/leveldb"
  4. replicas= "3"
  5. bind= "tcp://0.0.0.0:62621"
  6. zkAddress= "192.168.100.142:2181,192.168.100.143:2181,192.168.100.144:2181"
  7. hostname= "localhost.localdomain"
  8. zkPath= "/activemq/leveldb-stores"
  9. />
  10. </persistenceAdapter>
  11. Node2:
  12. <persistenceAdapter>
  13. <!--kahaDB directory="${activemq.data}/kahadb"/ --&gt;</span></div></div></li><li><div class="hljs-ln-numbers"><div class="hljs-ln-line hljs-ln-n" data-line-number="18"></div></div><div class="hljs-ln-code"><div class="hljs-ln-line"><span class="hljs-tag">&lt;<span class="hljs-name">replicatedLevelDB</span></span></div></div></li><li><div class="hljs-ln-numbers"><div class="hljs-ln-line hljs-ln-n" data-line-number="19"></div></div><div class="hljs-ln-code"><div class="hljs-ln-line"><span class="hljs-attr">directory</span>=<span class="hljs-string">"${activemq.data}/leveldb"
  14. replicas= "3"
  15. bind= "tcp://0.0.0.0:62622"
  16. zkAddress= "192.168.100.142:2181,192.168.100.143:2181,192.168.100.144:2181"
  17. hostname= "localhost.localdomain"
  18. zkPath= "/activemq/leveldb-stores"
  19. />
  20. </persistenceAdapter>
  21. Node3:
  22. <persistenceAdapter>
  23. <!--kahaDB directory="${activemq.data}/kahadb"/ --&gt;</span></div></div></li><li><div class="hljs-ln-numbers"><div class="hljs-ln-line hljs-ln-n" data-line-number="31"></div></div><div class="hljs-ln-code"><div class="hljs-ln-line"><span class="hljs-tag">&lt;<span class="hljs-name">replicatedLevelDB</span></span></div></div></li><li><div class="hljs-ln-numbers"><div class="hljs-ln-line hljs-ln-n" data-line-number="32"></div></div><div class="hljs-ln-code"><div class="hljs-ln-line"><span class="hljs-attr">directory</span>=<span class="hljs-string">"${activemq.data}/leveldb"
  24. replicas= "3"
  25. bind= "tcp://0.0.0.0:62623"
  26. zkAddress= "192.168.100.142:2181,192.168.100.143:2181,192.168.100.144:2181"
  27. hostname= "localhost.localdomain"
  28. zkPath= "/activemq/leveldb-stores"
  29. />
  30. </persistenceAdapter>
第四处修改:(修改通信的端口,避免冲突)
命令:vim /usr/local/activemq-cluster/node1/conf/activemq.xml

修改这个文件的通信端口号,三个节点都需要修改(51511,51512,51513)


三:测试启动activemq集群:
第一步:启动zookeeper集群,命令:zkServer.sh start
第二步:启动mq集群:顺序启动mq:命令如下:
/usr/local/activemq/node1/bin/activemq start(关闭stop)
/usr/local/activemq/node2/bin/activemq start(关闭stop)
/usr/local/activemq/node3/bin/activemq start(关闭stop)
第三步:查看日志信息:
tail -f /usr/local/activemq/node1/data/activemq.log
tail -f /usr/local/activemq/node2/data/activemq.log
tail -f /usr/local/activemq/node3/data/activemq.log
如果不报错,我们的集群启动成功,可以使用控制台查看!

第四步:集群的brokerUrl配置进行修改即可:
failover:(tcp://192.168.100.142:51511,tcp://192.168.100.143:51512,tcp://192.168.1.144:51513)?Randomize=false
/usr/local/activemq/node1/bin/activemq stop
/usr/local/activemq/node2/bin/activemq stop
/usr/local/activemq/node3/bin/activemq stop


测试代码:生产者:Sender


   
   
  1. import javax.jms.Connection;
  2. import javax.jms.ConnectionFactory;
  3. import javax.jms.DeliveryMode;
  4. import javax.jms.Destination;
  5. import javax.jms.MessageProducer;
  6. import javax.jms.Session;
  7. import javax.jms.TextMessage;
  8. import org.apache.activemq.ActiveMQConnectionFactory;
  9. public class Sender {
  10. public static void main(String[] args) {
  11. try {
  12. // 第一步:建立ConnectionFactory工厂对象,需要填入用户名、密码、以及要连接的地址,均使用默认即可,默认端口为"tcp://localhost:61616"
  13. ConnectionFactory connectionFactory = new ActiveMQConnectionFactory( "xjd", "xjd",
  14. "failover:(tcp://192.168.100.142:51511,tcp://192.168.100.143:51512,tcp://192.168.100.144:51513)?Randomize=false");
  15. // 第二步:通过ConnectionFactory工厂对象我们创建一个Connection连接,并且调用Connection的start方法开启连接,Connection默认是关闭的。
  16. Connection connection = connectionFactory.createConnection();
  17. connection.start();
  18. // 第三步:通过Connection对象创建Session会话(上下文环境对象),用于接收消息,参数配置1为是否启用是事务,参数配置2为签收模式,一般我们设置自动签收。
  19. Session session = connection.createSession(Boolean.FALSE, Session.AUTO_ACKNOWLEDGE);
  20. // 第四步:通过Session创建Destination对象,指的是一个客户端用来指定生产消息目标和消费消息来源的对象,在PTP模式中,Destination被称作Queue即队列;在Pub/Sub模式,Destination被称作Topic即主题。在程序中可以使用多个Queue和Topic。
  21. Destination destination = session.createQueue( "first");
  22. // 第五步:我们需要通过Session对象创建消息的发送和接收对象(生产者和消费者)MessageProducer/MessageConsumer。
  23. MessageProducer producer = session.createProducer( null);
  24. // 第六步:我们可以使用MessageProducer的setDeliveryMode方法为其设置持久化特性和非持久化特性(DeliveryMode),我们稍后详细介绍。
  25. // producer.setDeliveryMode(DeliveryMode.NON_PERSISTENT);
  26. // 第七步:最后我们使用JMS规范的TextMessage形式创建数据(通过Session对象),并用MessageProducer的send方法发送数据。同理客户端使用receive方法进行接收数据。最后不要忘记关闭Connection连接。
  27. for ( int i = 0; i < 500000; i++) {
  28. TextMessage msg = session.createTextMessage( "我是消息内容" + i);
  29. // 第一个参数目标地址
  30. // 第二个参数 具体的数据信息
  31. // 第三个参数 传送数据的模式
  32. // 第四个参数 优先级
  33. // 第五个参数 消息的过期时间
  34. producer.send(destination, msg, DeliveryMode.NON_PERSISTENT, 0, 1000L);
  35. System.out.println( "发送消息:" + msg.getText());
  36. Thread.sleep( 1000);
  37. }
  38. if (connection != null) {
  39. connection.close();
  40. }
  41. } catch (Exception e) {
  42. e.printStackTrace();
  43. }
  44. }
  45. }

消费者:


   
   
  1. import javax.jms.Connection;
  2. import javax.jms.ConnectionFactory;
  3. import javax.jms.Destination;
  4. import javax.jms.MessageConsumer;
  5. import javax.jms.Session;
  6. import javax.jms.TextMessage;
  7. import org.apache.activemq.ActiveMQConnectionFactory;
  8. public class Receiver {
  9. public static void main(String[] args) {
  10. try {
  11. // 第一步:建立ConnectionFactory工厂对象,需要填入用户名、密码、以及要连接的地址,均使用默认即可,默认端口为"tcp://localhost:61616"
  12. ConnectionFactory connectionFactory = new ActiveMQConnectionFactory( "xjd", "xjd",
  13. "failover:(tcp://192.168.100.142:51511,tcp://192.168.100.143:51512,tcp://192.168.100.144:51513)?Randomize=false");
  14. // 第二步:通过ConnectionFactory工厂对象我们创建一个Connection连接,并且调用Connection的start方法开启连接,Connection默认是关闭的。
  15. Connection connection = connectionFactory.createConnection();
  16. connection.start();
  17. // 第三步:通过Connection对象创建Session会话(上下文环境对象),用于接收消息,参数配置1为是否启用是事务,参数配置2为签收模式,一般我们设置自动签收。
  18. Session session = connection.createSession(Boolean.FALSE, Session.AUTO_ACKNOWLEDGE);
  19. // 第四步:通过Session创建Destination对象,指的是一个客户端用来指定生产消息目标和消费消息来源的对象,在PTP模式中,Destination被称作Queue即队列;在Pub/Sub模式,Destination被称作Topic即主题。在程序中可以使用多个Queue和Topic。
  20. Destination destination = session.createQueue( "first");
  21. // 第五步:通过Session创建MessageConsumer
  22. MessageConsumer consumer = session.createConsumer(destination);
  23. while ( true) {
  24. TextMessage msg = (TextMessage) consumer.receive();
  25. if (msg == null)
  26. break;
  27. System.out.println( "收到的内容:" + msg.getText());
  28. }
  29. } catch (Exception e) {
  30. e.printStackTrace();
  31. }
  32. }
  33. }

打开浏览器输入192.168.100.142:8161/admin查看队列的消费情况,然后stop192.168.100.142的activemq服务,就可以完成故障转。移到另外2台机器的任意一台。



  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值