转载出处http://blog.csdn.net/evankaka
一、rabbitMQ简介
1.1、rabbitMQ的优点(适用范围)
1. 基于erlang语言开发具有高可用高并发的优点,适合集群服务器。
2. 健壮、稳定、易用、跨平台、支持多种语言、文档齐全。
3. 有消息确认机制和持久化机制,可靠性高。
4. 开源
其他MQ的优势:
1. Apache ActiveMQ曝光率最高,但是可能会丢消息。
2. ZeroMQ延迟很低、支持灵活拓扑,但是不支持消息持久化和崩溃恢复。
1.2、几个概念说明
producer&Consumer
producer指的是消息生产者,consumer消息的消费者。
Queue
消息队列,提供了FIFO的处理机制,具有缓存消息的能力。rabbitmq中,队列消息可以设置为持久化,临时或者自动删除。
设置为持久化的队列,queue中的消息会在server本地硬盘存储一份,防止系统crash,数据丢失
设置为临时队列,queue中的数据在系统重启之后就会丢失
设置为自动删除的队列,当不存在用户连接到server,队列中的数据会被自动删除Exchange
Exchange类似于数据通信网络中的交换机,提供消息路由策略。rabbitmq中,producer不是通过信道直接将消息发送给queue,而是先发送给Exchange。一个Exchange可以和多个Queue进行绑定,producer在传递消息的时候,会传递一个ROUTING_KEY,Exchange会根据这个ROUTING_KEY按照特定的路由算法,将消息路由给指定的queue。和Queue一样,Exchange也可设置为持久化,临时或者自动删除。
Exchange有4种类型:direct(默认),fanout, topic, 和headers,不同类型的Exchange转发消息的策略有所区别:
Direct
直接交换器,工作方式类似于单播,Exchange会将消息发送完全匹配ROUTING_KEY的Queue
fanout
广播是式交换器,不管消息的ROUTING_KEY设置为什么,Exchange都会将消息转发给所有绑定的Queue。
topic
主题交换器,工作方式类似于组播,Exchange会将消息转发和ROUTING_KEY匹配模式相同的所有队列,比如,ROUTING_KEY为user.stock的Message会转发给绑定匹配模式为 * .stock,user.stock, * . * 和#.user.stock.#的队列。( * 表是匹配一个任意词组,#表示匹配0个或多个词组)
headers
消息体的header匹配(ignore)
Binding
所谓绑定就是将一个特定的 Exchange 和一个特定的 Queue 绑定起来。Exchange 和Queue的绑定可以是多对多的关系。
virtual host
在rabbitmq server上可以创建多个虚拟的message broker,又叫做virtual hosts (vhosts)。每一个vhost本质上是一个mini-rabbitmq server,分别管理各自的exchange,和bindings。vhost相当于物理的server,可以为不同app提供边界隔离,使得应用安全的运行在不同的vhost实例上,相互之间不会干扰。producer和consumer连接rabbit server需要指定一个vhost。
1.3、消息队列的使用过程
1. 客户端连接到消息队列服务器,打开一个channel。
2. 客户端声明一个exchange,并设置相关属性。
3. 客户端声明一个queue,并设置相关属性。
4. 客户端使用routing key,在exchange和queue之间建立好绑定关系。
5. 客户端投递消息到exchange。
6. exchange接收到消息后,就根据消息的key和已经设置的binding,进行消息路由,将消息投递到一个或多个队列里
二、环境配置与安装
1、Erlang环境安装
RabbitMQ是基于Erlang的,所以首先必须配置Erlang环境。
从Erlang的官网 http://www.erlang.org/download.html 下载最新的erlang安装包,我下载的版本是 otp_src_R14B03.tar.gz 。然后:
- $ tar xvzf otp_src_R14B03.tar.gz
- $ cd otp_src_R14B03
- $ ./configure
编译后的输出
如下图:
注:
可能会报错 configure: error: No curses library functions found
configure: error: /bin/sh '/home/liyixiang/erlang/configure' failed for erts
原因是缺少ncurses包
解决:在ubuntu系统下
- apt-cache search ncurses
- apt-get install libncurses5-dev
然后重新执行
提示没有wxWidgets和fop、ssh、odbc、ssl,但是问题不大。继续:
然后:
配置erlang环境变量
修改/etc/profile文件,增加下面的环境变量:(vim profile i插入 编辑完毕ESC退出 wq!强制修改)
- #set erlang environment
- export PATH=$PATH:/usr/erlang/bin:$PATH
- source profile使得文件生效
下面是我的
2、RabbitMQ-Server安装
安装完Erlang,开始安装RabbitMQ-Server。安装方法有三种,这里笔者三者都试过了,就只有以下这个方法成功了。
直接使用:
- apt-get install rabbitmq-server
安装完成后会自动打开:
使用命令查看rabbitmq运行状态:
停止
开启
3、rabbitmq web管理页面插件安装
输入以下命令
- <pre code_snippet_id="1560509" snippet_file_name="blog_20160120_11_8615485" name="code" class="plain">cd /usr/lib/rabbitmq/bin/
- rabbitmq-plugins enable rabbitmq_management</pre>
这里笔者一直安装不成功。
如果安装成功打开浏览器,输入 http://[server-name]:15672/ 如 http://localhost:15672/ ,会要求输入用户名和密码,用默认的guest/guest即可(guest/guest用户只能从localhost地址登录,如果要配置远程登录,必须另创建用户)。
如果要从远程登录怎么做呢?处于安全考虑,guest这个默认的用户只能通过http://localhost:15672来登录,其他的IP无法直接用这个guest帐号。这里我们可以通过配置文件来实现从远程登录管理界面,只要编辑/etc/rabbitmq/rabbitmq.config文件(没有就新增),添加以下配置就可以了。
4、添加用户
- vim /etc/rabbitmq/rabbitmq.config
然后添加
- [
- {rabbit, [{tcp_listeners, [5672]}, {loopback_users, ["asdf"]}]}
- ].
注意上面有个点号
现在添加了一个新授权用户asdf,可以远程使用这个用户名。记得要先用命令添加这个命令才行:
- cd /usr/lib/rabbitmq/bin/
#用户名与密码
- sudo rabbitmqctl add_user asdf 123456
用户设置为administrator才能远程访问
- sudo rabbitmqctl set_user_tags asdf administrator
- sudo rabbitmqctl set_permissions -p / asdf ".*" ".*" ".*"
其实也可以通过管理平台页面直接添加用户和密码等信息。如果还不能远程访问或远程登录检查是不是5672, 15672端口没有开放!!!!!!
5、开放端口
三、简单Java实例
下面来演示一个使用java的简单实例:
1、首先是消息生产者和提供者的基类
- package com.lin;
-
- import java.io.IOException;
-
- import com.rabbitmq.client.Channel;
- import com.rabbitmq.client.Connection;
- import com.rabbitmq.client.ConnectionFactory;
-
-
-
-
-
-
-
-
- public abstract class EndPoint{
-
- protected Channel channel;
- protected Connection connection;
- protected String endPointName;
-
- public EndPoint(String endpointName) throws IOException{
- this.endPointName = endpointName;
-
-
- ConnectionFactory factory = new ConnectionFactory();
-
-
- factory.setHost("10.75.4.25");
- factory.setPort(5672);
- factory.setUsername("asdf");
- factory.setPassword("123456");
-
-
- connection = factory.newConnection();
-
-
- channel = connection.createChannel();
-
-
-
- channel.queueDeclare(endpointName, false, false, false, null);
- }
-
-
-
-
-
-
- public void close() throws IOException{
- this.channel.close();
- this.connection.close();
- }
- }
2、消息提供者
- package com.lin.producer;
-
- import java.io.IOException;
- import java.io.Serializable;
-
- import org.apache.commons.lang.SerializationUtils;
-
- import com.lin.EndPoint;
-
-
-
-
-
-
-
-
-
- public class Producer extends EndPoint{
-
- public Producer(String endPointName) throws IOException{
- super(endPointName);
- }
-
- public void sendMessage(Serializable object) throws IOException {
- channel.basicPublish("",endPointName, null, SerializationUtils.serialize(object));
- }
- }
3、消息消费者
- package com.lin.consumer;
-
- import java.io.IOException;
- import java.util.HashMap;
- import java.util.Map;
-
- import org.apache.commons.lang.SerializationUtils;
-
- import com.lin.EndPoint;
- import com.rabbitmq.client.AMQP.BasicProperties;
- import com.rabbitmq.client.Consumer;
- import com.rabbitmq.client.Envelope;
- import com.rabbitmq.client.ShutdownSignalException;
-
-
-
-
-
-
-
-
-
- public class QueueConsumer extends EndPoint implements Runnable, Consumer{
-
- public QueueConsumer(String endPointName) throws IOException{
- super(endPointName);
- }
-
- public void run() {
- try {
-
- channel.basicConsume(endPointName, true,this);
- } catch (IOException e) {
- e.printStackTrace();
- }
- }
-
-
-
-
- public void handleConsumeOk(String consumerTag) {
- System.out.println("Consumer "+consumerTag +" registered");
- }
-
-
-
-
- public void handleDelivery(String consumerTag, Envelope env,
- BasicProperties props, byte[] body) throws IOException {
- Map map = (HashMap)SerializationUtils.deserialize(body);
- System.out.println("Message Number "+ map.get("message number") + " received.");
-
- }
-
- public void handleCancel(String consumerTag) {}
- public void handleCancelOk(String consumerTag) {}
- public void handleRecoverOk(String consumerTag) {}
- public void handleShutdownSignal(String consumerTag, ShutdownSignalException arg1) {}
- }
4、测试
- package com.lin.test;
-
- import java.io.IOException;
- import java.sql.SQLException;
- import java.util.HashMap;
-
- import com.lin.consumer.QueueConsumer;
- import com.lin.producer.Producer;
-
- public class Test {
- public Test() throws Exception{
-
- QueueConsumer consumer = new QueueConsumer("queue");
- Thread consumerThread = new Thread(consumer);
- consumerThread.start();
-
- Producer producer = new Producer("queue");
-
- for (int i = 0; i < 1000000; i++) {
- HashMap message = new HashMap();
- message.put("message number", i);
- producer.sendMessage(message);
- System.out.println("Message Number "+ i +" sent.");
- }
- }
-
-
-
-
-
-
- public static void main(String[] args) throws Exception{
- new Test();
- }
- }
其中引入的jar包:
- <!-- rabbitmq客户端 -->
- <dependencies>
- <dependency>
- <groupId>com.rabbitmq</groupId>
- <artifactId>amqp-client</artifactId>
- <version>3.0.4</version>
- </dependency>
-
- <dependency>
- <groupId>commons-lang</groupId>
- <artifactId>commons-lang</artifactId>
- <version>2.6</version>
- </dependency>
- <dependency>
- <groupId>org.apache.commons</groupId>
- <artifactId>commons-lang3</artifactId>
- <version>3.1</version>
- </dependency>
- </dependencies>
测试结果:
在提供消息
然后同时打开rabbitmq的服务端,输入如下:
可以看到有个名为queue的消息队列(更好的方法是安装好web监控插件,笔者一直安装失败,所以这里就不展示了)
一、rabbitMQ简介
1.1、rabbitMQ的优点(适用范围)
1. 基于erlang语言开发具有高可用高并发的优点,适合集群服务器。
2. 健壮、稳定、易用、跨平台、支持多种语言、文档齐全。
3. 有消息确认机制和持久化机制,可靠性高。
4. 开源
其他MQ的优势:
1. Apache ActiveMQ曝光率最高,但是可能会丢消息。
2. ZeroMQ延迟很低、支持灵活拓扑,但是不支持消息持久化和崩溃恢复。
1.2、几个概念说明
producer&Consumer
producer指的是消息生产者,consumer消息的消费者。
Queue
消息队列,提供了FIFO的处理机制,具有缓存消息的能力。rabbitmq中,队列消息可以设置为持久化,临时或者自动删除。
设置为持久化的队列,queue中的消息会在server本地硬盘存储一份,防止系统crash,数据丢失
设置为临时队列,queue中的数据在系统重启之后就会丢失
设置为自动删除的队列,当不存在用户连接到server,队列中的数据会被自动删除Exchange
Exchange类似于数据通信网络中的交换机,提供消息路由策略。rabbitmq中,producer不是通过信道直接将消息发送给queue,而是先发送给Exchange。一个Exchange可以和多个Queue进行绑定,producer在传递消息的时候,会传递一个ROUTING_KEY,Exchange会根据这个ROUTING_KEY按照特定的路由算法,将消息路由给指定的queue。和Queue一样,Exchange也可设置为持久化,临时或者自动删除。
Exchange有4种类型:direct(默认),fanout, topic, 和headers,不同类型的Exchange转发消息的策略有所区别:
Direct
直接交换器,工作方式类似于单播,Exchange会将消息发送完全匹配ROUTING_KEY的Queue
fanout
广播是式交换器,不管消息的ROUTING_KEY设置为什么,Exchange都会将消息转发给所有绑定的Queue。
topic
主题交换器,工作方式类似于组播,Exchange会将消息转发和ROUTING_KEY匹配模式相同的所有队列,比如,ROUTING_KEY为user.stock的Message会转发给绑定匹配模式为 * .stock,user.stock, * . * 和#.user.stock.#的队列。( * 表是匹配一个任意词组,#表示匹配0个或多个词组)
headers
消息体的header匹配(ignore)
Binding
所谓绑定就是将一个特定的 Exchange 和一个特定的 Queue 绑定起来。Exchange 和Queue的绑定可以是多对多的关系。
virtual host
在rabbitmq server上可以创建多个虚拟的message broker,又叫做virtual hosts (vhosts)。每一个vhost本质上是一个mini-rabbitmq server,分别管理各自的exchange,和bindings。vhost相当于物理的server,可以为不同app提供边界隔离,使得应用安全的运行在不同的vhost实例上,相互之间不会干扰。producer和consumer连接rabbit server需要指定一个vhost。
1.3、消息队列的使用过程
1. 客户端连接到消息队列服务器,打开一个channel。
2. 客户端声明一个exchange,并设置相关属性。
3. 客户端声明一个queue,并设置相关属性。
4. 客户端使用routing key,在exchange和queue之间建立好绑定关系。
5. 客户端投递消息到exchange。
6. exchange接收到消息后,就根据消息的key和已经设置的binding,进行消息路由,将消息投递到一个或多个队列里
二、环境配置与安装
1、Erlang环境安装
RabbitMQ是基于Erlang的,所以首先必须配置Erlang环境。
从Erlang的官网 http://www.erlang.org/download.html 下载最新的erlang安装包,我下载的版本是 otp_src_R14B03.tar.gz 。然后:
- $ tar xvzf otp_src_R14B03.tar.gz
- $ cd otp_src_R14B03
- $ ./configure
编译后的输出
如下图:
注:
可能会报错 configure: error: No curses library functions found
configure: error: /bin/sh '/home/liyixiang/erlang/configure' failed for erts
原因是缺少ncurses包
解决:在ubuntu系统下
- apt-cache search ncurses
- apt-get install libncurses5-dev
然后重新执行
提示没有wxWidgets和fop、ssh、odbc、ssl,但是问题不大。继续:
然后:
配置erlang环境变量
修改/etc/profile文件,增加下面的环境变量:(vim profile i插入 编辑完毕ESC退出 wq!强制修改)
- #set erlang environment
- export PATH=$PATH:/usr/erlang/bin:$PATH
- source profile使得文件生效
下面是我的
2、RabbitMQ-Server安装
安装完Erlang,开始安装RabbitMQ-Server。安装方法有三种,这里笔者三者都试过了,就只有以下这个方法成功了。
直接使用:
- apt-get install rabbitmq-server
安装完成后会自动打开:
使用命令查看rabbitmq运行状态:
停止
开启
3、rabbitmq web管理页面插件安装
输入以下命令
- <pre code_snippet_id="1560509" snippet_file_name="blog_20160120_11_8615485" name="code" class="plain">cd /usr/lib/rabbitmq/bin/
- rabbitmq-plugins enable rabbitmq_management</pre>
这里笔者一直安装不成功。
如果安装成功打开浏览器,输入 http://[server-name]:15672/ 如 http://localhost:15672/ ,会要求输入用户名和密码,用默认的guest/guest即可(guest/guest用户只能从localhost地址登录,如果要配置远程登录,必须另创建用户)。
如果要从远程登录怎么做呢?处于安全考虑,guest这个默认的用户只能通过http://localhost:15672来登录,其他的IP无法直接用这个guest帐号。这里我们可以通过配置文件来实现从远程登录管理界面,只要编辑/etc/rabbitmq/rabbitmq.config文件(没有就新增),添加以下配置就可以了。
4、添加用户
- vim /etc/rabbitmq/rabbitmq.config
然后添加
- [
- {rabbit, [{tcp_listeners, [5672]}, {loopback_users, ["asdf"]}]}
- ].
注意上面有个点号
现在添加了一个新授权用户asdf,可以远程使用这个用户名。记得要先用命令添加这个命令才行:
- cd /usr/lib/rabbitmq/bin/
#用户名与密码
- sudo rabbitmqctl add_user asdf 123456
用户设置为administrator才能远程访问
- sudo rabbitmqctl set_user_tags asdf administrator
- sudo rabbitmqctl set_permissions -p / asdf ".*" ".*" ".*"
其实也可以通过管理平台页面直接添加用户和密码等信息。如果还不能远程访问或远程登录检查是不是5672, 15672端口没有开放!!!!!!
5、开放端口
三、简单Java实例
下面来演示一个使用java的简单实例:
1、首先是消息生产者和提供者的基类
- package com.lin;
-
- import java.io.IOException;
-
- import com.rabbitmq.client.Channel;
- import com.rabbitmq.client.Connection;
- import com.rabbitmq.client.ConnectionFactory;
-
-
-
-
-
-
-
-
- public abstract class EndPoint{
-
- protected Channel channel;
- protected Connection connection;
- protected String endPointName;
-
- public EndPoint(String endpointName) throws IOException{
- this.endPointName = endpointName;
-
-
- ConnectionFactory factory = new ConnectionFactory();
-
-
- factory.setHost("10.75.4.25");
- factory.setPort(5672);
- factory.setUsername("asdf");
- factory.setPassword("123456");
-
-
- connection = factory.newConnection();
-
-
- channel = connection.createChannel();
-
-
-
- channel.queueDeclare(endpointName, false, false, false, null);
- }
-
-
-
-
-
-
- public void close() throws IOException{
- this.channel.close();
- this.connection.close();
- }
- }
2、消息提供者
- package com.lin.producer;
-
- import java.io.IOException;
- import java.io.Serializable;
-
- import org.apache.commons.lang.SerializationUtils;
-
- import com.lin.EndPoint;
-
-
-
-
-
-
-
-
-
- public class Producer extends EndPoint{
-
- public Producer(String endPointName) throws IOException{
- super(endPointName);
- }
-
- public void sendMessage(Serializable object) throws IOException {
- channel.basicPublish("",endPointName, null, SerializationUtils.serialize(object));
- }
- }
3、消息消费者
- package com.lin.consumer;
-
- import java.io.IOException;
- import java.util.HashMap;
- import java.util.Map;
-
- import org.apache.commons.lang.SerializationUtils;
-
- import com.lin.EndPoint;
- import com.rabbitmq.client.AMQP.BasicProperties;
- import com.rabbitmq.client.Consumer;
- import com.rabbitmq.client.Envelope;
- import com.rabbitmq.client.ShutdownSignalException;
-
-
-
-
-
-
-
-
-
- public class QueueConsumer extends EndPoint implements Runnable, Consumer{
-
- public QueueConsumer(String endPointName) throws IOException{
- super(endPointName);
- }
-
- public void run() {
- try {
-
- channel.basicConsume(endPointName, true,this);
- } catch (IOException e) {
- e.printStackTrace();
- }
- }
-
-
-
-
- public void handleConsumeOk(String consumerTag) {
- System.out.println("Consumer "+consumerTag +" registered");
- }
-
-
-
-
- public void handleDelivery(String consumerTag, Envelope env,
- BasicProperties props, byte[] body) throws IOException {
- Map map = (HashMap)SerializationUtils.deserialize(body);
- System.out.println("Message Number "+ map.get("message number") + " received.");
-
- }
-
- public void handleCancel(String consumerTag) {}
- public void handleCancelOk(String consumerTag) {}
- public void handleRecoverOk(String consumerTag) {}
- public void handleShutdownSignal(String consumerTag, ShutdownSignalException arg1) {}
- }
4、测试
- package com.lin.test;
-
- import java.io.IOException;
- import java.sql.SQLException;
- import java.util.HashMap;
-
- import com.lin.consumer.QueueConsumer;
- import com.lin.producer.Producer;
-
- public class Test {
- public Test() throws Exception{
-
- QueueConsumer consumer = new QueueConsumer("queue");
- Thread consumerThread = new Thread(consumer);
- consumerThread.start();
-
- Producer producer = new Producer("queue");
-
- for (int i = 0; i < 1000000; i++) {
- HashMap message = new HashMap();
- message.put("message number", i);
- producer.sendMessage(message);
- System.out.println("Message Number "+ i +" sent.");
- }
- }
-
-
-
-
-
-
- public static void main(String[] args) throws Exception{
- new Test();
- }
- }
其中引入的jar包:
- <!-- rabbitmq客户端 -->
- <dependencies>
- <dependency>
- <groupId>com.rabbitmq</groupId>
- <artifactId>amqp-client</artifactId>
- <version>3.0.4</version>
- </dependency>
-
- <dependency>
- <groupId>commons-lang</groupId>
- <artifactId>commons-lang</artifactId>
- <version>2.6</version>
- </dependency>
- <dependency>
- <groupId>org.apache.commons</groupId>
- <artifactId>commons-lang3</artifactId>
- <version>3.1</version>
- </dependency>
- </dependencies>
测试结果:
在提供消息
然后同时打开rabbitmq的服务端,输入如下:
可以看到有个名为queue的消息队列(更好的方法是安装好web监控插件,笔者一直安装失败,所以这里就不展示了)