1.概述
中间件 :非底层操作系统软件,非业务应用软件,不是直接给最终用户使用的,不能直接给客户带来价值的软件统称为中间件。
消息中间件 :管制关注于数据的发送和接收,利用高效可靠的异步消息传递机制集成分布式系统。
优点 :① 解耦 ② 异步 ③ 横向扩展 ④ 安全可靠 ⑤ 顺序保证(比如kafka)
2.JMS和AMQP
什么是JMS?JMS(JAVA Message Service,java消息服务)API是一个消息服务的标准或者说是规范,允许应用程序组件基于JavaEE平台创建、发送、接收和读取消息。它使分布式通信耦合度更低,消息服务更加可靠以及异步性。
JMS是java的消息服务,JMS的客户端之间可以通过JMS服务进行异步的消息传输。
JMS消息模型:
○ Point-to-Point(P2P) 点对点 (队列模式)
P2P的特点:
1、队列中的消息只能被一个消费者消费(Consumer)(即一旦被消费,消息就不再在消息队列中)
2、发送者和接收者之间在时间上没有依赖性,也就是说当发送者发送了消息之后,不管接收者有没有正在运行,它不会影响到消息被发送到队列(消费者可以随时消费队列中的消息)
3、接收者在成功接收消息之后需向队列应答成功
如果你希望发送的每个消息都应该被成功处理的话,那么你需要P2P模式。
○ Publish/Subscribe(Pub/Sub) 发布订阅模型 (主题模式)
Pub/Sub的特点
1、每个消息可以有多个消费者(主题中的消息被所有订阅者消费)
2、发布者和订阅者之间有时间上的依赖性。针对某个主题(Topic)的订阅者,它必须创建一个订阅者之后,才能消费发布者的消息,而且为了消费消息,订阅者必须保持运行的状态。(消费者不能消费订阅之前就发送到主题中的消息)
为了缓和这样严格的时间相关性,JMS允许订阅者创建一个可持久化的订阅。这样,即使订阅者没有被激活(运行),它也能接收到发布者的消息。
参照自: 深入浅出JMS(一)--JMS基本概念
什么是AMQP?AMQP(advanced message queuing protocol)是一个提供统一消息服务的应用层标准协议,基于此协议的客户端与消息中间件可传递消息,并不受客户端/中间件不同产品,不同开发语言等条件的限制。
JMS编程模型
(1) ConnectionFactory
用于创建连接到消息中间件的连接工厂 ,针对两种不同的jms消息模型,分别有QueueConnectionFactory和TopicConnectionFactory两种。可以通过JNDI来查找ConnectionFactory对象。
(2) Destination
Destination的意思是消息生产者的消息发送目标或者说消息消费者的消息来源。对于消息生产者来说,它的Destination是某个队列(Queue)或某个主题(Topic);对于消息消费者来说,它的Destination也是某个队列或主题(即消息来源)。
所以,Destination实际上就是两种类型的对象:Queue、Topic可以通过JNDI来查找Destination。
(3) Connection
Connection表示在客户端和JMS系统之间建立的链接(对TCP/IP socket的包装)。Connection可以产生一个或多个Session。跟ConnectionFactory一样,Connection也有两种类型:QueueConnection和TopicConnection。
(4) Session
Session是我们操作消息的接口,表示一个单线程的上下文,用于发送和接收消息 。可以通过session创建生产者、消费者、消息等。Session提供了事务的功能。当我们需要使用session发送/接收多个消息时,可以将这些发送/接收动作放到一个事务中。同样,也分QueueSession和TopicSession。
(5) 消息的生产者MessageProducer
消息生产者由Session创建,并用于将消息发送到Destination。
(6) 消息消费者MessageConsumer
消息消费者由Session创建,用于接收被发送到Destination的消息。
(7) MessageListener
消息监听器。如果注册了消息监听器,一旦消息到达,将自动调用监听器的onMessage方法。EJB中的MDB(Message-Driven Bean)就是一种MessageListener。
(8) Message
Message 是在消费者和生产者之间传送的对象,消息头,一组消息属性,一个消息体 流程
3.常见消息中间件
ActiveMQ
ActiveMQ是一个易于使用的消息中间件。消息队列在大型电子商务类网站,如京东、淘宝、去哪儿等网站有这深入的应用,队列的主要作用是消除高并发访问高峰,加快网站的响应速度。
ActiveMQ是由Apache出品的,一款最流行的,能力强劲的开源消息总线。ActiveMQ是一个完全支持JMS1.1和J2EE 1.4规范的 JMS Provider实现,它非常快速,支持多种语言的客户端和协议,而且可以非常容易的嵌入到企业的应用环境中,并有许多高级功能。
ActiveMQ默认使用的TCP连接端口是61616。
ActiveMQ默认采用61616端口提供JMS服务,使用8161端口提供管理控制台服务
管理后台为:http://ip:8161/admin/
RabbitMQ(支持更多语言,基于AMQP规范),
RabbitMQ是MQ产品的典型代表,是一款基于AMQP协议可复用的企业消息系统。业务上,可以实现服务提供者和消费者之间的数据解耦,提供高可用性的消息传输机制。
AMQP当中有四个概念非常重要
1. virtual host,虚拟主机
2. exchange,交换机 , producer只能将消息发送给exchange。而exchange负责将消息发送到queues。Exchange必须准确的知道怎么处理它接受到的消息,是被发送到一个特定的queue还是许多quenes,还是被抛弃,这些规则则是通过exchange type来定义。主要的type有direct,topic,headers,fanout。具体针对不同的场景使用不同的type。
3. queue :队列,消息的载体。接收来自exchange的消息,然后再由consumer取出。exchange和queue是可以一对多的,它们通过routingKey来绑定。
4. binding,绑定:BindingKey, RouteKey
生产者将消息发送到Exchange,Exchange通过匹配BindingKey和消息中的RouteKey来将消息路由到队列,最后队列将消息投递给消费者。
kafka(高吞吐量,分布式,分区,O(1)磁盘顺序提供消息持久化)
kafka是一个高吞吐量分布式的发布订阅的日志型的消息中间件。
4.安装activeMQ
官网 : http://activemq.apache.org/
第一种启动
进入bin ,activemq.bat 启动
进入浏览器 http://127.0.0.1:8161
用户名密码默认为admin
第二种以服务启动
InstallService.bat以管理员身份运行
服务中有ActiveMQ
linux
解压压缩包
进入bin 输入 activemq start,启动完成
5.jms demo演示
创建maven项目
添加依赖
<dependency>
<groupId>org.apache.activemq</groupId>
<artifactId>activemq-all</artifactId>
<version>5.9.0</version>
</dependency>
创建队列模式的生产者AppProducer
package com.jms.queue;
import javax.jms.Connection;
import javax.jms.ConnectionFactory;
import javax.jms.Destination;
import javax.jms.JMSException;
import javax.jms.MessageProducer;
import javax.jms.Session;
import javax.jms.TextMessage;
import org.apache.activemq.ActiveMQConnectionFactory;
public class AppProducer {
public static final String url = "tcp://localhost:61616";
public static final String queueName = "queue-test ";
public static void main(String[] args) throws JMSException {
//1.创建连接工厂
ConnectionFactory connectionFactory = new ActiveMQConnectionFactory(url);
//2.创建Connection
Connection connection = connectionFactory.createConnection();
//3.启动连接
connection.start();
//4.创建会话 第一个参数:是否在事务中去处理, 第二个参数.应答模式
Session session = connection.createSession(false, Session.AUTO_ACKNOWLEDGE);
//5.创建一个目标
Destination destination = session.createQueue(queueName);
//6创建一个生产者
MessageProducer producer = session.createProducer(destination);
for (int i = 0; i < 100; i++) {
//7.创基建消息
TextMessage textMessage = session.createTextMessage("test:"+i);
producer.send(textMessage);
System.out.println("发送消息:"+textMessage.getText());
}
//9关闭连接
connection.close();
}
}
运行项目,打开activeMQ管理工具
100个消息,没有消费者消费,连接已关闭
消费者 AppConsumer
package com.jms.queue;
import javax.jms.Connection;
import javax.jms.ConnectionFactory;
import javax.jms.Destination;
import javax.jms.JMSException;
import javax.jms.Message;
import javax.jms.MessageConsumer;
import javax.jms.MessageListener;
import javax.jms.Session;
import javax.jms.TextMessage;
import org.apache.activemq.ActiveMQConnectionFactory;
public class AppConsumer {
public static final String url = "tcp://localhost:61616";
public static final String queueName = "queue-test ";
public static void main(String[] args) throws JMSException {
//1.创建连接工厂
ConnectionFactory connectionFactory = new ActiveMQConnectionFactory(url);
//2.创建Connection
Connection connection = connectionFactory.createConnection();
//3.启动连接
connection.start();
//4.创建会话 第一个参数:是否在事务中去处理, 第二个参数.应答模式
Session session = connection.createSession(false, Session.AUTO_ACKNOWLEDGE);
//5.创建一个目标
Destination destination = session.createQueue(queueName);
//6创建一个消费者
MessageConsumer consumber = session.createConsumer(destination);
//7创建一个监听器
consumber.setMessageListener(new MessageListener() {
public void onMessage(Message message) {
TextMessage textMessage = (TextMessage) message;
try {
System.out.println("接收消息:"+textMessage.getText());
} catch (JMSException e) {
e.printStackTrace();
}
}
});
//8关闭连接 消息是异步的 ,在程序退出时关闭,在这里不可以关闭,关闭可能会导致消息未接收完成
//connection.close();
}
}
当启动2个消费者,再启动生产者,结果是2个消费者平均消费
创建主题模式发布者AppProducer
package com.jms.topic;
import javax.jms.Connection;
import javax.jms.ConnectionFactory;
import javax.jms.Destination;
import javax.jms.JMSException;
import javax.jms.MessageProducer;
import javax.jms.Session;
import javax.jms.TextMessage;
import org.apache.activemq.ActiveMQConnectionFactory;
public class AppProducer {
public static final String url = "tcp://localhost:61616";
public static final String topicName = "topic-test ";
public static void main(String[] args) throws JMSException {
//1.创建连接工厂
ConnectionFactory connectionFactory = new ActiveMQConnectionFactory(url);
//2.创建Connection
Connection connection = connectionFactory.createConnection();
//3.启动连接
connection.start();
//4.创建会话 第一个参数:是否在事务中去处理, 第二个参数.应答模式
Session session = connection.createSession(false, Session.AUTO_ACKNOWLEDGE);
//5.创建一个目标
Destination destination = session.createTopic(topicName);
//6创建一个生产者
MessageProducer producer = session.createProducer(destination);
for (int i = 0; i < 100; i++) {
//7.创基建消息
TextMessage textMessage = session.createTextMessage("test:"+i);
producer.send(textMessage);
System.out.println("发送消息:"+textMessage.getText());
}
//9关闭连接
connection.close();
}
}
这时直接运行订阅者接收不到消息,因为发布者先运行了
订阅者AppConsumer
package com.jms.topic;
import javax.jms.Connection;
import javax.jms.ConnectionFactory;
import javax.jms.Destination;
import javax.jms.JMSException;
import javax.jms.Message;
import javax.jms.MessageConsumer;
import javax.jms.MessageListener;
import javax.jms.Session;
import javax.jms.TextMessage;
import org.apache.activemq.ActiveMQConnectionFactory;
public class AppConsumer {
public static final String url = "tcp://localhost:61616";
public static final String topicName = "topic-test ";
public static void main(String[] args) throws JMSException {
//1.创建连接工厂
ConnectionFactory connectionFactory = new ActiveMQConnectionFactory(url);
//2.创建Connection
Connection connection = connectionFactory.createConnection();
//3.启动连接
connection.start();
//4.创建会话 第一个参数:是否在事务中去处理, 第二个参数.应答模式
Session session = connection.createSession(false, Session.AUTO_ACKNOWLEDGE);
//5.创建一个目标
Destination destination = session.createTopic(topicName);
//6创建一个消费者
MessageConsumer consumber = session.createConsumer(destination);
//7创建一个监听器
consumber.setMessageListener(new MessageListener() {
public void onMessage(Message message) {
TextMessage textMessage = (TextMessage) message;
try {
System.out.println("接收消息:"+textMessage.getText());
} catch (JMSException e) {
e.printStackTrace();
}
}
});
//8关闭连接 消息是异步的 ,在程序退出是关闭
//connection.close();
}
}
启动两个订阅者,再启动发布者,两个订阅者均可收到发布者的消息
6.使用spring集成jms链接activeMQ
ConnectionFactory 用于管理连接的工厂
JmsTemplate 用于发送和接收消息的模板类
MessageListerner 消息监听器
ConnectionFactory 是spring 为我们提供的连接池
两种连接池SingleConnectionFactory 和 CachingConnectionFactory
SingleConnectionFactory 是对于jms建立请求,只会返回一个连接
CachingConnectionFactory 实现了SingleConnectionFactory 的所有功能,还提供了缓存
JmsTemplate spring提供,线程安全,可以使用JmsTemplate 操作jms
MessageListerner 实现onMessage方法,接收Message参数
添加依赖
<dependency>
<groupId>org.springframework</groupId>
<artifactId>spring-jms</artifactId>
<version>${spring.version}</version>
</dependency>
<dependency>
<groupId>org.springframework</groupId>
<artifactId>spring-core</artifactId>
<version>${spring.version}</version>
</dependency>
<dependency>
<groupId>org.springframework</groupId>
<artifactId>spring-context</artifactId>
<version>${spring.version}</version>
</dependency>
<dependency>
<groupId>org.springframework</groupId>
<artifactId>spring-web</artifactId>
<version>${spring.version}</version>
</dependency>
<dependency>
<groupId>org.springframework</groupId>
<artifactId>spring-test</artifactId>
<version>${spring.version}</version>
</dependency>
<dependency>
<groupId>org.apache.activemq</groupId>
<artifactId>activemq-core</artifactId>
<version>5.7.0</version>
<exclusions>
<exclusion>
<artifactId>spring-context</artifactId>
<groupId>org.springframework</groupId>
</exclusion>
</exclusions>
</dependency>
这里注意org.apache.activemq也依赖了spring-context 所以这里要把他排除掉
生产者 创建接口ProducerService
package com.spring.producer;
public interface ProducerService {
void sendMessage(String message);
}
实现类
package com.spring.producer.impl;
import javax.annotation.Resource;
import javax.jms.Destination;
import javax.jms.JMSException;
import javax.jms.Message;
import javax.jms.Session;
import javax.jms.TextMessage;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.jms.core.JmsTemplate;
import org.springframework.jms.core.MessageCreator;
import org.springframework.stereotype.Service;
import com.spring.producer.ProducerService;
@Service
public class ProducerServiceImpl implements ProducerService {
@Autowired
private JmsTemplate jmsTemplate;
@Resource(name= "queueDestination")//因为可能配置多个目的地,所以使用resource name进行区分
Destination destination;
public void sendMessage(final String message) {
//使用JmsTemplate发送消息
jmsTemplate.send(destination,new MessageCreator() {
//创建消息
public Message createMessage(Session session) throws JMSException {
TextMessage textMessage = session.createTextMessage(message);
return textMessage;
}
});
System.out.println("发送消息:"+message);
}
}
配置
<?xml version="1.0" encoding="UTF-8"?><beans xmlns="http://www.springframework.org/schema/beans"
xmlns:context="http://www.springframework.org/schema/context"
xmlns:mvc="http://www.springframework.org/schema/mvc" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
xsi:schemaLocation="
http://www.springframework.org/schema/beans
http://www.springframework.org/schema/beans/spring-beans-4.3.xsd
http://www.springframework.org/schema/context
http://www.springframework.org/schema/context/spring-context-4.3.xsd
http://www.springframework.org/schema/mvc
http://www.springframework.org/schema/mvc/spring-mvc-4.3.xsd">
<context:annotation-config></context:annotation-config>
<context:component-scan base-package="com.spring.*" />
<!-- ActiveMQ提供 ConnectionFactory-->
<bean id="targetConnectionFactory" class="org.apache.activemq.ActiveMQConnectionFactory">
<property name="brokerURL" value="tcp://localhost:61616"></property>
</bean>
<!-- spring-jms提供的连接池 -->
<bean id="connectionFactory" class="org.springframework.jms.connection.SingleConnectionFactory">
<property name="targetConnectionFactory" ref="targetConnectionFactory"></property>
</bean>
<!-- 一个队列目的地,点对点 -->
<bean id="queueDestination" class="org.apache.activemq.command.ActiveMQQueue">
<!-- 指定队列名字 -->
<constructor-arg value="springQueue"></constructor-arg>
</bean>
<bean id="jmsTemplate" class="org.springframework.jms.core.JmsTemplate">
<property name="connectionFactory" ref="connectionFactory"></property>
</bean>
<!-- <bean id="ProducerServiceImpl" class="com.spring.producer.impl.ProducerServiceImpl"></bean> -->
</beans>
启动类
package com.spring.producer;
import org.springframework.context.ApplicationContext;
import org.springframework.context.support.AbstractApplicationContext;
import org.springframework.context.support.ClassPathXmlApplicationContext;
public class AppProducer {
public static void main(String[] args) {
ApplicationContext context = new ClassPathXmlApplicationContext("producer.xml");
ProducerService service = context.getBean(ProducerService.class);
for(int i=0;i<100;i++){
service.sendMessage("test"+i);
}
//会自动清理资源
((AbstractApplicationContext) context).close();
}
}
可以把公共地方提取出来
<import resource="common.xml"/>
创建消费者
配置
<?xml version="1.0" encoding="UTF-8"?><beans xmlns="http://www.springframework.org/schema/beans"
xmlns:context="http://www.springframework.org/schema/context"
xmlns:mvc="http://www.springframework.org/schema/mvc" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
xsi:schemaLocation="
http://www.springframework.org/schema/beans
http://www.springframework.org/schema/beans/spring-beans-4.3.xsd
http://www.springframework.org/schema/context
http://www.springframework.org/schema/context/spring-context-4.3.xsd
http://www.springframework.org/schema/mvc
http://www.springframework.org/schema/mvc/spring-mvc-4.3.xsd">
<import resource="common.xml"/>
<!-- 导入公共配置 -->
<!-- 配置消息监听器 -->
<bean id="consumerMessageListener" class="com.spring.consumer.ConsumerMessageListener">
</bean>
<!-- jms容器 管理容器指定消息目的地,和消息监听者 -->
<bean id="jmsContainer" class="org.springframework.jms.listener.DefaultMessageListenerContainer">
<property name="connectionFactory" ref="connectionFactory"></property>
<!-- 目的地 -->
<property name="destination" ref="queueDestination"></property>
<!-- 监听器 -->
<property name="messageListener" ref="consumerMessageListener"></property>
</bean>
</beans>
监听类
package com.spring.consumer;
import javax.jms.JMSException;
import javax.jms.Message;
import javax.jms.MessageListener;
import javax.jms.TextMessage;
import org.springframework.stereotype.Service;
@Service
public class ConsumerMessageListener implements MessageListener {
public void onMessage(Message message) {
TextMessage textMessage = (TextMessage)message;
try {
System.out.println("接收消息"+textMessage.getText());
} catch (JMSException e) {
// TODO Auto-generated catch block
e.printStackTrace();
}
}
}
启动类
package com.spring.consumer;
import org.springframework.context.ApplicationContext;
import org.springframework.context.support.AbstractApplicationContext;
import org.springframework.context.support.ClassPathXmlApplicationContext;
public class AppConsumber {
public static void main(String[] args) {
ApplicationContext context = new ClassPathXmlApplicationContext("consumer.xml");
}
}
主题模式
在common配置添加
<bean id="topicDestination" class="org.apache.activemq.command.ActiveMQTopic">
<constructor-arg value="toptic"/>
</bean>
改ProducerServiceImpl Resource为
name= "topicDestination"
改consumer.xml jmsContainer
<property name="destination" ref="queueDestination"></property>
参考文章:Java消息中间件---基础篇