ActiveMQ系统之——消息持久化到MySQL数据库中（二）

最新推荐文章于 2022-09-14 09:43:46 发布
最新推荐文章于 2022-09-14 09:43:46 发布
阅读量5.3k 收藏 1
点赞数 2
分类专栏： Java 工作总结 文章标签： JMS activemq 数据库 MySQL 持久化
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/wangdongsong1229/article/details/19030535
版权

写在前面话

关于这一节的程序，需要使用到《ActiveMQ系列之——安装、运行及事例代码（一）》中的示例代码。本文主要介绍关于消息持久化的配置。

ActiveMQ默认情况下是基于文件的存储，使用的是kahaDB，当然还有其它的持久化方式，例如LevelDB，这个是在5.8的版本中引入的，本文主要介绍数据库持久化，使用的数据库是MySQL，其它数据库类似。

介绍 

ActiveMQ数据库持久化有两种类型，一是直接的JDBC操作，二是journal的jdbc操作，第二是优化过的，先快速的保存到文件中，然后在某个检查点与数据对比，之后再写数据库，也可以称之为批量操作数据库。持久化操作的主要配置在activemq.xml中，在此基础上，我做了其它两点改动，在conf目录下增加一个jdbc.properties的文件，将数据库有关配置信息保存在此文件中，activemq.xml通过加载外部属性文件的方式引入该文件。

配置

journal

<!--
	在5.9.0里的conf目录下，修改activemq.xml而成。
	1、增加了一加载jdbc.properties的属性文件
	2、在broker节点中增加了persistenceFactory的配置
	3、增加了mySql的bean定义
-->
<!-- START SNIPPET: example -->
<beans
  xmlns="http://www.springframework.org/schema/beans"
  xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
  xsi:schemaLocation="http://www.springframework.org/schema/beans http://www.springframework.org/schema/beans/spring-beans.xsd
  http://activemq.apache.org/schema/core http://activemq.apache.org/schema/core/activemq-core.xsd">

    <!-- Allows us to use system properties as variables in this configuration file -->
    <bean class="org.springframework.beans.factory.config.PropertyPlaceholderConfigurer">
        <property name="locations">
			<list>
				<value>file:${activemq.conf}/credentials.properties</value>
				<!-- 
					1、增加了加载数据库的属性文件，目录为activemq目录下的conf文件中，
					此文件定义了有关数据连接的信息，conf目录下无jdbc.properties文件，需要手动创建,
					也可以不使用此属性文件，将数据库信息直接写到activemq.xml中
				 -->
				<value>file:${activemq.conf}/jdbc.properties</value>
			</list>
        </property>
    </bean>

    <!-- Allows log searching in hawtio console -->
    <bean id="logQuery" class="org.fusesource.insight.log.log4j.Log4jLogQuery"
          lazy-init="false" scope="singleton"
          init-method="start" destroy-method="stop">
    </bean>

    <!--
        The <broker> element is used to configure the ActiveMQ broker.
    -->
    <broker xmlns="http://activemq.apache.org/schema/core" brokerName="localhost" dataDirectory="${activemq.data}">

        <destinationPolicy>
            <policyMap>
              <policyEntries>
                <policyEntry topic=">" >
                  <pendingMessageLimitStrategy>
                    <constantPendingMessageLimitStrategy limit="1000"/>
                  </pendingMessageLimitStrategy>
                </policyEntry>
              </policyEntries>
            </policyMap>
        </destinationPolicy>


        <managementContext>
            <managementContext createConnector="false"/>
        </managementContext>
		
		<!-- 
			2、增加此节点的配置，此种方式直接操作数据库
			也可以通过persistenceAdapter这个节点的journalPersistenceAdapter的配置完成
		 -->
       	<persistenceFactory>
       		<!-- 指定数据文件的路径及数据源 -->
			<journalPersistenceAdapterFactory dataDirectory="${activemq.data}/wdsdb" dataSource="#mySql"/>
		</persistenceFactory>
        
        <systemUsage>
          <systemUsage>
              <memoryUsage>
                  <memoryUsage percentOfJvmHeap="70" />
              </memoryUsage>
              <storeUsage>
                  <storeUsage limit="100 gb"/>
              </storeUsage>
              <tempUsage>
                  <tempUsage limit="50 gb"/>
              </tempUsage>
          </systemUsage>
        </systemUsage>

        <transportConnectors>
            <transportConnector name="openwire" uri="tcp://0.0.0.0:61616?maximumConnections=1000&wireFormat.maxFrameSize=104857600"/>
            <transportConnector name="amqp" uri="amqp://0.0.0.0:5672?maximumConnections=1000&wireFormat.maxFrameSize=104857600"/>
            <transportConnector name="stomp" uri="stomp://0.0.0.0:61613?maximumConnections=1000&wireFormat.maxFrameSize=104857600"/>
            <transportConnector name="mqtt" uri="mqtt://0.0.0.0:1883?maximumConnections=1000&wireFormat.maxFrameSize=104857600"/>
            <transportConnector name="ws" uri="ws://0.0.0.0:61614?maximumConnections=1000&wireFormat.maxFrameSize=104857600"/>
        </transportConnectors>

        <shutdownHooks>
            <bean xmlns="http://www.springframework.org/schema/beans" class="org.apache.activemq.hooks.SpringContextHook" />
        </shutdownHooks>

    </broker>
	
	<!-- 
		3、增加关于数据库连接的配置，在增加此配置时，还需要将数据库驱动的jar包放到activemq安装目录下的lib目录中
	-->
	<bean id="mySql" class="org.apache.commons.dbcp.BasicDataSource" destroy-method="close">
			<property name="driverClassName" value="${jdbc.driverClassName}" />
			<property name="url" value="${jdbc.url}" />
			<property name="username" value="${jdbc.username}" />
			<property name="password" value="${jdbc.password}" />
	</bean>

    <import resource="jetty.xml"/>

</beans>
<!-- END SNIPPET: example -->

非journal

<!--
	在5.9.0里的conf目录下，修改activemq.xml而成。
	1、增加了一加载jdbc.properties的属性文件
	2、在broker节点中增加了persistenceAdapter的配置
	3、增加了mySql的bean定义
-->
<!-- START SNIPPET: example -->
<beans
  xmlns="http://www.springframework.org/schema/beans"
  xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
  xsi:schemaLocation="http://www.springframework.org/schema/beans http://www.springframework.org/schema/beans/spring-beans.xsd
  http://activemq.apache.org/schema/core http://activemq.apache.org/schema/core/activemq-core.xsd">

    <!-- Allows us to use system properties as variables in this configuration file -->
    <bean class="org.springframework.beans.factory.config.PropertyPlaceholderConfigurer">
        <property name="locations">
			<list>
				<value>file:${activemq.conf}/credentials.properties</value>
				<!-- 
					1、增加了加载数据库的属性文件，目录为activemq目录下的conf文件中，
					此文件定义了有关数据连接的信息，conf目录下无jdbc.properties文件，需要手动创建,
					也可以不使用此属性文件，将数据库信息直接写到activemq.xml中
				 -->
				<value>file:${activemq.conf}/jdbc.properties</value>
			</list>
        </property>
    </bean>

    <!-- Allows log searching in hawtio console -->
    <bean id="logQuery" class="org.fusesource.insight.log.log4j.Log4jLogQuery"
          lazy-init="false" scope="singleton"
          init-method="start" destroy-method="stop">
    </bean>

    <!--
        The <broker> element is used to configure the ActiveMQ broker.
    -->
    <broker xmlns="http://activemq.apache.org/schema/core" brokerName="localhost" dataDirectory="${activemq.data}">

        <destinationPolicy>
            <policyMap>
              <policyEntries>
                <policyEntry topic=">" >
                  <pendingMessageLimitStrategy>
                    <constantPendingMessageLimitStrategy limit="1000"/>
                  </pendingMessageLimitStrategy>
                </policyEntry>
              </policyEntries>
            </policyMap>
        </destinationPolicy>


        <managementContext>
            <managementContext createConnector="false"/>
        </managementContext>
		
		<!-- 
			2、增加此节点的配置，此种方式直接操作数据库
		 -->
        <persistenceAdapter>
			<jdbcPersistenceAdapter dataSource="#mySql"/>
        </persistenceAdapter>
        
        <systemUsage>
          <systemUsage>
              <memoryUsage>
                  <memoryUsage percentOfJvmHeap="70" />
              </memoryUsage>
              <storeUsage>
                  <storeUsage limit="100 gb"/>
              </storeUsage>
              <tempUsage>
                  <tempUsage limit="50 gb"/>
              </tempUsage>
          </systemUsage>
        </systemUsage>

        <transportConnectors>
            <transportConnector name="openwire" uri="tcp://0.0.0.0:61616?maximumConnections=1000&wireFormat.maxFrameSize=104857600"/>
            <transportConnector name="amqp" uri="amqp://0.0.0.0:5672?maximumConnections=1000&wireFormat.maxFrameSize=104857600"/>
            <transportConnector name="stomp" uri="stomp://0.0.0.0:61613?maximumConnections=1000&wireFormat.maxFrameSize=104857600"/>
            <transportConnector name="mqtt" uri="mqtt://0.0.0.0:1883?maximumConnections=1000&wireFormat.maxFrameSize=104857600"/>
            <transportConnector name="ws" uri="ws://0.0.0.0:61614?maximumConnections=1000&wireFormat.maxFrameSize=104857600"/>
        </transportConnectors>

        <shutdownHooks>
            <bean xmlns="http://www.springframework.org/schema/beans" class="org.apache.activemq.hooks.SpringContextHook" />
        </shutdownHooks>

    </broker>
	
	<!-- 
		3、增加关于数据库连接的配置，在增加此配置时，还需要将数据库驱动的jar包放到activemq安装目录下的lib目录中
	-->
	<bean id="mySql" class="org.apache.commons.dbcp.BasicDataSource" destroy-method="close">
			<property name="driverClassName" value="${jdbc.driverClassName}" />
			<property name="url" value="${jdbc.url}" />
			<property name="username" value="${jdbc.username}" />
			<property name="password" value="${jdbc.password}" />
	</bean>

    <import resource="jetty.xml"/>

</beans>
<!-- END SNIPPET: example -->

上述两种方式共用的jdbc.properties 
##jdbc.driver
jdbc.driverClassName=com.mysql.jdbc.Driver
jdbc.url=jdbc:mysql://127.0.0.1:3306/activemq?autoReconnect=true&useUnicode=true&characterEncoding=utf8
jdbc.username=root
jdbc.password=root

这两种方式，我都做了尝试，在发送Queue，无消息者情况下，非journal的形式是直接操作数据，单条记录写数据库，而journal的方式则是批量操作数据库的。


希望不流泪
关注
专栏目录
Apache ActiveMQ 持久化到MySQL数据库的简单配置
yeyiboy的博客
04-29 964
1、默认提供的是持久化到文件的方式，即activemq.xml文件中的： <persistenceAdapter> <kahaDB directory="${activemq.base}/data/kahadb"/> </persistenceAdapter> 2. 步骤 本文重点接收的是持久化到MySQL中的配置方式： 2.1 添加MySQL驱动 首先需要把MySql的驱动放到ActiveMQ的Lib目录下，我用的文件名字是：mysql-conn.
ActiveMQ学习总结（8）——消息队列设计精要
科技D人生
07-04 8185
消息队列已经逐渐成为企业IT系统内部通信的核心手段。它具有低耦合、可靠投递、广播、流量控制、最终一致性等一系列功能，成为异步RPC的主要手段之一。 当今市面上有很多主流的消息中间件，如老牌的ActiveMQ、RabbitMQ，炙手可热的Kafka，阿里巴巴自主开发的Notify、MetaQ、RocketMQ等。 本文不会一一介绍这些消息队列的所有特性，而是探讨一下自主开发设计一个消息队列时，你
activemq mysql 配置详解_activeMQ数据库配置
weixin_35695652的博客
01-26 569
ActiveMQ很好的支持了消息的持久性(Persistence)。消息持久性对于可靠消息传递来说应该是一种比较好的方法，有了消息持久化，即使发送者和接受者不是同时在线或者消息中心在发送者发送消息后宕机了，在消息中心重新启动后仍然可以将消息发送出去，如果把这种持久化和ReliableMessaging结合起来应该是很好的保证了消息的可靠传送。消息持久性的原理很简单，就是在发送者将消息发送出去后，消...
ActiveMQ消息保存到MySQL
07-15 192
<!-- Licensed to the Apache Software Foundation (ASF) under one or more contributor license agreements. See the NOTICE file distributed...
python消息中间件activemq_消息中间件ActiveMQ使用详解
weixin_39967598的博客
12-09 663
消息中间件ActiveMQ使用详解一、消息中间件的介绍介绍​消息队列 是指利用 高效可靠 的 消息传递机制 进行与平台无关的 数据交流，并基于 数据通信 来进行分布式系统的集成。特点(作用)应用解耦异步通信流量削峰(海量)日志处理消息通讯…...应用场景根据消息队列的特点，可以衍生出很多场景，或者说很多场景都能用到。下面举几个例子：1)异步通信​注册时的短信、邮件通知，减少响应时间；2)应用解耦​...
activemq mysql 配置详解_ActiveMQ配置详解
weixin_28953361的博客
01-19 362
一.消息目的地策略在节点destinationPolicy配置策略，可以对单个或者所有的主题和队列进行设置，使用流量监控，当消息达到memoryLimit的时候，ActiveMQ会减慢消息的产生甚至阻塞，destinationPolicy的配置如下：二.存储配置producerFlowControl表示是否监控流量，默认为true，如果设置为false，消息就会存在磁盘中以防止内存溢 出；memo...
ActiveMQ持久化消息到数据库的坑——Table 'activemq.ACTIVEMQ_ACKS' doesn't exist.
JeremyJiaming的博客
03-22 2154
问题描述   想使用数据库持久化ActiveMQ消息，在activemq.xml中配置如下： <persistenceAdapter> <!--<kahaDB directory="${activemq.data}/kahadb"/>--> <jdbcPersistenceAdapter dataSource...
消息中间件之ActiveMQ
十年代码写十年
03-19 223
一、为什么需要MQ？ 主要原因是由于在高并发环境下，由于来不及同步处理，请求往往会发生堵塞，比如说，大量的insert，update之类的请求同时到达MySQL，直接导致无数的行锁表锁，甚至最后请求会堆积过多，从而触发too many connections错误。通过使用消息队列，我们可以异步处理请求，从而缓解系统的压力。 RPC和消息中间件的不同很大程度上就是“依赖性”和“同步性”。RPC方...
速读“消息中间件”架构体系-ActiveMQ：入门+原理分析+优缺点！
weixin_66896902的博客
09-14 879
Java 消息服务（Java Message Service）是 java 平台中关于面向消息中间件的 API，用于在两个应用程序之间，或者分布式系统中发送消息，进行异步通信。JMS 是一个与具体平台无关的 API ，绝大多数 MOM（Message Oriented Middleware）（面向消息中间件）提供商都对 JMS 提供了支持。例如ActiveMQ就是其中一个实现。MOM 是面向消息的中间件，使用消息传送提供者来协调消息传送操作。MOM 需要提供 API 和管理工具。
ActiveMQ知识概括
weixin_41005188的博客
04-25 5029
ActiveMQ知识概括ActiveMQ简介Java实现ActiveMQJMS规范与落地ActiveMQ的brokerSpring，SpringBoot整合ActiveMQActiveMQ的传输协议ActiveMQ的消息存储和持久化ActiveMQ多节点集群高级特性 ActiveMQ简介 ActiveMQ安装： 安装步骤： ①去ActiveMQ官网下载压缩包。 ②解压压缩包到指定目录。 ③启动ActiveMQ：service activemq start ④查看activemq状态：service act
ActiveMQ的消息持久化到Mysql数据库
Learning
11-01 8605
1、将连接Mysql数据库的jar文件，放到ActiveMQ的lib目录下        2、修改ActiveMQ的conf目录下的active.xml文件，修改数据持久化的方式        2.1  修改原来的kshadb的持久化数据的方式 -->        2.2  连接Mysql的配置(注意配置文件放置的位置)
activemq mysql 配置详解_ActiveMQ进阶配置
weixin_29204749的博客
01-26 165
配置web管理页面的安全认证默认的web页面用户名密码admin:admin,非常不安全,编辑jetty-realm.properties文件,(用户:密码,组)admin:admin123, adminuser:user123, user配置web管理页面的绑定IP和端口编辑jetty.xml,查找WebConsolePort配置MQ连接的安全认证编辑activemq.xml,在下加禁用不使...
activemq mysql 配置详解_activemq持久化之mysql配置
weixin_32401411的博客
01-19 250
说明：192.168.3.81 CentOS release 6.5 apache-activemq-5.10.11、拷贝mysql驱动器到activemq环境下mysql-connector-java-5.1.44-bin.jar[[emailprotected] apache-activemq-5.10.1]# ls /home/apache-activemq-5.10.1/lib/mysq...
ActiveMQ 消息持久化到Mysql数据库
ancl290591的博客
04-27 161
一、下载ActiveMQ 版本：ActiveMQ 5.15.3 Release 地址：http://activemq.apache.org/download.html 二、运行ActiveMQ 1、解压apache-activemq-5.15.3-bin.zip 2、执行\bin\win64\activemq.bat脚本即可启动AMQ 三、修改配置文件持久化到Mysql数据库...
ActiveMQ的可靠性和保存数据到mysql中
weixin_45220428的博客
05-13 458
消息的成功消费通常包括三个步骤：client接收消息 ==> client处理消息 == >消息被确认 持久化的消息 默认是持久化 非持久: messageProducer.setDeliveryMode(DeliveryMode.NON_PERSISTENT) 当服务器宕机,消息不存在 持久化: 在生产者端开启持久化 messageProducer.setDeliveryMode(DeliveryMode.PERSISTENT) 当服务器宕机,消息依旧存在 消息订阅 客户端首先向MQ注册一
activemq 配置mysql_activemq持久化之mysql配置
weixin_42388680的博客
01-19 367
参考：http://blog.csdn.net/zbw18297786698/article/details/52999940说明：192.168.3.81 CentOS release 6.5 apache-activemq-5.10.11、拷贝mysql驱动器到activemq环境下mysql-connector-java-5.1.44-bin.jar[root@node-01 apache-...
activemq设置持久化消息mysql保存
qq_15076569的博客
11-04 2177
1）：mysql数据库新建activemq库 2）：向activemq安装文件夹的lib包下导入连接mysql所需要的jar包 3）修改activemq安装文件夹下的config/activemq.xml文件 3.1）在&lt;/broker&gt;标签下新增mysql连接配置bean，如下：     &lt;bean id="mysql-ds" class="org.apache....
activemq mysql_activeMQ数据库配置
weixin_35943182的博客
01-18 386
ActiveMQ很好的支持了消息的持久性(Persistence)。消息持久性对于可靠消息传递来说应该是一种比较好的方法，有了消息持久化，即使发送者和接受者不是同时在线或者消息中心在发送者发送消息后宕机了，在消息中心重新启动后仍然可以将消息发送出去，如果把这种持久化和 ReliableMessaging结合起来应该是很好的保证了消息的可靠传送。 消息持久性的原理很简单，就是在发送者将消息发送出去后...
ActiveMQ MySQL 消息存储
whl223的专栏
09-29 308
环境：MySQL 5.7   ActiveMQ 5.15.6  （windows release binary packet） apache-activemq-5.15.6安装目录下，examples\activemq-jdbc-performance.xml文件可以作为参考。 需要修改配置文件：apache-activemq-5.15.6安装目录下\conf\activemq.xml文件。 ...
评论 5
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值