SpringCloud二次开发-消息队列(第一篇)


我们知道不同中间件之间存在很多差异,如RocketMQ支持定时重试,每次重试间隔逐渐增加。
Kafka,RabbitMq不支持重试。我们要做一个统一的Spring Cloud Starter
实现效果:
(1)让Kafka,RabbitMq支持消息重试。
(2)使用不同的消息中间件时,我们不需要在maven引入不同的Jar包。

开发好后的使用效果

对于不同的中间件,我们仅需在application.yaml中改一下配置信息

// 如果想使用 rocketMq
paas:
  mq:
    rocket:
      target: 106.14.13.60
// 如果想使用 rabbitMq
paas:
  mq:
    kafka:
      target: 106.14.13.60

发送消息(ProducerServer为我们自己的生产者)

@Autowired
private ProducerServer producerServer;
...
producerServer.send("发送的信息");

消费消息

@Component
public class OnsMessageListener implements MessageListener {

    @Override
    public String getTopic() {
        return "TOPIC";
    }

    @Override
    public String getTag() {
        return "TAG";
    }

    @Override
    public void process(ConsumeMessage message) {
        System.out.println("Listener正在监听:"+message.getValueAsString());
        // 如果抛出异常,会进行重试一共重试16次:10s、30s、1min、2min …… 10min、20min、30min、1h、2h,最后放入死信队列
    }
}

我们要考虑很多步骤要做

  • 适配不同消息队列重试机制,如何让Kafka,RabbitMq支持重试?如延时消息配合死信队列,定时任务…
  • 适配不同消息队列基本组件,如kafka有topic,但是无tag…
  • 适配不同消息队列的消费类型集群消费,广播消费…

如果想实现这个效果,需要深入的了解这些中间件。这一章首先搭建一个项目框架。

有以下步骤

  1. 引入对应的依赖
  2. 编写实现类
  3. 编写配置文件读取类 主要注解是@ConfigruationProperties
  4. 编写自动装配类
  5. 在resources/META-INF/spring.factories 中配置我们的自动装配类
  6. maven install后引入依赖即可使用

实战

首先看下项目结构
在这里插入图片描述
mq-starter为我们要开发的sdk
demo为引入mq-starter后的测试项目
开始开发吧~

  1. 引入的依赖
 <dependencies>
    <dependency>
        <groupId>org.springframework.boot</groupId>
        <artifactId>spring-boot-configuration-processor</artifactId>
        <optional>true</optional>
    </dependency>
    <dependency>
        <groupId>org.springframework.boot</groupId>
        <artifactId>spring-boot-autoconfigure</artifactId>
    </dependency>
</dependencies>

说明:
第一个依赖 主要是为编译器配置的 可以根据properties 鼠标右键 点到用这个属性的类上个
第二个依赖 主要是为了自动装配

  1. 编写自己的功能实现类,此处为实现producerServer.send()方法
    由于无论KafkaProducerServer还是RocketProducerServer,都是生产者,因此我们抽出一个接口
public interface ProducerServer {
    /**
     * 发送消息
     *
     * @param msg 消息内容
     * @return 消息Id
     */
    String send(String msg);
}

定义两个实现类

public class KafkaProducerServer implements ProducerServer {

    String target;

    public KafkaProducerServer(String target) {
        this.target = target;
    }

    @Override
    public String send(String msg) {
        System.out.println("kafka ip:" + target + " msg:" + msg);
        return null;
    }
}
public class RocketProducerServer implements ProducerServer {

    String target;

    public RocketProducerServer(String target) {
        this.target = target;
    }

    @Override
    public String send(String msg) {
        System.out.println("rocket ip:" + target + " msg:" + msg);
        return null;
    }
}

  1. 编写配置文件读取类

demo项目中application.yaml中定义了消息队列的配置(target ),我们要拿到demo中的配置信息,才可以进行发送

@ConfigurationProperties(prefix = "paas.mq.kafka")
@Data
public class KafkaAutoConfigruationProperties {
    private String target;
}
@ConfigurationProperties(prefix = "paas.mq.rocket")
@Data
public class RocketAutoConfigruationProperties {
    private String target;
}

这里我们要读取的配置就是paas.mq.kafka.targer/paas.mq.rocket.targer的值
@ConfigurationProperties注解的作用就是读取配置文件指定属性的值

  1. 编写自动装配类
@Configuration
@EnableConfigurationProperties(KafkaAutoConfigruationProperties.class)
@ConditionalOnClass(KafkaProducerServer.class)
public class KafkaAutoConfigrution {
    @Autowired
    private KafkaAutoConfigruationProperties kafkaAutoConfigruationProperties;

    @ConditionalOnProperty("paas.mq.kafka.target")
    @Bean
    public KafkaProducerServer kafkaProducerServer() {
        return new KafkaProducerServer(kafkaAutoConfigruationProperties.getTarget());
    }
}

@Configuration
@EnableConfigurationProperties(RocketAutoConfigruationProperties.class)
@ConditionalOnClass(RocketProducerServer.class)
public class RocketAutoConfigrution {
    @Autowired
    private RocketAutoConfigruationProperties rocketAutoConfigruationProperties;

    @ConditionalOnProperty("paas.mq.rocket.target")
    @Bean
    public RocketProducerServer rocketProducerServer() {
        return new RocketProducerServer(rocketAutoConfigruationProperties.getTarget());
    }
}

4.1.@Configuration
标识本类是配置类(相当于spring中application.xml)

4.2.@EnableConfigurationProperties(AutoConfigruationProperties.class)
如果AutoConfigruationProperties中有注解@ConfigurationProperties 那么这个类就
会被加到spring上下文的容器中,也就是可以通过@Autowire来注入

4.3.@ConditionalOnClass
当类路径下有指定类的情况下 才进行下一步

4.4.@ConditionalOnMissingBean
当spring容器中没有这个Bean的时候才进行下一步

4.5.@ConditionalOnProperty(“paas.mq.rocket.target”)
当配置文件存在“paas.mq.rocket.target”才进行下一步

我们仅需一个bean,无需同时存在RocketProducerServer,KafkaProducerServer。因此抛弃@ConditionalOnMissingBean,而使用@ConditionalOnProperty(“paas.mq.rocket.target”),选择性的产生一个Bean对象。

  1. 在resources/META-INF下添加spring.factories 指定自动装配的类也叫入口 内容如下:
org.springframework.boot.autoconfigure.EnableAutoConfiguration=\
com.wpp.paas.foundation.autoconfigure.mq.kafka.KafkaAutoConfigrution,\
com.wpp.paas.foundation.autoconfigure.mq.rocket.RocketAutoConfigrution
  1. 现在在demo项目中直接自动注入我们的bean就ok了
  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Spring4GWT GWT Spring 使得在 Spring 框架下构造 GWT 应用变得很简单,提供一个易于理解的依赖注入和RPC机制。 Java扫雷游戏 JVMine JVMine用Applets开发的扫雷游戏,可在线玩。 public class JVMine extends java.applet.Applet 简单实现!~ 网页表格组件 GWT Advanced Table GWT Advanced Table 是一个基于 GWT 框架的网页表格组件,可实现分页数据显示、数据排序和过滤等功能! Google Tag Library 该标记库和 Google 有关。使用该标记库,利用 Google 为你的网站提供网站查询,并且可以直接在你的网页里面显示搜查的结果。 github-java-api github-java-api 是 Github 网站 API 的 Java 语言版本。 java缓存工具 SimpleCache SimpleCache 是一个简单易用的java缓存工具,用来简化缓存代码的编写,让你摆脱单调乏味的重复工作!1. 完全透明的缓存支持,对业务代码零侵入 2. 支持使用Redis和Memcached作为后端缓存。3. 支持缓存数据分区规则的定义 4. 使用redis作缓存时,支持list类型的高级数据结构,更适合论坛帖子列表这种类型的数据 5. 支持混合使用redis缓存和memcached缓存。可以将列表数据缓存到redis中,其他kv结构数据继续缓存到memcached 6. 支持redis的主从集群,可以做读写分离。缓存读取自redis的slave节点,写入到redis的master节点。 Java对象的SQL接口 JoSQL JoSQL(SQLforJavaObjects)为Java开发者提供运用SQL语句来操作Java对象集的能力.利用JoSQL可以像操作数据库中的数据一样对任何Java对象集进行查询,排序,分组。 搜索自动提示 Autotips AutoTips是为解决应用系统对于【自动提示】的需要(如:Google搜索), 而开发的架构无关的公共控件, 以满足该类需求可以通过快速配置来开发。AutoTips基于搜索引擎Apache Lucene实现。AutoTips提供统一UI。 WAP浏览器 j2wap j2wap 是一个基于Java的WAP浏览器,目前处于BETA测试阶段。它支持WAP 1.2规范,除了WTLS 和WBMP。 Java注册表操作类 jared jared是一个用来操作Windows注册表的 Java 类库,你可以用来对注册表信息进行读写。 GIF动画制作工具 GiftedMotion GiftedMotion是一个很小的,免费而且易于使用图像互换格式动画是能够设计一个有趣的动画了一系列的数字图像。使用简便和直截了当,用户只需要加载的图片和调整帧您想要的,如位置,时间显示和处理方法前帧。 Java的PList类库 Blister Blister是一个用于操作苹果二进制PList文件格式的Java开源类库(可用于发送数据给iOS应用程序)。 重复文件检查工具 FindDup.tar FindDup 是一个简单易用的工具,用来检查计算机上重复的文件。 OpenID的Java客户端 JOpenID JOpenID是一个轻量级的OpenID 2.0 Java客户端,仅50KB+(含源代码),允许任何Web网站通过OpenID支持用户直接登录而无需注册,例如Google Account或Yahoo Account。 JActor的文件持久化组件 JFile JFile 是 JActor 的文件持久化组件,以及一个高吞吐量的可靠事务日志组件。 Google地图JSP标签库 利用Google:maps JSP标签库就能够在你的Web站点上实现GoogleMaps的所有功能而且不需要javascript或AJAX编程。它还能够与JSTL相结合生成数据库驱动的动态Maps。 OAuth 实现框架 Agorava Agorava 是一个实现了 OAuth 1.0a 和 OAuth 2.0 的框架,提供了简单的方式通过社交媒体进行身份认证的功能。 Eclipse的JavaScript插件 JSEditor JSEditor 是 Eclipse 下编辑 JavaScript 源码的插件,提供语法高亮以及一些通用的面向对象方法。 Java数据库连接池 BoneCP BoneCP 是一个高性能的开源java数据库连接池实现库。它的设计初衷就是为了提高数据库连接池的性能,根据某些测试数据发现,BoneCP是最快的连接池。BoneCP很小,只有四十几K

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值