RabbitMQ消息100%的投递

1、消息如何保证100%的投递？

什么是生产端的可靠性投递？
(满足下面四点)

• 保障消息的成功发出
• 保障MQ节点的成功接收
• 发送端收到MQ节点（Broker）确认应答
• 完善的消息进行补偿机制

BAT/TMD互联网大厂的解决方案：
1、消息落库，对消息状态进行打标

流程如下：
第1步：将订单入库，创建一条MSG(状态为0) 入MSG DB库
第2步：将消息发出去
第3步：监听消息应答(来自Broker)
第4步：修改消息的状态为1(成功)
第5步：分布式定时任务抓取状态为0的消息
第6步：将状态为0的消息重发
第7步：如果尝试了3次(可按实际情况修改)以上则将状态置为2(消息投递失败状态)

---

2、消息的延迟投递，做二次确认，回调检查

操作步骤：
第1步：首先业务数据落库，成功才后第一次消息发送
第2步：紧着着发送第2条消息（可以用于寻找第1条消息），用于延迟(可能2,3分钟后才发送)消息投递检查
第3步：Broker端收到消息后，消费端进行消息处理
第4步：处理成功后，发送confirm消息
第5步：收到confirm消息后，将消息进行持久化存储
第6步：收到了delay消息，检查DB数据库，若对应的第1条消息已处理完成，则不做任何事情；若收到了delay消息，检查DB数据库，发现对应的第1条消息处理失败(或无记录)，则发送重传命令到上游服务，循环第1步

---

2、幂等性概念

幂等性是什么？
我们可以借鉴数据库的乐观锁机制
比如我们执行一条更新库存的SQL语句
Update t_repository set count = count -1,version = version + 1 where version = 1
Elasticsearch也是严格遵循幂等性概念，每次数据更新，version+1。

消费端-幂等性保障
在海量订单产生的业务高峰期，如何避免消息的重复消费问题？

消费实现幂等性，就意味着，我们的消息永远不会消费多次，即使我们收到了多条一样的消息

业界主流的幂等性操作
唯一ID+指纹码机制，利用数据库主键去重
利用Redis的原子性去实现

唯一ID+指纹码 机制
唯一ID+指纹码机制，利用数据库主键去重
Select count(1) from T_order where ID=唯一ID+指纹码
好处：实现简单
坏处：高并发下有数据库写入的性能瓶颈
解决方案：根据ID进行分库分表进行算法路由

利用Redis的原子性去实现
使用Redis进行幂等，需要考虑的问题
第一：我们是否要进行数据落库，如果落库的话，关键解决的问题是数据库和缓存如何做到原子性？
第二：如果不进行落库，那么都存储到缓存中，如何设置定时同步策略？

3、Confirm确认消息

理解Confirm消息确认机制

• 消息的确认，是指生产者投递消息后，如果Broker收到消息，则会给我们生产者 一个应答。
  生产者进行接收应答，用来确定这条消息是否正常的发送到Broker，这种方式也是消息的可靠性投递的核心保障

如何实现Confirm确认消息？

• 第一步：在Channel上开启确认模式：channel.confirmSelect()
• 第二步：在channel上添加监听：addConfirmListener，监听成功和失败的返回结果，根据具体的结果对消息进行重新发送、或记录日志等后续处理！

消费端代码

package com.hyf.rabbitmqapi.confirm;

import com.rabbitmq.client.Channel;
import com.rabbitmq.client.Connection;
import com.rabbitmq.client.ConnectionFactory;
import com.rabbitmq.client.QueueingConsumer;

/**
 * @author xhy
 * @site www.4399.com
 * @company xxx公司
 * @create 2020-03-01 11:38
 */
public class Consumer {

    public static void main(String[] args) throws Exception{
        // 创建ConnectionFactory
        ConnectionFactory connectionFactory = new ConnectionFactory();
        connectionFactory.setHost("192.168.59.128");
        connectionFactory.setPort(5672);
        connectionFactory.setVirtualHost("/");

        connectionFactory.setAutomaticRecoveryEnabled(true);
        connectionFactory.setNetworkRecoveryInterval(3000);


        //  连接连接工厂
        Connection connection = connectionFactory.newConnection();

        // 通过连接工厂创建 Channel
        Channel channel = connection.createChannel();

        // 声明
        String exChangeName = "test_confirm_exChange"; // 交换机的名称
        String exChangeType = "topic";                 // 交换机的类型
        String routingName  = "confirm.#";             // 路由定义的规则
        String queueName    = "test_confirm_queue";    // 队列名称

        // 声明一个交互机
        channel.exchangeDeclare(exChangeName,exChangeType,true,false,null);
        // 声明一个队列
        channel.queueDeclare(queueName,false,false,false,null);
        // 建立一个绑定关系
        channel.queueBind(queueName,exChangeName,routingName);

        // 创建一个消费者
        QueueingConsumer queueingConsumer = new QueueingConsumer(channel);
        // 设置 Channel
        channel.basicConsume(queueName,true,queueingConsumer);

        // 使用 循环接受消息
        while (true){
            QueueingConsumer.Delivery delivery = queueingConsumer.nextDelivery();
            String msg = new String(delivery.getBody());
            System.out.println("接受消息："+msg);
        }
    }
}

生产端：

package com.hyf.rabbitmqapi.confirm;

import com.rabbitmq.client.Channel;
import com.rabbitmq.client.ConfirmListener;
import com.rabbitmq.client.Connection;
import com.rabbitmq.client.ConnectionFactory;

import java.io.IOException;
import java.util.concurrent.TimeoutException;

/**
 * @author xhy
 * @site www.4399.com
 * @company xxx公司
 * @create 2020-03-01 12:33
 */
public class Producer {
    public static void main(String[] args) throws Exception {
        // 创建ConnectionFactory
        ConnectionFactory connectionFactory = new ConnectionFactory();
        connectionFactory.setHost("192.168.59.128");
        connectionFactory.setPort(5672);
        connectionFactory.setVirtualHost("/");

        Connection connection = connectionFactory.newConnection();

        Channel channel = connection.createChannel();


        // 指定消息投递模式：消息确定模式
        channel.confirmSelect();

        String exChangeName = "test_confirm_exChange";
        String routingKey   = "confirm.save";

        // 发送的消息
        String msg = "消息再此。。。。。";
        channel.basicPublish(exChangeName,routingKey,null,msg.getBytes());

        channel.addConfirmListener(new ConfirmListener() {
            @Override
            public void handleAck(long l, boolean b) throws IOException {
                // 成功则打印该消息
                System.out.println("---------- 发送成功 -------");
            }

            @Override
            public void handleNack(long l, boolean b) throws IOException {
                // 失败则打印该消息
                System.out.println("--------- 出问题啦 ----------");
            }
        });
    }
}

4、Return返回消息

Return Listener用于处理一些不可路由的消息！

• 正常情况：我们的消息生产者，通过指定一个Exchange和RoutingKey，把消息送达到某一个队列中去，然后我们的消费者监听队列，进行消费处理操作！
  异常情况：在某些情况下，如果我们在发送消息的时候，当前的Exchange不存在或者指定的路由key路由不到，这个时候如果我们需要监听这种不可达的消息，就需要使用Return Listener！

• 在基础API中有一个关键的配置项
  Mandatory：如果为true，则监听器会接收到路由不可达的消息，然后进行后续处理，如果为false，那么Broker端自动删除该消息！

消费端代码：

package com.hyf.rabbitmqapi.returnlistener;

import com.rabbitmq.client.Channel;
import com.rabbitmq.client.Connection;
import com.rabbitmq.client.ConnectionFactory;
import com.rabbitmq.client.QueueingConsumer;

/**
 * @author xhy
 * @site www.4399.com
 * @company xxx公司
 * @create 2020-03-01 14:24
 */
public class Consumer {
    public static void main(String[] args) throws Exception {
        ConnectionFactory connectionFactory = new ConnectionFactory();
        connectionFactory.setHost("192.168.59.128");
        connectionFactory.setPort(5672);
        connectionFactory.setVirtualHost("/");

        Connection connection = connectionFactory.newConnection();
        Channel channel = connection.createChannel();

        String exchangeName = "test_return_exchange";
        String routingKey = "return.#";
        String queueName = "test_return_queue";

        channel.exchangeDeclare(exchangeName, "topic", true, false, null);
        channel.queueDeclare(queueName, true, false, false, null);
        channel.queueBind(queueName, exchangeName, routingKey);

        QueueingConsumer queueingConsumer = new QueueingConsumer(channel);

        channel.basicConsume(queueName, true, queueingConsumer);

        while(true){
            QueueingConsumer.Delivery delivery = queueingConsumer.nextDelivery();
            String msg = new String(delivery.getBody());
            System.err.println("消费者: " + msg);
        }
    }
}

生产端代码：

package com.hyf.rabbitmqapi.returnlistener;

import com.rabbitmq.client.*;

import java.io.IOException;
import java.util.concurrent.TimeoutException;

/**
 * @author xhy
 * @site www.4399.com
 * @company xxx公司
 * @create 2020-03-01 14:27
 */
public class Producer {
    public static void main(String[] args) throws Exception {
        ConnectionFactory connectionFactory = new ConnectionFactory();
        connectionFactory.setHost("192.168.59.128");
        connectionFactory.setPort(5672);
        connectionFactory.setVirtualHost("/");

        Connection connection = connectionFactory.newConnection();
        Channel channel = connection.createChannel();

        String exchangeName = "test_return_exchange";
        String routingKey = "return.#";
        String routingKeyError = "abc.save";

        String msg ="返回：return xxz值";

        channel.addReturnListener(new ReturnListener() {
            @Override
            public void handleReturn(int i, String s, String s1, String s2, AMQP.BasicProperties basicProperties, byte[] bytes) throws IOException {
                System.err.println("---------handle  return----------");
                System.err.println("replyCode: " + i);
                System.err.println("replyText: " + s);
                System.err.println("exchange: " + s1);
                System.err.println("routingKey: " + s2);
                System.err.println("properties: " + basicProperties);
                System.err.println("body: " + new String(bytes));
            }
        });
        // 正确的路由值打印
//        channel.basicPublish(exchangeName,routingKey,null,msg.getBytes());

        // 错误的路由值打印
        channel.basicPublish(exchangeName,routingKeyError,true,null,msg.getBytes());
    }
}

当路由Key值不正确：

5、自定义消费者

我们一般就是在代码中编写while循环，进行consumer.nextDelivery方法进行获取下一条消息，然后进行消费处理！
但是我们使用自定义的Consumer更加的方便，解耦性更加的强，也是实际工作中最常用的使用方式！

---

自定义消费端代码：

package com.hyf.rabbitmqapi.quickstart;

import com.rabbitmq.client.AMQP;
import com.rabbitmq.client.Channel;
import com.rabbitmq.client.DefaultConsumer;
import com.rabbitmq.client.Envelope;

import java.io.IOException;

/**
 * @author xhy
 * @site www.4399.com
 * @company xxx公司
 * @create 2020-03-01 15:40
 */
public class myConsumer extends DefaultConsumer {
    public myConsumer(Channel channel) {
        super(channel);
    }

    @Override
    public void handleDelivery(String consumerTag, Envelope envelope, AMQP.BasicProperties properties, byte[] body) throws IOException {
        System.out.println("----- 自定义消费者接受消息 -------");
        System.err.println("consumerTag: " + consumerTag);
        System.err.println("envelope: " + envelope);
        System.err.println("properties: " + properties);
        System.err.println("body: " + new String(body));
    }
}

消费者改造：

打印结果：