RocketMQ消费者，设置setConsumeFromWhere无效的问题

最新推荐文章于 2024-08-27 23:29:55 发布

scutshuxue

最新推荐文章于 2024-08-27 23:29:55 发布

阅读量1.3w

点赞数 3

分类专栏： Java 文章标签：消息中间件 rocketMQ

本文链接：https://blog.csdn.net/scutshuxue/article/details/51694334

版权

在使用RocketMQ时遇到设置setConsumeFromWhere无效的问题，原因是消费者offset记录在Broker，新consumerGroup为避免数据丢失会从0开始消费。这在topic数据量大时不明显，但在频繁更新consumerGroup且数据量小的系统中造成困扰。

摘要由CSDN通过智能技术生成

今天用了阿里开源的RocketMQ，第一次消费，使用新的consumserGroup消费，设置

consumer.setConsumeFromWhere(ConsumeFromWhere.CONSUME_FROM_LAST_OFFSET);

但是结果还是从offset为0 开始消费。网上也有很多人遇到了这个问题，但是并没有答案。所以我查看了一下源码，在客户端代码（rocketmq-client/src/main/java/com/alibaba/rocketmq/client/impl/consumer/RebalancePushImpl.java）中：

 @Override
    public long computePullFromWhere(MessageQueue mq) {
        long result = -1;
        final ConsumeFromWhere consumeFromWhere =
                this.defaultMQPushConsumerImpl.getDefaultMQPushConsumer().getConsumeFromWhere();
        final OffsetStore offsetStore = this.defaultMQPushConsumerImpl.getOffsetStore();
        switch (consumeFromWhere) {
        case CONSUME_FROM_LAST_OFFSET_AND_FROM_MIN_WHEN_BOOT_FIRST:
        case CONSUME_FROM_MIN_OFFSET:
        case CONSUME_FROM_MAX_OFFSET:
        case CONSUME_FROM_LAST_OFFSET: {
            long lastOffset = offsetStore.readOffset(mq, ReadOffsetType.READ_FROM_STORE);
            if (lastOffset >= 0) {
                result = lastOffset;
            }
            // First start,no offset
            else if (-1 == lastOffset) {
                if (mq.getTopic().startsWith(MixAll.RETRY_GROUP_TOPIC_PREFIX)) {
                    result = 0L;
                }
                else {
                    try {
                        result = this.mQClientFactory.getMQAdminImpl().maxOffset(mq);
                    }
                    catch (MQClientException e) {
                        result = -1;
                    }
                }
            }
            else {
                result = -1;
            }