Kafka进阶02

最新推荐文章于 2024-04-19 00:58:04 发布

Java技术堆

最新推荐文章于 2024-04-19 00:58:04 发布

阅读量222

点赞数

分类专栏：数据库

本文链接：https://blog.csdn.net/fly_miqiqi/article/details/88811774

版权

数据库专栏收录该内容

18 篇文章 2 订阅

订阅专栏

一. 问题场景以及解决的问题

哪些异常可以重试

如何实现重试

场景：发送消息到Broker时抛出异常，并且是允许重试的异常——>就会进行最大重试retries参数指定的次数

二. 机制解读

1. 允许重试的必要条件

a) 重试次数少于参数retries指定的值

b) 异常是RetriableException类型或者 TranscationManager允许重试

2. RetriableException—通过重试使用较短时间可以成功的异常

3. TransactionManager允许重试——异常不满足类型，但此处允许，也会进行重试

|——此参数是KafkaProducer中构造Sender传入的

|——transactionManager.canRetray(response,batch)

private static TransactionManager configureTransactionState(ProducerConfig config, LogContext logContext, Logger log) {
    TransactionManager transactionManager = null;
    boolean userConfiguredIdempotence = false;
    // 用户设置的Properties参数中是否有'enable.idempotence'，如果有的话, 就用用户配置的
    if (config.originals().containsKey(ProducerConfig.ENABLE_IDEMPOTENCE_CONFIG)) {
        userConfiguredIdempotence = true;
    }
    // 用户设置的Properties参数中是否有'transactional.id'，如果有的话, 就用用户配置的
    boolean userConfiguredTransactions = false;
    if (config.originals().containsKey(ProducerConfig.TRANSACTIONAL_ID_CONFIG)) {
        userConfiguredTransactions = true;
    }
    // 得到参数'enable.idempotence'的值
    boolean idempotenceEnabled = config.getBoolean(ProducerConfig.ENABLE_IDEMPOTENCE_CONFIG);
    // 如果用户显示配置enable.idempotence为false，并且又配置了transactional.id，就会抛出这个异常
    if (!idempotenceEnabled && userConfiguredIdempotence && userConfiguredTransactions) {
        throw new ConfigException("Cannot set a " + ProducerConfig.TRANSACTIONAL_ID_CONFIG + " without also enabling idempotence.");
    } 
    // 如果用户配置了transactional.id，那么idempotenceEnabled就认为是true（与）
    if (userConfiguredTransactions) {
        idempotenceEnabled = true;
    }

    // 只有用户配置了transactional.id，且enable.idempotence没有设置为false，这里才为true，就会构造一个有效的TransactionManager；从这里可知，如果用户没有配置transactional.id，那么TransactionManager为null
    if (idempotenceEnabled) {
        // 构造TransactionManager的几个重要参数
        String transactionalId = config.getString(ProducerConfig.TRANSACTIONAL_ID_CONFIG);
        int transactionTimeoutMs = config.getInt(ProducerConfig.TRANSACTION_TIMEOUT_CONFIG);
        long retryBackoffMs = config.getLong(ProducerConfig.RETRY_BACKOFF_MS_CONFIG);
        transactionManager = new TransactionManager(logContext, transactionalId, transactionTimeoutMs, retryBackoffMs);
        ... ...
    }
   
    return transactionManager;
}