17 kafka-数据可靠性

1. 党sender线程将数据从内存的queue中发送至broker后，ack应答机制会进行响应。ack的配置有以下三种方式：

0:发送过来的数据，不需要等数据落盘应答(实际生产环境没有这么干的)

1: 发送过来的数据，leader收到后应答

-1(all),生产者发送过来的数据，leader + isr队列中的所有的follwer节点收齐数据后应答。

2.
以上配置的弊端显而易见，

ack=0是基本不会适用的，

ack=1的时候，如果leader刚收到数据还没有同步就宕机了，那么新的leader没有接收到数据，producer也不会再补发了。

ack=-1的时候，如果一个follower宕机没有应答，则整体消息推送都会受影响，是万不可取的.

解决方案：

当ack=-1的时候，如果leader接收到数据，并且follower也同步结束了，但是当进行应答的时候，宕机了，那么生产者会再次发送数据的时候，则会导致数据重复，这种情况是比较少见的。但是不排除这种情况

代码中配置ack

package com.atguigu.kafka.producer;
import org.apache.kafka.clients.producer.KafkaProducer;
import org.apache.kafka.clients.producer.ProducerConfig;
import org.apache.kafka.clients.producer.ProducerRecord;
import org.apache.kafka.common.serialization.StringSerializer;

import java.util.Properties;

public class CustomProducerAcks {

    public static void main(String[] args) {

        // 0 配置
        Properties properties = new Properties();

        // 连接集群 bootstrap.servers
        properties.put(ProducerConfig.BOOTSTRAP_SERVERS_CONFIG,"localhost:9092");

        // 指定对应的key和value的序列化类型 key.serializer
//        properties.put(ProducerConfig.KEY_SERIALIZER_CLASS_CONFIG,"org.apache.kafka.common.serialization.StringSerializer");
        properties.put(ProducerConfig.KEY_SERIALIZER_CLASS_CONFIG, StringSerializer.class.getName());
        properties.put(ProducerConfig.VALUE_SERIALIZER_CLASS_CONFIG,StringSerializer.class.getName());

        // 设置acks
        properties.put(ProducerConfig.ACKS_CONFIG,"1");

        // 重试次数
        properties.put(ProducerConfig.RETRIES_CONFIG,3);

        // 1 创建kafka生产者对象
        // "" hello
        KafkaProducer<String, String> kafkaProducer = new KafkaProducer<>(properties);

        // 2 发送数据
        for (int i = 0; i < 5; i++) {
            kafkaProducer.send(new ProducerRecord<>("ums-cardbin","bankname"+i));
        }

        // 3 关闭资源
        kafkaProducer.close();
    }
}