事务
事务是Kafka 0.11开始引入的新特性。类似于数据库事务,只是这里的数据源是Kafka,kafka事务属性是指一系列的生产者生产消息和消费者提交offset
的操作在一个事务,或者说是是一个原子操作),同时成功或者失败。
事务入门例子
生产者如下,发送两条消息,添加事物的意思就是要么同时发送成功,要么都不成功。
/**
* 多次生成消息类型的事物
*/
public class OnlyWriteProducer {
protected static final Logger logger = LoggerFactory.getLogger(OnlyWriteProducer.class);
public static final String TOPIC_NAME = "producer-0";
public static void main(String[] args) {
Producer<String, User> producer = new KafkaTransactionBuilder<String, User, byte[]>().buildProducer();
//初始化事物
producer.initTransactions();
//开始事物
producer.beginTransaction();
try{
User user = new User(101L,"kafka","serializer@kafka.com",1);
producer.send(new ProducerRecord<String, User>(TOPIC_NAME, Long.toString(user.getId()), user));
User user2 = new User(102L,"netty","transaction@netty.com",0);
producer.send(new ProducerRecord<String, User>(TOPIC_NAME, Long.toString(user2.getId()), user2));
//提交事物
producer.commitTransaction();
}catch(Exception e){
logger.error("kafka消息发送异常!",e);
//停止事物
producer.abortTransaction();
}
producer.close();
}
}
消费者如下,消费者没有使用事物,但是消费者采用的是手动提交:
public class TransactionConsumer {
protected static final Logger logger = LoggerFactory.getLogger(TransactionConsumer.class);
private static boolean isClose = false;
public static void