kafka本地查看数据

kafka本地代码展示

package com.kafkaSimple;


import org.apache.kafka.clients.consumer.ConsumerRecord;
import org.apache.kafka.clients.consumer.ConsumerRecords;
import org.apache.kafka.clients.consumer.KafkaConsumer;

import java.io.FileWriter;
import java.util.Arrays;
import java.util.Properties;

/**
 * kafka简单消费者实例
 *
 * 消费者组：当多个消费者的group.id相同的时候那么他们就是属于同一个
 * 消费者组。同一个消费者组中消费主题中位于不同分区的消息。每一个分区
 * 只能分配给消费者组中的一个消费者。
 * 如果创建主题的时候只制定了一个分区那么，将只有一个消费者消费所有消息。
 * 如果主题有多个分区，那么消息将分布到不同的分区上，那么消费者组中的
 * 所有消费者分摊所有消息。
 *
 * 当本例单个使用的时候是单个消费者。
 * 如果本实例代码作为另外一个新类运行的话，那么根本类就是同属于test组的消费者。
 *
 * 消费者组通过指定group.id来确定。
 */
public class SimpleConsumer {
    public static void main(String[] args) throws Exception{

        String topicName = "ecarx_log_analysis";
        Properties props = new Properties();
        // 制定要连接的代理
//        props.put("bootstrap.servers","pro01.cdh.ecarx.local:9092,pro02.cdh.ecarx.l