发送数据到kafka

roducer=KafkaProducer(bootstra_servers=['10.1.1.1:9000,'4.4.4.4:8888'], security_protocol='SASL_PLAINTEXT', value_serializer=lambda v:json.dumps(v).encode('utf-8') sasl_mechanism='SCRAM-SHA-256', sasl_kerberos_service_name='target' sasl_plain_username="ee”。 sasl_plain_password="eres", api_version(2,3,0)用这些信息使用java实现给kafka的多个ip和端口发送json报文用中文回复

要使用Java将JSON消息发送到Kafka的多个IP和端口,您可以按照以下步骤进行配置和实现:

  1. 添加Kafka依赖: 确保您在pom.xml(对于Maven)或build.gradle(对于Gradle)中添加了必要的Kafka依赖。

    Maven:

    <dependency>
        <groupId>org.apache.kafka</groupId>
        <artifactId>kafka-clients</artifactId>
        <version>2.3.0</version>
    </dependency>
    

    Gradle:

    implementation 'org.apache.kafka:kafka-clients:2.3.0'

  2. 配置KafkaProducer: 使用Java代码配置KafkaProducer并发送JSON消息。以下是一个完整的示例代码:

    import org.apache.kafka.clients.producer.KafkaProducer;
    import org.apache.kafka.clients.producer.ProducerRecord;
    import org.apache.kafka.clients.producer.ProducerConfig;
    import org.apache.kafka.common.serialization.StringSerializer;
    
    import java.util.Properties;
    
    public class KafkaJsonProducer {
        public static void main(String[] args) {
            Properties props = new Properties();
            props.put(ProducerConfig.BOOTSTRAP_SERVERS_CONFIG, "10.1.1.1:9000,4.4.4.4:8888");
            props.put("security.protocol", "SASL_PLAINTEXT");
            props.put("sasl.mechanism", "SCRAM-SHA-256");
            props.put("sasl.kerberos.service.name", "target");
            props.put("sasl.jaas.config", "org.apache.kafka.common.security.scram.ScramLoginModule required username=\"ee\" password=\"eres\";");
            props.put(ProducerConfig.KEY_SERIALIZER_CLASS_CONFIG, StringSerializer.class.getName());
            props.put(ProducerConfig.VALUE_SERIALIZER_CLASS_CONFIG, StringSerializer.class.getName());
    
            KafkaProducer<String, String> producer = new KafkaProducer<>(props);
    
            try {
                String topic = "your_topic";
                String message = "{\"key\": \"value\"}"; // 这里是您要发送的JSON消息
                ProducerRecord<String, String> record = new ProducerRecord<>(topic, message);
                producer.send(record);
                System.out.println("Message sent successfully");
            } catch (Exception e) {
                e.printStackTrace();
            } finally {
                producer.close();
            }
        }
    }
    

  3. 运行程序: 将上述代码保存为一个Java文件(例如KafkaJsonProducer.java),然后编译并运行它。

确保Kafka集群已启动并且正确配置了SASL认证。如果有任何问题,请检查Kafka集群的日志以获取更多调试信息。

  • 10
    点赞
  • 9
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
您好!要在Java中发送数据Kafka,您需要使用Kafka提供的Java客户端库。以下是一个简单的示例代码,演示如何发送数据Kafka: ```java import org.apache.kafka.clients.producer.*; import java.util.Properties; public class KafkaProducerExample { public static void main(String[] args) { String topicName = "your_topic_name"; String bootstrapServers = "your_bootstrap_servers"; // 设置Kafka生产者的配置属性 Properties props = new Properties(); props.put("bootstrap.servers", bootstrapServers); props.put("key.serializer", "org.apache.kafka.common.serialization.StringSerializer"); props.put("value.serializer", "org.apache.kafka.common.serialization.StringSerializer"); // 创建Kafka生产者 Producer<String, String> producer = new KafkaProducer<>(props); try { // 发送一条消息到Kafka String message = "Hello, Kafka!"; ProducerRecord<String, String> record = new ProducerRecord<>(topicName, message); producer.send(record, new Callback() { @Override public void onCompletion(RecordMetadata metadata, Exception exception) { if (exception != null) { System.out.println("消息发送失败:" + exception.getMessage()); } else { System.out.println("消息发送成功,偏移量:" + metadata.offset()); } } }); // 关闭Kafka生产者 producer.close(); } catch (Exception e) { e.printStackTrace(); } } } ``` 请确保替换`your_topic_name`和`your_bootstrap_servers`为您的实际值,然后运行此代码即可将消息发送到Kafka中的指定主题。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值