用Scala 发送Kafka消息

bai___DDD

已于 2022-03-06 11:14:06 修改

阅读量714

点赞数

分类专栏：测试文章标签： scala kafka

于 2021-08-08 11:59:48 首次发布

本文链接：https://blog.csdn.net/bai___DDD/article/details/119512579

版权

本文介绍了如何使用Scala语言发送Kafka消息。首先，需要IDE和offset explore 2.1来连接并验证Kafka集群。在pom.xml中引入kafka-client依赖。接着创建Scala脚本，详细阐述了代码实现过程。最后，通过运行数据并在Kafka topic中检查，确认消息发送成功。

摘要由CSDN通过智能技术生成

分享一下用Scala发送kafka消息。

准备：

代码编辑器 IDE
offset explore2.1（链接你的cluster，同时查看你的kafka消息是否发送成功）

pom.xml 引入 kafka-client

新建文件编写脚本：

package utils

import org.apache.kafka.clients.producer.{KafkaProducer, ProducerConfig, ProducerRecord}
import org.apache.kafka.common.header.Header
import org.apache.kafka.common.header.internals.RecordHeader
import org.apache.kafka.common.serialization.StringSerializer
import java.util
import java.util.{Date, Properties, UUID}

import scala.io.Source

class KafkaMessage(properties: Properties){

  def writeBatchToKafka(server: String, topic: String,tenant: String, filepath: String): Unit = {
    val value = Source.fromFile(filepath).mkString
    val props = new Properties()

    props.put(P