利用Avro实现Kakfa序列化和反序列化

最新推荐文章于 2024-08-08 19:58:35 发布

MirandaGirl2018

最新推荐文章于 2024-08-08 19:58:35 发布

阅读量5.3k

点赞数

分类专栏：分布式文章标签： kafka Avro

本文链接：https://blog.csdn.net/meng984611383/article/details/80528063

版权

本文介绍了如何利用Avro的scheme定义，并通过maven插件生成Java类，实现Kafka消息的序列化和反序列化。内容包括Avro schema的JSON格式，生成Java文件的方法，以及在Kafka Producer和Consumer中的配置应用。

摘要由CSDN通过智能技术生成

1 在pom.xml中添加依赖，

1.1 在dependencies中配置：

<dependency>
      <groupId>org.apache.avro</groupId>
      <artifactId>avro</artifactId>
      <version>1.8.2</version>
    </dependency>
    <dependency>
      <groupId>org.apache.avro</groupId>
      <artifactId>avro-tools</artifactId>
      <version>1.8.2</version>
    </dependency>
    <dependency>
      <groupId>org.apache.avro</groupId>
      <artifactId>avro-maven-plugin</artifactId>
      <version>1.8.2</version>
    </dependency>
    <dependency>
      <groupId>org.apache.avro</groupId>
      <artifactId>avro-compiler</artifactId>
      <version>1.8.2</version>
    </dependency>

1.2 在<build>中配置，注意不要加<pluginManagement></pluginManagement>：

<build>
      <plugins>
        <plugin>
          <groupId>org.apache.avro</groupId>
          <artifactId>avro-maven-plugin</artifactId>
          <version>1.8.2</version>
          <executions>
            <execution>
              <phase>generate-sources</phase>
              <goals>
                <goal>schema</goal>
              </goals>
              <configuration>
                <sourceDirectory>${project.basedir}/src/main/avro/</sourceDirectory>
                <outputDirectory>${project.basedir}/src/main/java/</outputDirectory>
              </configuration>
            </execution>
          </executions>
        </plugin>
        <plugin>
          <groupId>org.apache.maven.plugins</groupId>
          <artifactId>maven-compiler-plugin</artifactId>
          <configuration>
            <source>1.8</source>
            <target>1.8</target>
          </configuration>
        </plugin>
      </plugins>
  </build>