【Flink】自定义source

一杯咖啡半杯糖

已于 2022-12-07 17:18:02 修改

阅读量2k

点赞数

分类专栏： Flink实战文章标签： flink 大数据

于 2022-04-24 15:29:57 首次发布

本文链接：https://blog.csdn.net/sinat_23225111/article/details/124378324

版权

Flink实战专栏收录该内容

95 篇文章 117 订阅 ¥19.90 ¥99.00

订阅专栏

超级会员免费看

本文介绍了如何在Flink中自定义source以提高开发和测试效率。通过添加Maven依赖，定义自定义数据源并展示实际运行程序，展示如何生成特定格式的数据，例如Item对象，包含name和id属性。

摘要由CSDN通过智能技术生成

我们实际开发的时候，常常需要做测试或者模拟数据来看逻辑对不对，通常flink会消费kafka数据，但是我们需要创建topic以及写程序去发送kafka数据，效率不高，掌握自定义souce生成数据对开发和测试的效率提升很重要。

1、添加maven依赖

<?xml version="1.0" encoding="UTF-8"?>
<project xmlns="http://maven.apache.org/POM/4.0.0"
         xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
         xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
    <modelVersion>4.0.0</modelVersion>

    <groupId>com.test</groupId>
    <artifactId>flink-test</artifactId>
    <version>1.0-SNAPSHOT</version>
    <dependencies>
        <dependency>
            <groupI

了解本专栏