Flink——四种读取数据方式（集合、文件、kafka、自定义数据源）

最新推荐文章于 2024-12-09 09:16:03 发布

pia君

最新推荐文章于 2024-12-09 09:16:03 发布

阅读量1.5k

点赞数

分类专栏： java 文章标签： kafka flink scala

本文链接：https://blog.csdn.net/qq_43477550/article/details/121247680

版权

本文介绍了Apache Flink如何通过四种方式加载数据，包括从集合、文件、Kafka以及实现自定义数据源进行数据读取。详细展示了相关代码示例。

摘要由CSDN通过智能技术生成

Flink分别从集合、文件、kafka和自定义数据源四种方式中读取数据。代码如下：

package apiTest

import org.apache.flink.api.common.serialization.SimpleStringSchema
import org.apache.flink.api.scala.createTypeInformation
import org.apache.flink.streaming.api.functions.source.SourceFunction
import org.apache.flink.streaming.api.scala.StreamExecutionEnvironment
import org.apache.flink.streaming.connectors.kafka.FlinkKafkaConsumer011

import java.util.Properties
import scala.util.Random

//定义样例类，温度传感器
case class SensorReading(id:String, timestamp: Long, temperature