flink支持数据类型

Flink 流应用程序处理的是以数据对象表示的事件流。所以在 Flink 内部,我们
需要能够处理这些对象。它们需要被序列化和反序列化,以便通过网络传送它们;
或者从状态后端、检查点和保存点读取它们。为了有效地做到这一点, Flink 需要明
确知道应用程序所处理的数据类型。 Flink 使用类型信息的概念来表示数据类型,并
为每个数据类型生成特定的序列化器、反序列化器和比较器。
Flink 还具有一个类型提取系统,该系统分析函数的输入和返回类型,以自动获
取类型信息,从而获得序列化器和反序列化器。但是,在某些情况下,例如 lambda
函数或泛型类型,需要显式地提供类型信息,才能使应用程序正常工作或提高其性
能。
Flink 支持 Java Scala 中所有常见数据类型。使用最广泛的类型有以下几种。
1 基础数据类型
Flink 支持所有的 Java Scala 基础数据类型, Int, Double, Long, String, …
DataStream<Integer> numberStream = env.fromElements( 1 , 2 , 3 , 4 );
numberStream.map(data -> data * 2 );
2 Java Scala 元组( Tuples

3 Scala 样例类( case classes

 

 4 Java 简单对象(POJOs

 

 5 其它(Arrays, Lists, Maps, Enums, 等等)

Flink Java Scala 中的一些特殊目的的类型也都是支持的,比如 Java
ArrayList HashMap Enum 等等
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

大数据开发工程师-宋权

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值