jsonarray使用_Flink SQL 中TableFunction使用分析

本文介绍了Flink SQL中如何自定义TableFunction,特别是用于处理列转行的场景。通过示例展示了如何使用TableFunction进行数据转换,并详细解释了eval方法和LATERAL TABLE的配合使用。同时,文章深入源码,分析了Flink SQL执行Table Function Join的流程,帮助读者理解TableFunction的工作原理。
摘要由CSDN通过智能技术生成

点击上方蓝

字关注~

本篇幅介绍Flink Table/SQL中如何自定义一个表函数(TableFunction),介绍其基本用法以及与源码结合分析其调用流程。

基本使用

表函数TableFunction相对标量函数ScalarFunction一对一,它是一个一对多的情况,通常使用TableFunction来完成列转行的一个操作。先通过一个实际案例了解其用法:终端设备上报数据,数据类型包含温度、耗电量等,上报方式是以多条方式上报,例如:

af21fd66d85a52cf66eb07a8204e93a4.png

现在希望得到如下数据格式:

480c478dc1220af4247c9f52ea9a439b.png

这是一个典型的列转行或者一行转多行的场景,需要将data列进行拆分成为多行多列,先看下代码实现:

public class MyUDTF extends TableFunction<Row>{

public void eval(String s){

JSONArray jsonArray =JSONArray.parseArray(s);

for(int i =0; i < jsonArray.size(); i++){

JSONObject jsonObject = jsonArray.getJSONObject(i);

String type = jsonObject.getString("type");

String value = jsonObject.getString("value");

collector.collect(Row.of(type, value));

}

}

@Overridepublic TypeInformation<Row> getResultType(){

returnTypes.ROW(Types.STRING(),Types.STRING());

}

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值