95-910-146-源码-FlinkSQL-Flink SQL中TableFunction使用分析

最新推荐文章于 2024-03-12 21:36:39 发布
最新推荐文章于 2024-03-12 21:36:39 发布
阅读量167 收藏
点赞数
分类专栏： 大数据-flink 文章标签： flink sql java
本文为博主九师兄（QQ:541711153 欢迎来探讨技术）原创文章，未经允许博主不允许转载。
本文链接：https://blog.csdn.net/qq_21383435/article/details/120161483
版权
大数据-flink 专栏收录该内容
854 篇文章 856 订阅 ¥99.90 ¥299.90
订阅专栏
本文介绍了Flink SQL中的TableFunction用法，通过实例展示了如何将一列数据拆分为多行，并详细解析了TableFunction的源码，包括eval方法的调用逻辑和Flink SQL执行计划的生成过程。
摘要由CSDN通过智能技术生成

1.美图

在这里插入图片描述

2.基本使用

​ 表函数TableFunction相对标量函数ScalarFunction一对一，它是一个一对多的情况，通常使用TableFunction来完成列转行的一个操作。先通过一个实际案例了解其用法：终端设备上报数据，数据类型包含温度、耗电量等，上报方式是以多条方式上报，例如：

Devid Time Data
Dev01 151325534643 [{“type”:“timperature”,“value”:“10”},{“type”:“battery”,“value”:“10”}]

现在希望得到如下数据格式：

Devid Time type
了解本专栏 订阅专栏 解锁全文
九师兄
关注
专栏目录
订阅专栏
Flink SQL 中TableFunction使用分析
微信搜：import_bigdata，大数据领域硬核原创作者
08-29 492
声明：本系列博客部分是根据SGG的视频整理而成，非常适合大家入门学习。部分文章是通过爬虫等技术手段采集的，目的是学习分享，如果有版权问题请留言，随时删除。 《2021年最新版大数据面试题全面开启更新》 本篇幅介绍Flink Table/SQL中如何自定义一个表函数(TableFunction)，介绍其基本用法以及与源码结合分析其调用流程。 基本使用 表函数TableFunction相对标量函数ScalarFunction一对一，它是一个一对多的情况，通常使用TableFunction来完成列转行
jsonarray使用_Flink SQL 中TableFunction使用分析
weixin_28932845的博客
01-15 1039
点击上方蓝字关注~本篇幅介绍Flink Table/SQL中如何自定义一个表函数(TableFunction)，介绍其基本用法以及与源码结合分析其调用流程。基本使用表函数TableFunction相对标量函数ScalarFunction一对一，它是一个一对多的情况，通常使用TableFunction来完成列转行的一个操作。先通过一个实际案例了解其用法：终端设备上报数据，数据类型包含温度、...
聊聊flink的TableFunction
weixin_34296641的博客
02-08 989
序 本文主要研究一下flink的TableFunction 实例 // The generic type "Tuple2<String, Integer>" determines the schema of the returned table as (String, Integer). public class Split ...
Flink SQL自定义表值函数（Table Function）
猫猫爱吃小鱼粮
11-10 1681
Flink SQL自定义表值函数（Table Function）
FlinkSQL-自定义表函数TableFunction
qq884121435的博客
07-29 1031
FlinkSQL-自定义表函数TableFunction什么是表函数表函数的实现代码实现测试用例 什么是表函数 Table Function类似FlatMap，一对多，输入一条输出输出多条数据 用户定义的表函数，也可以将0、1或多个标量值作为输入参数；与标量函数不同的是，它可以返回任意数量的行作为输出，而不是单个值 为了定义一个表函数，必须扩展 org.apache.flink.table.functions 中的基类 TableFunction 并实现（一个或多个）求值方法 表函数的行为由其求值方法
95-910-144-源码-FlinkSQL-Flink的UDF
九师兄
10-11 217
1.世界 2.概述 用户自定义函数是非常重要的一个特征，因为他极大地扩展了查询的表达能力。 ​ 在大多数场景下，用户自定义函数在使用之前是必须要注册的。对于Scala的Table API，udf是不需要注册的。 调用TableEnvironment的registerFunction()方法来实现注册。Udf注册成功之后，会被插入TableEnvironment的function catalog，这样table API和sql就能解析他了。 本文会主要讲三种udf： ScalarFunction Table
flink sql 使用Table Function或Array Expansion 实现列转行（附源码实现）
penriver的博客
09-17 3190
在使用flink sql处理数据时，经常会遇到一列转多行的需求。 本文讲解在flink sql 中，使用Table Function或Array Expansion 实现列转行，并提供实现的源码示例
Flink实战教程-自定义函数之TableFunction
公众号[大数据技术与应用实战]，分享大数据实战案例
06-30 4187
文章目录自定义函数单个eval方法多个eval方法不固定参数通过注解指定返回类型注册函数构造数据源查询left joinjoin多种类型参数不固定参数类型 今天我们来聊聊flink sql中另外一种自定义函数-TableFuntion. TableFuntion 可以有0个、一个、多个输入参数，他的返回值可以是任意行，每行可以有多列数据. 实现自定义TableFunction需要继承TableFunction类，然后定义一个public类型的eval方法。结合官网的例子具体来讲解一下。 自定义函数 单个ev
大数据Flink（九十）：Lookup Join（维表 Join）
Lansonli（蓝深李）的博客
09-26 2312
Lookup Join 其实就是维表 Join，比如拿离线数仓来说，常常会有用户画像，设备画像等数据，而对应到实时数仓场景中，这种实时获取外部缓存的 Join 就叫做维表 Join。
大数据Flink（一百零一）：SQL 表值函数（Table Function）
Lansonli（蓝深李）的博客
10-23 983
Python UDTF，即 Python TableFunction，针对每一条输入数据，Python UDTF 可以产生 0 条、1 条或者多条输出数据，此外，一条输出数据可以包含多个列。如果你是使用 Scala 实现函数，不要使用 Scala 中 object 实现 UDF，Scala object 是单例的，有可能会导致并发问题。
Flink_Sql_Function——自定义各种函数
weixin_43003792的博客
02-19 1521
函数（Functions） • Flink Table API 和 SQL 为用户提供了一组用于数据转换的内置函数 • SQL 中支持的很多函数，Table API 和 SQL 都已经做了实现 Ø 比较函数 • SQL： value1 = value2 value1 > value2 • Table API： ANY1 === ANY2 ANY1 > ANY2 Ø 逻辑函数 • SQL： boolean1 OR boolean2 boolean IS FALSE NOT boolean • T
自定义函数_Flink实战教程自定义函数之TableFunction
weixin_39933336的博客
12-19 463
目录：自定义函数单个eval方法多个eval方法不固定参数通过注解指定返回类型注册函数构造数据源查询left joinjoin多种类型参数不固定参数类型今天我们来聊聊flink sql中另外一种自定义函数-TableFuntion.TableFuntion 可以有0个、一个、多个输入参数，他的返回值可以是任意行，每行可以有多列数据.实现自定义TableFunction需要继承TableF...
flink: 自定义表函数的用法
最新发布
amadeus_liu2的博客
03-12 475
【代码】flink: 自定义表函数的用法。
4.2.11 Flink-流处理框架-Table API 与 SQL-函数（Functions）之用户自定义函数 UDF
敲代码的乔帮主
03-15 400
1.写在前面 用户定义函数（User-defined Functions，UDF）是一个重要的特性，因为它们显著地扩展了查询（Query）的表达能力。一些系统内置函数无法解决的需求，我们可以用 UDF 来自定义实现。 在大多数情况下，用户定义的函数必须先注册，然后才能在查询中使用。不需要专门为 Scala 的 Table API 注册函数。 函数通过调用 registerFunction（）方法在 TableEnvironment 中注册。当用户定义的函数被注册时，...
【Flink】Flink常量UDF-TableFunction优化
九师兄
03-27 266
1.概述 转载：Flink常量UDF-TableFunction优化
在vue里面使用eval_Flink SQL 中TableFunction使用分析
weixin_34603814的博客
12-04 264
更多大数据架构、实战经验，欢迎关注【大数据与机器学习】，期待与你一起成长！Flink SQL 中TableFunction使用分析本篇幅介绍Flink Table/SQL中如何自定义一个表函数(TableFunction)，介绍其基本用法以及与源码结合分析其调用流程。基本使用表函数TableFunction相对标量函数ScalarFunction一对一，它是一个一对多的情况，通常使用TableFu...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

九师兄

你的鼓励是我做大写作的动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值