Flink Table API & SQL 自定义 Scalar 标量函数

最新推荐文章于 2023-02-08 10:45:05 发布
最新推荐文章于 2023-02-08 10:45:05 发布
阅读量313 收藏
点赞数
分类专栏： Flink 文章标签： flink Flink SQL
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/SunnyYoona/article/details/124853175
版权
本文介绍了Flink中的标量函数，包括其定义、如何自定义以及在Table API和SQL中的调用方式。通过一个AddScalarFunction示例展示了如何实现两个数值相加的自定义函数，并讲解了注册和调用的细节。
摘要由CSDN通过智能技术生成

1. 什么是标量函数

Scalar Function 也被称为标量函数，将 0 个、1个或多个标量值映射为一个新的标量值。输入与输出是一对一的关系，即读入一行数据，写出一条输出值。在自定义标量函数时，用户需要确认 Flink 内部是否已经实现相应的标量函数，如果已经实现则可以直接使用；如果没有实现，那么在注册自定义函数过程中，需要和内置的其他标量名称区分开，否则会导致注册函数失败，影响应用的正常执行。Flink 常见的内置标量函数有 DATE()、UPPER()、LTRIM() 等。

2. 定义标量函数

定义 Scalar Function 需要继承 org.apache.flink.table.functions.ScalarFunction 类。实现函数的类必须声明为 public、不能是抽象类，并且可以全局访问。因此，不允许使用非静态内部类或者匿名类。如果要在 Catalog 中存储用户自定义的函数，那么该类必须具有一个默认构造函数并且必须在运行时可实例化：

public class AddScalarFunction
了解本专栏 订阅专栏 解锁全文 超级会员免费看
@SmartSi
关注
专栏目录
订阅专栏
【Flink】Flink Table & SQL 用户自定义函数: UDF、UDAF、UDTF
九师兄
06-03 3462
本文总结Flink Table & SQL中的用户自定义函数: UDF、UDAF、UDTF。 UDF: 自定义标量函数(User Defined Scalar Function)。一行输入一行输出。 UDAF: 自定义聚合函数。多行输入一行输出。 UDTF: 自定义表函数。一行输入多行输出或一列输入多列输出。 测试数据 // 某个用户在某个时刻浏览了某个商品，以及商品的价值 // eventTime: 北京时间，方便测试。如下，乱序数据: {"userID": "user_5", "eventTi.
Flink TableAPI和SQL（十八）UDF（二）标量函数（Scalar Functions）
weixin_45417821的博客
05-08 664
文章目录标量函数（Scalar Functions） 标量函数（Scalar Functions） 自定义标量函数可以把 0 个、 1 个或多个标量值转换成一个标量值，它对应的输入是一行数据中的字段，输出则是唯一的值。所以从输入和输出表中行数据的对应关系看，标量函数是“一对一”的转换。想要实现自定义的标量函数，我们需要自定义一个类来继承抽象类 ScalarFunction，并实现叫作 eval() 的求值方法。标量函数的行为就取决于求值方法的定义，它必须是公有的（public），而且名字必须是 eval。求
SQL_SCALAR_FUNCTION
weixin_30918633的博客
01-13 305
SQL_SCALAR_FUNCTION ======================= fn_sqlvarbasetostrfn_cdc_get_column_ordinalfn_replreplacesinglequoteplusprotectstringfn_GetCurrentPrincipalfn_isrolememberfn_MSdayasnumberfn_MSget_dynamic...
Flink SQL中的函数
yingzi的技术博客
04-28 5052
Table API是内嵌在Java语言中的，很多方法需要在类中额外添加，扩展功能比较麻烦，目前支持的函数比较少，故一般情况下我们使用Flink SQL中的函数 Flink SQL中的函数主要分为两类： SQL内置函数，直接通过函数名调用，能够实现一些常用的转换操作，比如之前用到的COUNT()、CHAR_LENGTH()、UPPER等 用户自定义函数UDF，需要在表环境中注册使用 文章目录系统函数标量函数聚合函数自定义函数整体调用流程标量函数表函数聚合函数表聚合函数 系统函数 系统函数又叫内置函数，是在
scala function从入门到理解
鸭梨的博客
11-22 625
在 Scala 中，至少有两种语法形式用于使用 定义函数。最大的区别是：是希望 （a） 让返回类型为"隐式"，这意味着您不显示它，编译器推断它- 还是 （b） 显式定义函数的返回类型 val add1 = (i: Int) => i + 1 // implicit return type (IRT) val add1: Int => Int = (i) => i + 1 // explicit return type (ERT) 函数体可以用{} val add
给 Databend 添加 Scalar 函数 | 函数开发系例一
最新发布
Databend的博客
02-08 395
因为它是被 [src/query/codegen/src/writes/register.rs](https://github.com/datafuselabs/databend/blob/2aec38605eebb7f0e1717f7f54ec52ae0f2e530b/src/query/codegen/src/writes/register.rs) 生成的。以实现 `select 1+2` 的加法函数为例子，`+` 被转换为 Plus，而函数名需要小写，因此我们在注册时函数名使用 `plus`。
Flink-函数 | 用户自定义函数（UDF）标量函数 | 表函数 | 聚合函数 | 表聚合函数
SmallScorpion
06-01 1422
GitHub https://github.com/SmallScorpion/flink-tutorial.git 函数（Functions） 用户自定义函数（UDF） 用户定义函数（User-defined Functions，UDF）是一个重要的特性，它们显著地扩展了查询的表达能力,一些系统内置函数无法解决的需求，我们可以用UDF来自定义实现。 在大多数情况下，用户定义的函数必须先注册，然后才能在查询中使用 函数通过调用 registerFunction（）方法在 TableEnvironmen
FlinkSQL-自定义标量函数ScalarFunction
qq884121435的博客
07-29 1704
FlinkSQL-自定义标量函数ScalarFunction什么是标量函数标量函数的实现代码实现测试用例 什么是标量函数 Scalar Funcion类似于Map，一对一，输入一行数据输出一行数据 用户定义的标量函数，可以将0、1或多个标量值，映射到新的标量值 为了定义标量函数，必须在 org.apache.flink.table.functions 中扩展基类Scalar Function，并实现（一个或多个）求值方法 标量函数的行为由求值方法决定 标量函数的实现 ScalarFunction 要
【Flink Scala】Table API 自定义函数
HR的博客
04-03 2841
自定义函数内置函数UDF注册用户自定义函数 UDF标量函数表函数聚合函数表聚合函数 Flink Table和 SQL内置了很多 SQL 中支持的函数；如果有无法满足的需要，则可以实 现用户自定义的函数（UDF）来解决。 内置函数 Flink Table API 和 SQL为用户提供了一组用于数据转换的内置函数。SQL中支持的很多 函数，Table API和SQL都已经做了实现，其它还在快速开发扩展中。 以下是一些典型函数的举例 比较函数 SQL Table API value1 = val.
Presto 标量函数注册和调用过程简述
eagooqi的专栏
11-10 432
上一篇文章已经介绍过如何进行函数开发，本文主要讲述标量函数（Scalar Function）实现之后，是如何在Presto内部进行注册和被调用的。主要讲述标量函数是因为：三类函数的注册和调用过程略有不同，而实际查询中调用最多的是标量函数。 标量函数注册 函数在能够调用之前，首先要进行注册，上一篇文章已经介绍过函数注册的方法，那么函数在注册时究竟注册了哪些信息呢？函数注册实际上是维护FunctinoRegistry类中的一个 MultiMap，Key 为函数的限定名(QualifiedName，可以简单地
Flink自定义函数
阿甘兄
03-28 3354
文章目录01 引言02 如何注册自定义函数？03 自定义函数分类3.1 Scalar Function3.1.1 Scalar Function如何实现？3.1.2 Scalar Function举例3.1.3 特殊返回值处理3.2 Table Function3.2.1 Table Function如何实现？3.2.2 Table Function举例3.3 Aggregation Function3.3.1 Aggregation Function如何实现？3.3.2 Aggregation
scalar 函数的使用
热门推荐
xiaomifeng287的专栏
12-14 1万+
#!/user/bin/perl @rocks=qw( talc quartz jade obsidian); print "How many rocks do you have ?\n"; print "i have ",@rocks," rocks!\n"; print "i have ",scalar @rocks , " rocks!\n"; # print @rocks+1-1; #s
聊聊flink Table的ScalarFunction
weixin_34194359的博客
02-10 1076
序 本文主要研究一下flink Table的ScalarFunction 实例 public class HashCode extends ScalarFunction { private int factor = 0; @Override public void open(FunctionContext co...
SQL函数(二) --- Scalar
Lamitry的博客
01-31 2233
SQL Scalar 函数基于输入值，返回一个单一的值。 SQL UCASE 函数 SQL LCASE 函数 SQL MID 函数 SQL LEN 函数 SQL ROUND 函数 SQL NOW 函数 SQL FORMAT 函数 演示数据库： person表： SQL UCASE() 函数 UCASE() 函数把字段的值转换为大写。 SQL UCASE()
[14]-Function
hjw199089的博客
12-24 603
Functions 原文 https://prestodb.io/docs/current/develop/functions.html   Plugin Implementation 为实现新的function，必须写一个plugin，返回从getFunctions()返回更多的函数: public class ExampleFunctionsPlugin impl...
Flink Table API & SQL：实操时间窗口与时态表连接
总结来说，本文深入讨论了如何在Flink的Table API和SQL中使用不同的连接方法来处理动态表，强调了时间窗口和时态表函数的重要性，并指出它们在性能优化和数据处理准确性的平衡中的作用。理解这些概念对于有效利用...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

@SmartSi

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值