Presto开发udf自定义函数（标量函数）

最新推荐文章于 2024-08-06 03:14:41 发布
最新推荐文章于 2024-08-06 03:14:41 发布
阅读量3k 收藏 2
点赞数
分类专栏： presto 文章标签： plugin prestoudf
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lg_49/article/details/85098897
版权
本文介绍了如何在Presto中开发用户定义的标量函数（UDF）。与Hive不同，Presto的UDF以插件形式存在。详细步骤包括：添加依赖并构建插件，编写静态方法形式的UDF，注册函数到插件，打包并上传到Presto插件目录，最后重启服务并在Presto客户端验证函数是否可用。
摘要由CSDN通过智能技术生成

前言：在 Presto 中，函数大体分为三种：scalar，aggregation 和 window 类型。 scalar 就是标量函数，简单来说就是 Java 中的一个静态方法，本身没有任何状态。下面介绍的就是scalar标量函数

相比hive的udf开发，presto的udf并不叫做自定义函数，在presto中的所有的方法都是以插件（plugin）的方式加载到presto中的，下面介绍一下自定义插件开发过程。

1.添加相关的依赖

dependencies

<dependency>

    <groupId>com.facebook.presto</groupId>

    <artifactId>presto-spi</artifactId>

    <version>0.210</version>

    <scope>provided</scope>

</dependency>

build plugin

<plugin>
最低0.47元/天 解锁文章
赞神天降
关注
专栏目录
presto / trino plugin（自定义UDF函数）开发指南
赵英超的博客
03-12 1488
ScalarFunction("to_upper") // 固定参数，表示函数名的意思，也就我们在使用Presto的时候用的函数名@Description("我的大小写转换函数") // 函数的注释@SqlType(StandardTypes.VARCHAR) // 表示数据类型// 将获取到的数据转换大写// 在转换后的数据放入内存返回实现presto函数的开发，使用新建maven工程的方式，要比在presto代码下新建子工程的方式简单的多，推荐大家使用方法二。
【presto】方法二：presto实现自定义UDF函数
Mrerlou的博客
08-30 806
前言： 接上文：https://blog.csdn.net/Mrerlou/article/details/119995646 之前编写presto函数是在presto代码工程下新建模块，然后进行自定义函数开发。 但是使用这种方法，在maven 编译时会遇到很多的报错，大多是格式文件，如头文件没有Licensed信息，有多个换行，文件结尾没有换行，文件结尾有多个空行，诸如此类的格式文件搞的人很头疼。 虽然最后成功编译，但是感觉这种方法，比较麻烦。 然后网上有基于新建项目的方式来完成函数开发的方法，这种测试后
presto】时间函数汇总【presto】时间函数汇总
最新发布
weixin_34626779的博客
08-06 608
【presto】时间函数汇总 目录获取当前日期：current_date()获取当前时间：current_time()获取当前日期和时间：current_timestamp()获取当前日期和时间：now()获取当前时区：current_timezone()字符串转时间戳：cast(string, timestamp)字符串...
Presto UDF开发
逆天骚年的博客
03-15 541
版本说明 Presto 0.227 详细步骤 创建Maven工程，在pom文件中引入presto-spi和guava依赖，指定打包插件 创建类并编写UDF函数 Presto 中函数分为三种：scalar，aggregation 和 window 。此处以Nginx日志中时间字段进行标准格式化为例，使用的是scalar即标量函数，它类似于Hive中的UDF。 @ScalarFunction(“format_nginx_time”) 该注解用于指定函数名称，即在Presto客户端查询时使用的函
Presto UDF自定义函数开发
weixin_34278190的博客
02-09 357
为什么80%的码农都做不了架构师？>>> ...
【presto】方法一：presto实现自定义UDF函数，及遇到的问题
Mrerlou的博客
08-30 2154
一、前言： presto较hive的函数来说比较少，所以为了实现逻辑需要写很复杂的sql逻辑来实现业务。 这里在进行presto 函数开发的时候遇到了很多的问题，以大小写转换为例。 写个插件，并且将遇到的问题整理并记录一下。 二、环境准备： 1. 下载presto代码。 下载与线上生产环境presto版本一致的代码，导入idea。 2. 新建一个module 新建一个module命名为demo,然后groupId最好命名为com.facebook.presto。 3. pom文件 <?xml ver
Presto自定义函数
m0_50997249的博客
07-04 542
2、添加resources 创建目录META-INF/services创建文件 com.facebook.presto.spi.Plugin
presto 自定义标量udf
mapeng765441650的博客
04-01 436
在工作中，经常需要用到一些自定义函数，本文将以工作用用到的解密函数来做一个udf开发； 本问文旨在做记录. 1. pom文件 <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3....
presto-udf:PrestoSQL https的UDF（用户定义函数）
05-26
标量函数 功能 退货类型 参数类型 描述 用法 第一天 日期 日期 一个月的第一天 首日（当前日期） 最后一天 日期 日期 一个月的最后一天 last_day（current_date） to_datetime 时间戳记 日期，varchar 结合两个...
Presto UDF原理与代码实例讲解
AI架构设计之禅
06-11 645
Presto UDF原理与代码实例讲解 1. 背景介绍 1.1 Presto简介 Presto是由Facebook开发的一个开源的分布式SQL查询引擎,用于交互式查询海量数据。它支持标准的ANSI SQL,可以对接多种数据源,如Hi
java8看不到源码-presto-third-functions:一些有用的presto自定义udf函数
06-04
java8 看不到源码第三功能 介绍 一些自定义的 presto 功能 建造 需要 Java 8 Update 60 或更高版本 (8u60+) Maven 3.3.9+（用于构建） cd ${project_home} mvn clean package 如果你想跳过单元测试，请运行： mvn clean package -DskipTests 它将在目标目录中生成 presto-third-functions-{version}-shaded.jar。 您也可以直接从 . 版本说明 版本 描述 0.2.0 支持presto-0.147 ~ presto-0.149 0.3.0 支持presto-0.150 ~ presto-0.151 0.4.0 支持presto-0.152 0.5.0 支持presto-0.153 ~ presto-0.166 0.5.1 支持presto-0.167 ~ presto-0.168 职能 1. 字符串函数 功能 描述 拼音（字符串）-> 字符串 将中文转换为拼音 md5（字符串）-> 字符串 md5 哈希 sha256（字符串）-> 字符串 sh
presto自定义函数(UDF
HANG.NIAN
03-09 3343
创建mv项目 添加依赖 <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.ap...
presto自定义UDF函数
weixin_43315211的博客
02-22 3104
最近在使用presto进行异步查询，但在本地数据库中的函数无法在presto中进行调用，后了解到presto可以直接书写UDF函数，非常方便。 新建一个mvn工程：pom.xml如下 &lt;?xml version="1.0" encoding="UTF-8"?&gt; &lt;project xmlns="http://maven.apache.org/POM/4.0.0" ...
【Presto开发】01 自定义函数
baidu_34170531的博客
07-10 1076
目录 1. 类型 1.1. 原生容器类型（Native container type） 2. 函数开发 2.1. 注解 2.1.1. 注解使用 2.2. 自定义标量函数 2.3. 聚合函数 2.3.1. 概述 2.3.2. 2.4. 窗口函数 2.4.1. 概述 2.5. 函数注册 2.5.1. 内置函数注册 2.5.2. 插件函数注册 1. 类型 1.1. 原生容器类型（Native container type） presto架构的类型 框架会自动将 SQ
Presto-自定义UDF实例(标量函数)
Levin的技术工厂
11-08 1469
背景介绍 这篇文章主要说明一下关于Presto中UDF的开发。这个实例中的自定方法的逻辑很简单,只是传如一个字符串,然后在字符串前面拼装一个Hello,只是为了说明如何去自己实现一个Scalar Function。 下面是具体步骤及代码 1.创建Maven工程 pom.xml &lt;?xml version="1.0" encoding="UTF-8"?&gt; &lt;project xmln...
Presto UDF开发实战
刘伊凡2.0
10-15 623
待加内容
presto sql 返回函数
08-24
你可以在 Presto 中创建和使用自定义函数来扩展其功能。要返回函数，可以按照以下步骤操作： 1. 首先，你需要在 Presto 中创建一个自定义函数。这可以通过使用 Presto 的扩展机制来完成。你可以编写自己的函数实现...
评论 6
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值