Hive split_part函数取最后一部分

最新推荐文章于 2023-04-04 15:53:37 发布
最新推荐文章于 2023-04-04 15:53:37 发布
阅读量5.7k 收藏 4
点赞数
分类专栏： 数据仓库 文章标签： hive
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_43118086/article/details/116589908
版权 
Hive split_part函数取最后一部分
业务生产中字段可能由不能部分拼接而成，各个部分在同一字段不一定都有，因此要取最后一部分可以用如下方法
SPLIT_PART(rowkey,'_',LENGTH(regexp_replace(rowkey,'_','__')) - LENGTH(rowkey) + 1)
Dylan ZhaoHT
关注
  • 0
    点赞
  • 踩
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
大数据学习（十）hive函数split、explode、lateral view用法
weixin_44702289的博客
09-13 3621
hive函数
hive SQL 技巧积累
格格颜心
03-16 794
一、row_number() over(parttition by order by) 里分区字段可以是多个。 二、left join的字段可以是两个，其中一个可以是小于不一定都要等于。比如用两个表的时间做筛选，在主键id相同的情况下，可以以一个表的时间做基点，另一个表的时间小于他的做聚合，然后选出最小于他的最大时间。 三、多行聚合拼接:按照id聚合group by ，将需要选择合并的字段concat起来，作为你想要存放的字段。 1.c是去掉首尾的拼接符号，concat是普通拼接。 2.collec
hive切分字段，hive函数：正则函数regexp_replace
全能小孩
09-26 2046
SELECT case when length(split_part(regexp_replace(txtlg,’’,’-’),’-’,4))>0 then split_part(regexp_replace(txtlg,’’,’-’),’-’,4) when length(split_part(regexp_replace(txtlg,’’,’-’),’-’,3))>0 then s...
sql常用记录（hive,impala,mysql）
八碗清水的博客
11-18 616
1.数据去重 distinct group by row_number()over() 2.分组排序 hive colomn1. colomn2 2020-11-05 a 2020-11-06 b 2020-11-07 a 2020-11-08 c 2020-11-09 b select colomn1,colomn2,row_number() over(partition by colomn2 order by colomn1 ) rank from tmp.tmp1177
split_part()切割函数
热门推荐
rosejeck的博客
01-21 5万+
Postgresql里面内置了很多的实用函数，下面介绍切割函数: 介绍： split_part(string text, delimiter text, field int) Split string on delimiter and return the given field (counting from one) 1.找到name='9-76’行： 2.使用split_part()切割函数...
hive函数 -- split 字符串分割函数
谦卑t
02-17 5053
hive字符串分割函数 split(str, regex) - Splits str around occurances that match regex Time taken: 0.769 seconds, Fetched: 1 row(s) 返回值为一个数组 a.基本用法： 例1： split('a,b,c,d',',') 得到的结果： ["a","b","c","d"]   ...
hive高级分析函数与优化.rar_hive_hive 函数优化_hive 分析 大数据_hive高级优化_oldwlc
09-23
大数据分析工具 hive 高级分析函数的使用与优化，笔记整理！
Hive_JDBC.zip_hive java_hive jdbc_hive jdbc pom_java hive_maven连
09-23
hive JDBC连接实例 maven工程
Hive安装讲义(linux_hive windows_mysql)
09-14
需要添加HIVE_HOME、HADOOP_HOME和JAVA_HOME变量，并将其添加到PATH变量中。 6. Hive配置文件修改 Hive的配置文件需要根据实际情况进行修改。需要修改hive-config.sh文件，添加JAVA_HOME、HIVE_HOME和HADOOP_HOME...
Hive安装讲义(linux_hive linux_mysql)
09-14
Hive安装讲义(linux_hive linux_mysql) Hive安装讲义中涵盖了Hive的安装过程，包括Hadoop和MySQL的安装。下面是从给定的文件中生成的相关知识点： 一、Hadoop 安装 * Hadoop 安装是Hive 运行环境的前提条件 * ...
hive1_2_1jars.zip
10-14
spark3读hive1，配置spark.sql.hive.metastore.jars
impala不支持split函数(hive支持)
Allenzyg的博客
04-04 1606
场景：查看交接文档讲解，其中有一句话勾起了我的学习欲望，话是这么说的：“此逻辑有split函数impala不支持所以用的hive去执行”。结论：比较两段sql，hive语句比impala语句短、简洁，但impala执行时间比hive执行快，是hive执行速度的约210倍。因为这一列字段值不是规则统一的，有的是一个"_"，有的是两个"_"实践：impala不支持split函数，但是impala支持split_part函数。思考：难道impala不能使用其他函数替代吗？只能使用hive执行吗？
Hive中split函数用法，切分多个分隔符分割字符串
是故事啊~关注我~
11-22 3504
在处理数据时，发现存入的字段数据分隔符多种多样，包含了英文逗号，中文逗号，中文顿号等奇葩符号混杂在数据中，可以使用split函数进行切分。
Postgresql之split_part()切割函数，取最后一部分
安冉
06-08 2万+
split_part(string text, delimiter text2, field int) text要切割的字段； text2按照什么形式切割 int截取的位置 ps: text=“name.cn” split_part(text,’.’,1) 结果： name text=“name.cn” split_part(text,’.’,2) 结果： cn text=“name.cn.com” split_part(text,’.’,3) 结果： com split_part(field, '-.
Hive split分割后获取最后一段
weixin_30301183的博客
08-10 1万+
----------------------------------------- 如果只看解决方法，直接看最后。。。 ----------------------------------------- 今儿碰到了这么种情况，表中有一个字段，格式是这样的 a\b\c a\b a\b\c\d 是根据符号 '\' 隔开的，现在需要取每个的最后一段，先做个split,字段名称为TX...
Hive 获取数组最后一个元素
BITDDD小栈
01-23 1万+
引言: 通过split分割当前字段获取数组，并得到最后一个索引的元素，通过hive怎么实现，下面通过不同方法一一验证可行性。 字段样式shopList : productA,productB,productC 表名 shopTable : shopListTable 一.通过 split + size 获取 - 失败 hive -e " select split(shopList,',')[size(split(shopList,','))-1] from shopTable.....
hive中分区取TOPN
litlit023的专栏
04-07 1574
目录 0. 概述 1. 准备数据和表结构 2. 几种不同分组取TOPN情况说明 2.1 分组-组内排序 2.2 分区-组内排序-取topN 2.3 不分组-只对某个字段排序 2.4 rank() over() 的使用 2.5 dense_rank()的使用 3. 参考资料 0. 概述 hive中分组取topN，有3中类型的函数可以用： row_number() over (partition by col01 order by col02 desc ) rank() over (p
split切割函数在hive中的应用
不负青春、不负卿
05-14 2174
split函数是编程语言中使用的一种函数名称，它是指返回一个下标从零开始的一维数组，split函数包含指定数目的子字符串。 split 切割函数 语法: split(string str, string pat) 返回值: array 说明: 按照pat字符串分割str，会返回分割后的字符串数组 举例： 1.基本用法 hive> select split(‘abcdef’, ‘c’) from test; [“ab”, “def”] 2.截取字符串中的某个值 hive> select split
hivesql 的split_part函数
最新发布
06-28
### 回答1： split_part函数是HiveQL中的字符串函数之一，用于将字符串按照指定的分隔符分割成多个子字符串，并返回指定位置的子字符串。 该函数的语法如下： split_part(str, delimiter, index) 其中，str为要分割的字符串，delimiter为分隔符，index为要返回的子字符串的位置。 例如，假设有一个字符串"hello,world,how,are,you"，要将其按照逗号分隔成多个子字符串，并返回第三个子字符串，可以使用如下语句： SELECT split_part("hello,world,how,are,you", ",", 3); 执行结果为"how"。 需要注意的是，如果指定的位置超出了分割后的子字符串数量，函数将返回空字符串。 ### 回答2： HiveSQL是一种SQL-on-Hadoop的分析工具，提供了许多类似传统关系型数据库中SQL语言的函数。其中，split_part函数可以用来将一个字符串按指定的分隔符进行分割，并返回分割后的指定位置的字符串。 split_part函数的语法如下： split_part(str, delimiter, index) 其中，str表示要被分割的字符串，delimiter表示分隔符，index表示要返回的分割后的字符串在结果中的位置，从1开始计数。如果index超出了分割后的字符串个数，则返回NULL。 例如，如果我们要将字符串“hello,world,hi”按逗号进行分割，并返回第二个分割后的字符串，则可以使用如下语句： select split_part('hello,world,hi', ',', 2); 执行该语句后，返回的结果是“world”。 需要注意的是，split_part函数只能对字符串进行分割，如果要对其他类型的数据进行操作，需要先将其转换为字符串。 总之，split_part函数是HiveSQL中非常实用的函数之一，可以帮助我们快速地实现数据处理需求。 ### 回答3： 在 HiveSQL 中，split_part 函数是一种非常常用的字符串函数。它的主要作用是将一个字符串分割成多个子字符串，并返回其中的某个子字符串。具体来说，split_part 函数可以将一个字符串按照指定的分隔符进行分割，并返回其中的第 N 个子字符串。该函数的语法格式如下： ```sql split_part(str, delimiter, N) ``` 其中，str 表示要分割的字符串，delimiter 表示分隔符，N 表示要返回的子字符串的位置。例如，如果要将字符串 "hello,world,how,are,you" 按照 "," 进行分割，并返回其中的第 3 个子字符串，则可以使用如下的 HiveSQL 语句： ```sql select split_part('hello,world,how,are,you', ',', 3); ``` 执行该语句后，将会返回字符串 "how"。 需要注意的是，如果要返回的子字符串不存在，则该函数将会返回空字符串。同时，如果分割后得到的子字符串不足 N 个，则同样会返回空字符串。因此，在使用 split_part 函数时，一定要确保 N 的取值范围是合法的，否则可能会出现错误的结果。 总的来说，split_part 函数是一种非常方便的字符串处理函数，在日常的 HiveSQL 开发中，它能够帮助我们快速地从一个字符串中提取所需的子字符串，从而大大提高代码的可读性和易用性。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值