sql：数组拆分，行转列，字段提取

最新推荐文章于 2022-01-06 17:26:15 发布

努力学好数据分析

最新推荐文章于 2022-01-06 17:26:15 发布

阅读量1.1w

点赞数 2

分类专栏： sql 复杂函数文章标签： sql hive 大数据

本文链接：https://blog.csdn.net/yyh364583315/article/details/109000438

版权

博客探讨了如何在Hive、Presto和MaxCompute中处理数组数据，通过split、lateral view explode、get_json_object等函数将数组拆分并提取特定字段。问题背景是一个列中存储的数据格式需要被转换，方法包括使用数组拆分函数配合行列转换来达到目标。

摘要由CSDN通过智能技术生成

hive、presto、maxcompute不同函数的用法大同小异，可互相参考

sql常用函数参考阿里云官方文档：maxcompute函数概述

问题背景

某一列数据格式为： [{"word":"三宅一生"},{"word":"三宅一生包"},{"word":"三宅一生鞋"}]
需要提取出 word对应的单词，且转为多行.

方法

数组拆分 split 函数 + lateral view explode + get_json_object

注意 lateral veiw explode 的列名不能与 as 后重命名的列名相同.

with t0 as (
select split(substr

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

努力学好数据分析

关注关注

2
点赞
踩
15

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

SQL进阶技巧：如何对多个字段中字符串内容进行一一对应？

石榴姐yyds

07-24

207

本文给出了一种如何成对提取字符串内容技巧和方法，主要利用posexplode()函数进行求解，利用索引值相等提取出对应的字段内容。我们知道表是一种二维结构，我们既要关注行的变化也要关注列的变化。如上数据不出意外的话产生的条数：2*2*2+3*3*2+3*3*2=44。探索：如何计算posexplode()函数关联后产生的数据条数。如果是行的同步采用加法，列的不同采用乘法，利用排列组合原理。对于本题产生的数据条数为：2^2+3^2=13条。总共产生的数据条数：2*2*2+3*3*2=26。

HiveSql一天一个小技巧：如何成对提取字符串内容

石榴姐yyds

05-04

1735

本文给出了一种如何成对提取字符串内容技巧和方法，主要利用posexplode()函数进行求解，利用索引值相等提取出对应的字段内容。

参与评论您还未登录，请先登录后发表或查看评论

sql逗号分开的指定列，分成多行

TianGaojie123abc的专栏

11-24

3023

if object_id('tempdb.dbo.#tb') is not null drop table #tb go create table #tb (id int,price varchar(100),customer int,cinvcode int) insert into #tb select 1,'1.5',4,2 union all select 2,'3.5,6',

SQL|一个字段存放在多个数组如何进行拆（替换sql数据源为hive)

qq_41011449的博客

05-22

3344

nvl函数 LATERAL VIEW explode 必须上一个表完成之后重新select 重命名必须用as LATERAL VIEW json_tuple 必须是}不能是[ regexp_replace

sql对数组元素切分_快速排序的一种优化（三项切分的快速排序算法）

weixin_36301639的博客

01-16

436

首先，先哔哔下什么是快速排序算法。快速排序由C. A. R. Hoare在1962年提出。基本思想是使一串无序数据，选取其中一条数据，使该数据左边放置全部都是小于该数据的数据，使右边放置大于该数据的数据。这样便完成一趟快速排序，然后可以针对该串数据左边进行下一趟快速排序，右边也进行一趟，这样一次次的进行递归操作，便可得到有序的数据序列。快速排序主要采用的是分治思想。具体算法如下：public st...

sql 拆分函数，相当于程序里面得数组

net744933700的博客

01-06

790

---------------------------可以拆分成多少个--------------- create FUNCTION [dbo].[Get_StrArrayLength] ( @str varchar(5000) , --要分割的字符串 @split varchar(10) --分隔符号 ) RETURNS int AS BEGIN DECLARE @location INT DECLARE @start INT DECLARE @le...

sql对数组元素切分_「Leetcode」1043.分隔数组以得到最大和

weixin_32466193的博客

01-25

643

DescriptionGiven an integer array A, you partition the array into (contiguous) subarrays of length at most K. After partitioning, each subarray has their values changed to become the maximum value of ...

sql对数组元素切分_超详细！详解一道高频算法题：数组中的第 K 个最大元素

weixin_42345036的博客

01-15

837

来自公众号：五分钟学算法今天分享的题目来源于 LeetCode 第 215 号问题，是面试中的高频考题。题目描述在未排序的数组中找到第 k 个最大的元素。请注意，你需要找的是数组排序后的第 k 个最大的元素，而不是第 k 个不同的元素。示例 1:输入:[3,2,1,5,6,4]和k=2输出:5示例 2:输入:[3,2,3,1,2,4,5,5,6]和k=4输出:...

sql数据库 "ID":4,"项目名称":"测试","价格":20.0},{"ID":5,"项目名称":"测试2","价格":10.0}],数组拆分，行转列，字段提取

最新发布

10-05

您可以使用SQL语句进行数组拆分、行转列和字段提取操作。假设您的数据表名为`项目表`，请参考以下示例： 1. 数组拆分：如果您的数据表中的某个字段存储了数组数据，可以使用`CROSS APPLY`和`STRING_SPLIT`函数来...

hive读取json数组并转换成多行（列转行）

iilegend的博客

03-03

5275

背景：在读取hive表中某一些字段的时候，有的json字符串其中会包括数组，那么想要读取这个数组并且转换为多行该怎么操作那？操作： 1、数据举例： ["[{\"pet_skill_avg_level\":0,\"pet_guard_star\":0,\"pet_type\":0,\"pet_step\":0,\"pet_skill_num\":0,\"pet_adv_score\":0,\"p...

sqlserver 分解数组

03-04

分解数组的sqlserver的t-sql语句

SQL数据库分割拆分工具

04-18

SQL数据库分割拆分工具，体积小，非常好用，可以把大SQL文件自动分割成不同大小文件，方便导入数据库，文件大小可以自己设定，一般虚拟主机数据库导入限制2-8MB，几百MB数据库没法一次导入，可以用这个分割成NN个，然后一个个导入

sql利用union all行转列

02-06

sql利用union all行转列利用最原始的方法进行行转列 简单明了

SQL Server中通过拆分字符串来模拟数组

苟安廷的专栏

03-31

4423

数组是非常方便的一种数据结构,但在sql server中却不被支持,故编写储存过程时非常不便,我们可以将多个字符串用特定的连接字符连接起来作为参数,需要时再拆开,从而达到模拟字符串的目的,实现方法是建一个表值函数,返回拆分后的情况,如下:-- =============================================-- Author: 苟安廷-- Create date:

SQL公用方法-根据字符串拆分成数组

蚂蚁筑巢

08-07

4281

--根据字符串拆分成数组 --按指定符号分割字符串，返回分割后的元素个数 create function Get_StrArrayLength ( @str varchar(5000), --要分割的字符串 @split varchar(10) --分隔符号 ) returns int as begin declare @location int

【*SQL】关于SQL数组arrar行转列

Icesj0280的博客

01-07

2487

1.spark SQL的数组行转列 LATERAL VIEW explode(entities) a as entities_new 2.SQL的数组行转列 -- 2.1 cross join unnest(数组字段名称) as "新的字段名称" 例如，如下将array类型的数组vtags进行展开，得到新的字段vtag： select vtag,count(doc,id) from dw.dim_doc_info cross join unnest(v...

mssql将字符串拆分为数组

不懂love的博客

10-25

3109

Create function [dbo].[split](@SourceSql varchar(max),@StrSeprate varchar(10))returns @temp table(line varchar(max))asbegin declare @i int set @SourceSql = rtrim(ltrim(@SourceSql)) set @i = c

SQL自定义函数split 将数组(分隔字符串)返回阵列（表）

bao500600的博客

12-20

140

CreateFUNCTION[dbo].[SplitToTable](@SplitStringnvarchar(max),@Separatornvarchar(10)='')RETURNS@SplitStringsTableTABLE([id]intidentity(1,1),[value]nvarchar(max))ASBEGI...

sql中将字符串分割成数组

weixin_39567690的博客

08-01

8316

实现这个功能必须创建自定义函数代码如下： SET ANSI_NULLS ON GO SET QUOTED_IDENTIFIER ON GO CREATE function [dbo].[f_split](@c varchar(2000),@split varchar(2)) returns @t table(col varchar(20)) as begin ...