Hive处理Json相关数据

heheha_zj

已于 2022-04-12 11:28:11 修改

阅读量1.3k

点赞数

CC 4.0 BY-SA版权

分类专栏：数据仓库文章标签： hive 数据仓库

于 2022-04-12 11:25:40 首次发布

本文链接：https://blog.csdn.net/hello_heheha/article/details/124119741

数据仓库专栏收录该内容

11 篇文章

订阅专栏

本文介绍了Hive中处理JSON数据的函数，如get_json_object和json_tuple，用于从复杂JSON结构中提取字段和元组。同时展示了如何处理JSON数组，并提供了一种使用正则表达式和explode函数拆分JSON数组的方法。此外，还提及了UDTF在处理JSON数据时的作用。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

get_json_object 函数

此函数为常用函数，可以取出json数据中的相应的字段的数值

-- get_json_object(json,'$.name') as name
select get_json_object('{"name":"zj","age":25}','$.name') as name ,get_json_object('{"name":"zj","age":25}','$.age') as age;

select get_json_object('{"name":"zj","age":25,"add":{"provinces":"河南","city":"周口"}}','$.add.city');

json_tuple 函数

select json_tuple('{"name":"zj","age":25}','name','age') ;

select b.c0 as name,b.c1 as age from (select json_tuple('{"name":"zj","age":25}','name','age'))b ;

Json 数组

-- 相当于UDTF “一进多出”
SELECT explode(split(regexp_replace(regexp_replace('[{"website":"baidu.com","name":"百度"},{"website":"google.com","name":"谷歌"}]', '\\[|\\]',''),'\\}\\,\\{','\\}\\;\\{'),'\\;'));
-- 说明:  
--     第一次替换：将'['或者']'替换为''
-- 	   第二次替换：将'},{' 替换为'};{'
--     切割：按照';'进行切割