hive查询结果转为json格式

最新推荐文章于 2024-08-06 09:30:21 发布

随风奔跑之水

最新推荐文章于 2024-08-06 09:30:21 发布

阅读量8.2k

点赞数 1

分类专栏： Hadoop

本文链接：https://blog.csdn.net/weixin_40873462/article/details/98175571

版权

本文介绍了在Hive中如何处理JSON格式的数据，包括解析含有JSON字段的表数据以及将Hive查询结果转换为JSON格式。对于问题1，讲解了解析JSON格式字段的策略；对于问题2，详细阐述了将Hive ETL操作后的数据存储为JSON格式的方法。

摘要由CSDN通过智能技术生成

问题描述：1、hive中表数据字段为json格式，如何解析数据及处理数据？

2、hive中如何将etl处理后的数据存为json格式？

1、解析hive中表数据字段为json格式的数据

app_name,container,platform,get_json_object(biz,'$.desc') ===> pv

-- 传统计算，给定参数值：
SELECT
 count(distinct distinct_id) UV,   -- 2
 count(distinct_id) PV      -- 61
from ods.t_user_behavior 
WHERE get_json_object(biz,'$.desc') = '点击-新运营位'
and platform = "miniProgram"
and container = "WX_MiniApp"
and app_name = "xxxxx小程序"
and get_json_object(biz,'$.action') is not null;

--------------------
-- 自助化计算：
-- 给定计算维度：
-- 1、常规维度：app_name,container,platform,
-- 2、业务维度：get_json_object(biz,'$.desc')
-- 3、指标：pv
-- 步骤一：根据设定的维度计算所有情况（T+1）：
SELECT
app_name,
platform,
container,
get_json_object(biz,'$.desc') desc,
count(di