hiveSQL之json多层嵌套解析的方法

最新推荐文章于 2024-08-18 11:54:36 发布

小小白要努力成长啊

最新推荐文章于 2024-08-18 11:54:36 发布

阅读量3.4k

点赞数 1

分类专栏：数据库

本文链接：https://blog.csdn.net/weixin_43436824/article/details/107717275

版权

数据库专栏收录该内容

8 篇文章 0 订阅

订阅专栏

SELECT id
          ,get_json_object(get_json_object(operate_content,'$.finishTime'),'$.n')
          ,get_json_object(operate_content,'$.finishTime.n')
FROM dw.dw_plat_sinan_ticket_operate_record_da 
WHERE pt='20200730000000' 
and id='1112167'

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

小小白要努力成长啊

关注关注

1
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

专栏目录

Spark/Hive如何解析嵌套Json

someInNeed的博客

02-25

2296

Hive解析嵌套Json用get_json_object 数据是string类型，拆分的时候get_json_object的逗号后要加个空格 {"KdProjCode":"A20160518015NB","DTjType":"调价","xmlns:xsi":"http://www.w3.org/2001/XMLSchema-instance","PriceHzInfo":{"Item":{"HzAmountAfter":1.0190920349E10,"HzAmountBefore":1.019080

解析嵌套的json方法：GET_JSON_OBJECT()

m0_63526768的博客

08-16

2839

利用hive函数get_json_object(param1,param2) 解析复杂的嵌套json数据

参与评论您还未登录，请先登录后发表或查看评论

HiveSQL：提取json串内容——get_json_oject和json_tuple

热门推荐

止鱼

02-14

1万+

应用场景：使用Hive对日志信息进行查询分解，log里面记录的是json形式的数据： {"logid":"5d40e1af-19f7-4aad-af8f-c7247e322e5c","souc":"4","devi":"OPPO R7sm","sys":"22,5.1.1","dname":"Dalvik/2.1.0 (Linux; U; Android 5.1.1; OPPO R7sm Bu

MSSQL解析多层嵌套json文件

weixin_44519072的博客

07-04

415

"cuisineName": "鱼香肉丝","cuisineName": "红烧茄子","cuisineName": "鱼香肉丝","cuisineName": "红烧茄子","cuisineName": "鱼香肉丝","cuisineName": "红烧茄子","cuisineName": "鱼香肉丝","cuisineName": "红烧茄子","cuisineName": "鱼香肉丝","cuisineName": "红烧茄子","cuisineName": "鱼香肉丝",

Hive如何解析复杂的json字符串嵌套结构

weixin_46429290的博客

03-01

4170

内容目录Hive解析json字符串一、json格式二、Hive解析json Hive解析json字符串 json类似于python的字典，类似于key-value格式，但是可以实现嵌套的数据结构一、json格式 json简单格式： { "name":"Tom", "age":20, "sex":"male" } 上面是简单的json格式，还可以有复杂的嵌套格式 { "name":"Tom", "age":20, "sex":"male", "friend":["Jerry",

HIVE 解析json和jsonarray

wertd_fgegg的博客

09-22

1073

hive 解析json和jsonarray

hive中json格式字段解析及map使用

Airstudy的博客

11-07

4291

如果hive表中有扩展字段，那么扩展字段格式最常见的就是json格式，所以如何解析json字符串相对繁琐（虽然没啥技术????）用到的hive功能函数有:get_json_object、explode、split、regexp_replace、regexp_extract -- json字段样式：[{'a':1, 'b':2}, {'a':3, 'b':4}], 字段名称为json_str select col_id, get_json_object(json_item, '$.a') as new

Hive Sql中六种面试题型总结

lightupworld的博客

09-14

1万+

Hive面试/经典练习题一、N日留存1.思路分析二、连续登陆1.数据准备2.思路分析三、 Top N 一、N日留存 1.思路分析按天留存率计算就是指用户在首日新增后，在接下来的后推第N天活跃情况，用后推第N天活跃的用户 / 首日新增用户。就得到后推第N天的新增用户留存率。留存率计算案例 1月1日，新增用户200人; 次日留存：第2天，1月2日，这200人里面有100人活跃，则次日留存率为： 100 / 200 = 50% 2日留存：第3天，1月3日;这200名新

hive之Json解析(普通Json和Json数组)

张伟的专栏

11-18

1468

一、数据准备现准备原始json数据(test.json)如下： {"movie":"1193","rate":"5","timeStamp":"978300760","uid":"1"} {"movie":"661","rate":"3","timeStamp":"978302109","uid":"1"} {"movie":"914","rate":"3","timeStamp":"978301968","uid":"1"} {"movie":"3408","rate":"4","timeStam

Hive解析嵌套JSON数组

weixin_42466752的博客

10-25

2146

hive解析json数组

Hive框架(三) —— 解析json数组

weixin_40170142的博客

05-02

1755

解析json数组的函数通常有 get_json_object() json_tuple() split() explode() regexp_replace() lateral view get_json_object() 一次只能解析一个key，当需要解析多个字段时，不好用于是使用 json_tuple() 函数，结合lateral view() 使用一个解析json数组的思路：对于如下的字段，其中内容是 [{"website":"baidu.com","name...

hive解析json格式

jin6872115的博客

04-09

1582

{ "store": { "fruit": [ { "weight": 8, "type": "apple" }, { "weight": 9, "ty

hive 复杂数据结构嵌套

chunguo.wang

03-14

1021

Hive hive 除了支持基本的数据结构 hive 复杂的数据结构: [code="java"]{ array map struct } [/code] 数据格式 [code="java"]221190xxx9 0401:0.30 0402:0.81 1303:0.23 1502:0.21 1503:0.11 0307:0.17 1003:0.35...

记一次hsql解析大json的全过程

weixin_42861725的博客

07-14

773

记一次hsql解析大json的全过程1.背景环境说明2.原始数据长什么样子3.期望结果是什么样子4.解析思路及过程6.注意事项 1.背景环境说明数仓同步过来的mysql表, 其中一个字段是非常大的json; 需求方需要的数据是在json中; 需要对复杂json进行解析; 本文环境是阿里云的maxcompute, 类似hive,有现成的内置函数来json解析对象和数组; get_json_object() json_tuple() 2.原始数据长什么样子原始数据, 一个字段值大小约20k; json中

Hive中json 字符串解析之 get_json_object 与 json_tuple

击水三千里的专栏

04-18

8271

hive 中 json 字符串解析

hive中如何读取数组_hive解析json嵌套数组

weixin_39702714的博客

02-06

2150

hive怎么统计json中某一项的内容Hive提供json抽取函数get_json_object，根据json_path来获取你所抽取的项 get_json_object函数第一个参数填写json对象变量，第二个参数使用$表示json变量标识，然后用 . 或 [] 读取对象或数组：例如 select get_json_object(json_column,’$.serv如何在Hive中使用Json...

hive get_json_object() 解析嵌套json字符串

weixin_39150719的博客

08-15

1万+

测试数据为： line= { “store”: { “fruit”:[{“weight”:9,“type”:“apple”}, {“weight”:10,“type”:“pear”}], “bicycle”:{“price”:20,“color”:“red”} }, “email”:“leaves@json_udf_test.net”, “owner”:“leaves” } get单层值 hiv...

unity json多层嵌套解析

05-25

在Unity中，可以使用JsonUtility类来解析Json格式的数据。对于多层嵌套的Json数据，我们可以使用JsonUtility.FromJson方法将其转换为对应的C#对象，然后再通过对象的属性或方法来访问其中的数据。下面是一个示例Json数据： ``` { "name": "John", "age": 30, "address": { "city": "New York", "state": "NY", "zipcode": "10001" }, "phoneNumbers": [ { "type": "home", "number": "555-1234" }, { "type": "work", "number": "555-5678" } ] } ``` 我们可以定义一个对应的C#类来表示这个Json数据： ``` [Serializable] public class Person { public string name; public int age; public Address address; public List<PhoneNumber> phoneNumbers; } [Serializable] public class Address { public string city; public string state; public string zipcode; } [Serializable] public class PhoneNumber { public string type; public string number; } ``` 然后使用JsonUtility.FromJson方法将Json数据转换为Person对象： ``` string jsonData = "{...}"; // 假设这里是示例Json数据 Person person = JsonUtility.FromJson<Person>(jsonData); ``` 现在我们就可以通过person对象的属性或方法来访问其中的数据了，例如： ``` Debug.Log(person.name); // 输出 "John" Debug.Log(person.address.city); // 输出 "New York" Debug.Log(person.phoneNumbers[0].number); // 输出 "555-1234" ``` 需要注意的是，在使用JsonUtility类时，对象的属性或字段必须是public修饰的，并且类必须使用[Serializable]标记进行标记。此外，Json数据中的键名必须与C#类中的属性或字段名称相对应。如果Json数据中的键名与属性或字段名称不匹配，可以使用[JsonProperty]标记来指定对应关系。