hive函数 get_json_object的使用

1，对于jsonArray（json数组），如person表的xjson字段有数据：

[{"name":"王二狗","sex":"男","age":"25"},{"name":"李狗嗨","sex":"男","age":"47"}]

取出第一个json对象，那么hive sql为：

SELECT get_json_object(xjson,"$.[0]") FROM person;

结果是：

 {"name":"王二狗","sex":"男","age":"25"}

取出第一个json的age字段的值：

SELECT get_json_object(xjson,"$.[0].age") FROM person;

结果：

25

总结：

get_json_object(param1,"$.param2")

param1：需要解析的json字段

param2：遇到数组就用 [0,1,2…] 0,1,2是数组对应的元素,遇到jsonObject直接用 ".key"取出想要获取的value。

2，json_tuple(jsonStr, k1, k2, …)

参数为一组键k1，k2，。。。。。和json字符串，返回值的元组。该方法比get_json_object高效，因此可以在一次调用中输入多次键

0: jdbc:hive2://master:10000> select b.b_movie,b.b_rate,b.b_timeStamp,b.b_uid from json a 
lateral view json_tuple(a.data,'movie','rate','timeStamp','uid')b 
as b_movie,b_rate,b_timeStamp,b_uid;

3，Json数组解析
用Hive自带的函数解析Json数组，Hive的内置的explode函数，explode()函数接收一个 array或者map 类型的数据作为输入，然后将 array 或 map 里面的元素按照每行的形式输出。其可以配合 LATERAL VIEW 一起使用。

hive> select explode(array('A','B','C'));
OK
A
B
C
Time taken: 4.879 seconds, Fetched: 3 row(s)
hive> select explode(map('A',10,'B',20,'C',30));
OK
A       10
B       20
C       30
Time taken: 0.261 seconds, Fetched: 3 row(s)

explode函数和我们解析json数据是有关系的，我们可以使用explode函数将json数组里面的元素按照一行一行的形式输出：

hive> SELECT explode(split(regexp_replace(regexp_replace('[{"website":"www.baidu.com","name":"百度"},{"website":"google.com","name":"谷歌"}]', '\\]',''),'\\}\\,\\{','\\}\\;\\{'),'\\;'));
OK
{"website":"www.baidu.com","name":"百度"}
{"website":"google.com","name":"谷歌"}
Time taken: 0.14 seconds, Fetched: 2 row(s)

原文链接：https://www.cnblogs.com/yfb918/p/10644262.html

进阶版：多个字段需要一行变多行后解析