[转]Hive实现Oracle wm_concat函数

工作中遇到将Hive数据组装同步到MongoDB的需求。

于是乎，传统的DB设计结构就遇到了难题，因此需要有个向WM_CONCAT的函数来将列转行。

还好有现成的解决方案，否则又要自己码一个UDAF处理函数。

1. hive> desc t;   
2. OK   
3. id      string   
4. str     string   
5. Time taken: 0.249 seconds   
6. hive> select * from t;   
7. OK   
8. 1       A   
9. 1       B   
10. 2       C   
11. 2       D   
12. Time taken: 0.209 seconds  

hive> desc t;
OK
id      string
str     string
Time taken: 0.249 seconds
hive> select * from t;
OK
1       A
1       B
2       C
2       D
Time taken: 0.209 seconds

在Hive0.9中，可用：

SELECT id,
concat_ws('|', collect_set(str))
FROM t 
GROUP BY id;

得到结果：

 

1 A|B

2 C|D

 

目前在Hive0.11.0里面测试，能够顺利使用。

refer to http://superlxw1234.iteye.com/blog/1886846