hive关于map和array项导入导出格式的问题

上周写的一个python的transform脚本，会将输入的map和array进行修改后输出，但是将输出数据导回到hive表中时出现了一些关于map和array的格式问题。于是想到要测试几种情况下，hive数据map和array支持的输入和输出。

结论：假如想要把表中的map读出来做一些处理后再放回去，利用python做transform的情况下，hive会认为transform的结果是string，无论是采用transform之后直接插入表还是采用将transform结果放在hdfs上再load回去都会有异常。使用存储到本地再load回去又浪费时间，所以可以把transform的结果包装在子查询中，外层用str_to_map转换再插回表。

但是一定要注意：str_to_map会把string中的'\'进行转义，到最后会让这条记录无比庞大，说明如下。