Hive随笔

最新推荐文章于 2023-06-12 19:21:15 发布

yunzailin

最新推荐文章于 2023-06-12 19:21:15 发布

阅读量423

点赞数

分类专栏：笔记文章标签： hive hadoop

本文链接：https://blog.csdn.net/yunzailin/article/details/125858733

版权

本文介绍了在Hive中处理数据写入的一些细节，包括从Excel导入array类型数据的格式设置，如array和array的处理，以及包含特殊字符的处理方式。此外，还探讨了etl_time字段的处理，提供了显示日期格式和时间戳格式的方法。最后，分享了如何查询Hive表及分区的空间占用情况。

摘要由CSDN通过智能技术生成

1、array写入（从excel中写入）
     对arrat<string>需要设置为array('aaa')的格式
     对array<bigint>需要设置为array(cast(1 as bigint))的格式
     对arrat<string>且原始数据中包含'的数据，需要在每个'前加\
     以上三个的sql查看
select array(cast(1 as bigint) ,cast(2 as bigint) ,cast(3 as bigint) ) ID_List
   ,array('a','b','OA') Name_List
   ,array('{\'title\':\'小麦\',\'name\':\'夏日享！\'}'
           ,'{\'title\':\'\',\'name\':\'北京欢迎你！\'}') Content_Name_list ;

2、对etl_time的写入，逻辑上都需要为写入时间，有两种情况：
     显示为日期格式：from_unixtime(unix_timestamp())
     显示为时间戳格式：unix_timestamp(current_timestamp)
     sql查看效果
select from_unixtime(unix_timestamp()) as etl_time1
       ,unix_timestamp(current_timestamp) as etl_time2 ;

3、如何查看hive表（