Hive
guohaodong1024
2的10次方
展开
-
【大数据】Hive: 创建分区表(partition表)及分区表导入csv文本文件数据
2018.11.21文章目录前言方法前言某项目生产环境中的Hive是按月份分区,而测试环境的没有分区,导致部分功能无法验证。方法基本思路:分别创建两个表,一张是分区表,另一张是非分区表,表结构相同;再通过insert语句将非分区表的数据插入到分区表1。要注意是,分区表的插入分两种:静态插入和动态插入。在一般情况下,Hive不建议直接使用动态插入2,所以有个默认情况下是不允许使用动态...原创 2018-11-21 22:07:27 · 4446 阅读 · 0 评论 -
【大数据】Hive: 获取字段数据类型
2018.12.01文章目录前言方法前言某项目涉及将Hive中的textFile表转换成parquet表,由于parquet表不支持date类型,需要判断字段是否是date,并cast成timestamp。方法采用DESCRIBE语句1既可:DESCRIBE [FORMATTED] [db_name.]table_name[.complex_col_name ...]DE...原创 2018-12-01 23:48:04 · 14393 阅读 · 0 评论