Hive 加载HDFS数据建表, 挂载分区遇到问题及解决方法

最新推荐文章于 2024-08-08 10:12:36 发布

huntblack

最新推荐文章于 2024-08-08 10:12:36 发布

阅读量7.4k

点赞数 1

分类专栏： hadoop 文章标签： Hadoop Hive HDFS Partition

本文链接：https://blog.csdn.net/huntblack/article/details/81913202

版权

在使用Hive加载HDFS数据并建立分区表时，遇到错误提示表非分区表。经过尝试，在分区列'day'前加上引号解决了问题。之后成功加载数据，并根据需求创建新表，解析并拆分数据到新表中。

摘要由CSDN通过智能技术生成

1.创建临时表:

CREATE EXTERNAL TABLE  IF NOT EXISTS tmp.tmp_tb_jinritoutiao_log 
(
content string  COMMENT 'json内容格式'
)
COMMENT '今日头条视频内容'
PARTITIONED BY (`day` string)
STORED AS
INPUTFORMAT 'com.hadoop.mapred.DeprecatedLzoTextInputFormat'
OUTPUTFORMAT 'org.apache.hadoop.hive.ql.io.HiveIgnoreKeyTextOutputFormat'
LOCATION '/datastream/portal/jinritoutiao/video/';