本文介绍了如何使用Hadoop命令创建Hive分区表，通过`hadoop dfs -mkdir -p`创建分区目录，使用`hadoop dfs -put`导入数据，以及在Impala中使用`refresh`和`alter table add partition`命令更新分区。这些步骤对于大数据处理和查询效率提升至关重要。
查看分区表
#hdfs dfs -ls /user/hive/warehouse/hj.db/test
----hj.db 是数据库名称 test是分区表
创建分区
#hadoop dfs -mkdir -p /user/hive/warehouse/hj.db/test/etl_dt=20220810
----etl_dt 分区键
将文本数据导入到创建的分区中
#hadoop dfs -put /date/test.txt /user/hive/warehouse/hj.db/test/etl_dt=20220810
impala刷新下表 再添加分区
impala-shell -q "refresh hj.test ; alter table hj.test add partition (etl_dt=20220810)"
扫一扫
5637
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
