hive读取hdfs存放文件_Hive操作

数据存储

▼ 个人测试方法

LOAD DATA [LOCAL] INPATH 'filepath' [OVERWRITE] INTO TABLE tablename [PARTITION (partcol1=val1,partcol2=val2 ...)]

如果命令中带有LOCAL，说明从本地文件系统加载数据，文件路径可以是相对路径，也可以是绝对路径。在这种情况下，首先将文件从本地复制到hdfs相应的位置，然后移动到hive表格中，这个时候原始数据文件是存在于hive表之下的路径下。这一点我会专门写一篇关于hive外部表的相应博文。

如果命令中没有LOCAL，代表我们的数据是从hdfs中读取文件，这个时候如果我们使用的是内部表，相应的hdfs的原始文件会消失，进入到相应的表格中。

▼ 公司常用方式

  1>找到hive表的存放路径

  2>通过InsecureClient上传数据

  3>通过msck修复分区，更新元数据

清空hive表数据

▼ 清空保留格式

1>truncate table iot_devicelocation;只能清空内部表，外部表的数据还是存放在hdfs,但是保存表结构

2>drop table if exists iot_devicelocation;删除表。

关注我们