外部表和内部表
内部表(未被external修饰)
默认创建的表都是所谓的管理表,有时也被称为内部表。因为这种表,Hive 会(或多或少地)控制着数据的生命周期。Hive 默认情况下会将这些表的数据存储在由配置项
hive.metastore.warehouse.dir所定义的目录的子目录下。
当我们删除一个管理表时,Hive 也会删除这个表中数据。管理表不适合和其他工具共享数据。
外部表(被external修饰)
因为表是外部表,所以 Hive 并非认为其完全拥有这份数据。删除该表并不会删除掉这份数据,不过描述表的元数据信息会被删除掉。
使用场景
内部表与外部表没有太大区别。如果所有的数据都由hive处理,则创建内部表;如果数据的处理由hive和其他工具一起处理,则创建外部表。
内部表与外部表的互相转换
内部表转外部表
查询表的类型
desc formatted student;
---输出结果
Table Type: MANAGED_TABLE
修改内部表 student为外部表
alter table student set tblproperties('EXTERNAL'='TRUE');
---查询表的类型
desc formatted student;
---查询结果
Table Type: EXTERNAL_TABLE
外部表转内部表
修改外部表 student 为内部表
alter table student set tblproperties('EXTERNAL'='FALSE');
查询表的类型
desc formatted student;
---查询结果
Table Type: MANAGED_TABLE
注意:('EXTERNAL'='TRUE')和('EXTERNAL'='FALSE')为固定写法,区分大小写!
区别
1.创建表时:创建内部表时,会将数据移动到数据仓库指向的路径;若创建外部表,仅记录数据所在的路径, 不对数据的位置做任何改变。
2.删除表时:在删除表的时候,内部表的元数据和数据会被一起删除, 而外部表只删除元数据,不删除数据。这样外部表相对来说更加安全些,数据组织也更加灵活,方便共享源数据。
3.外部表被external修饰,内部表未被external修饰
4.hive默认创建的是内部表
5.外部表比内部表更加安全