hive相关概念

1、内部表和外部表

• 外部表（external table）

external修饰，数据保存在HDFS上，位置由用户指定。删除表时，只会删除表的元数据，外部表不是由Hive完全管理

• 内部表(internal table/managed table)

没有external修饰，表数据保存在Hive默认的路径下，数据完全由Hive管理，删除表时元数据和表数据会一并删除。

区别

• 外部表的表数据由HDFS管理，Hive管理外部表元数据，内部表的表数据和元数据都由Hive管理
• 外部表的表数据存储位置由用户指定，而内部表的数据默认存储位置为/apps/hive/warehouse/数据库名.db/数据文件名
• 删除外部表时，只会删除表的元数据，表数据仍然存储在HDFS中，删除内部表时，元数据和表数据都会删除
• 对内部表修改时会同步到元数据，而对外部表结构和分区修改时，需要进行修复
  msck rapair table table_name

使用场景

• 做数据备份并且不经常改变的数据，存放在外部表可以减少失误操作
• 处理完成的数据由于需要共享，可以存储在外部表，这样能够防止失误操作，增加数据的安全性
• 数据清洗转换后的中间结果，可以存放在内部表，因为Hive对内部表支持的功能比较全面，方便管理

 

hive中判断Null=Null接口为Null ，把Null转换为字符串再判断