13.1 Hive系统数据仓库
1. hive表的目录结构:
数据桶式hive数据仓库的最底层,在创建表的时候可以指定根据哪个字段分桶以及分成多少个桶。
hive目录结构: /根目录/table_name/分区名/分桶
2. hive任务执行流程:
用户提交命令,编译,根据任务间依赖关系调用执行引擎执行任务。编译时会进行一些优化
3. hive慢的原因:
严重依赖于MR,MR不适合迭代型的任务,因为它只能将中间结构储存在磁盘。
13.1 Hive系统数据仓库
1. hive表的目录结构:
数据桶式hive数据仓库的最底层,在创建表的时候可以指定根据哪个字段分桶以及分成多少个桶。
hive目录结构: /根目录/table_name/分区名/分桶
2. hive任务执行流程:
用户提交命令,编译,根据任务间依赖关系调用执行引擎执行任务。编译时会进行一些优化
3. hive慢的原因:
严重依赖于MR,MR不适合迭代型的任务,因为它只能将中间结构储存在磁盘。