Hive的基本概念

Hive的基本概念

1.1什么是hive

1）hive简介

hive是由facebook开源用于解决海量结构化日志的数据统计工具

hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射成为一张表，并提供类sql功能

2）Hive的本质

将hql转化成MapReduce程序

sql分析 -> 将sql封装成为MapReduce模板 -> 通过hive框架匹配响应的模板

数据存储在HDFS，采用mapReduce分析数据，程序执行在yarn上

tips:

​ Hive并不能直接存储数据，Hive的数据是存在HDFS上的文件，Hive中的数据库引擎保存Hive中的表和HDFS上文件的映射

3）优缺点

优点：

• 快速开发
• 学习成本低
• 支持海量数据的分析与计算
• 支持用户自定义函数

缺点

• 表达能力有限
• 效率低
• 不支持实时查询和行级别更新（无法使用update和delete）