初识 Hive


           

           一. 什么是Hive?

           二. 优缺点

           三. 架构原理

           四. Hive与数据库的比较





一.什么是Hive?

 基于Hadoop的数据仓库工具,可将结构化数据文件映射为一张表,并提供类SQL查询功能

 用于解决海量结构化日志的数据统计

本质是将HQL转化为MapReduce程序

  1. Hive处理的数据存储在HDFS
  2. Hive分析数据底层的实现是MapReduce
  3. 执行程序运行在Yarn上



二.优缺点

​  a. 优点:

​    1. 类SQL语法(简单、易上手)

​    2. 避免写MapReduce,减少开发人员学习成本

​    3. Hive执行延迟较高,适用于处理大量数据和对实时性要求不高的数据

​    4. 可自定义函数,根据需求定义函数

​  b.缺点:

​    1. 表达能力有限 (迭代式算法无法表达、数据挖掘方面不擅长)

​    2. 效率较低(不够智能化、调优较困难)



三. Hive架构原理

在这里插入图片描述



四. Hive 与 数据库的比较

 hive采用了类似SQL的查询语言 Hive QL (Hive Query Language), 因此容易将HIve理解为数据库

 但除查询语言外,再无类似之处。

对比项HiveMySQL
查询语言Hive QLSQL
数据存储位置HDFS本地 或 块设备
数据格式用户定义系统决定
数据更新不支持支持
事务不支持支持
执行延迟
可扩展性
数据规模
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值