Hive的一些基本概念

Hive是由Facebook开源的用于海量结构化日志数据统计的工具,它基于Hadoop,提供类SQL查询功能。Hive的本质是将HQL转化为MapReduce程序,通过HDFS存储数据,Yarn执行任务。其架构包括用户接口、元数据、Hadoop和驱动器。Hive的优点是类SQL语法简化开发,适合大数据处理,支持自定义函数,但其效率较低,不适合实时查询和迭代算法。Hive与数据库的主要区别在于数据仓库定位、更新方式、执行延迟和可扩展性。
摘要由CSDN通过智能技术生成

一、Hive是什么?

Hive:由 Facebook 开源用于解决 海量结构化日志 的数据统计。
Hive 是基于 Hadoop 的一个 数据仓库工具,可以将 结构化的数据文件映射为一张表,并且提供 类SQL 查询功能。

二、Hive本质是什么?

Hive 的本质是将 HQL 转化成 MapReduce 程序,Hive 储存的数据在 HDFS 上,Hive 分析数据底层的 默认实现 是 MapReduce,Hive 的执行程序在 Yarn 上。HQL 转换 MR 的流程图如下:
在这里插入图片描述

三、Hive架构原理

在这里插入图片描述

1、用户接口:Client
CLI(hive shell)、JDBC/ODBC(java 访问 hive)、WEBUI(浏览器访问 hive)

2、元数据:Metastore
元数据包括:

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值