小白篇(六)：大数据Hive介绍和使用

获取原文

 

简短介绍

---

大家好，我又来了。昨天国庆玩得可还开心吧。在火车上闲着无聊给大家分享一下大数据工具Hive。这可是大数据工作必备技能之一。掌握Hive的使用。差不多可以做做大数据数仓类的工作了。

 

 

01-大数据整体架构

 

在了解Hive之前，我们来看看大数据Hadoop技术栈的整体架构

说明：不难看出，Hive是做查询分析用的，属于上层工具了。当然，现在一般都是在Hue中编写Hive语句的。

 

02-什么是HIVE

Hive是基于Hadoop的一个数据仓库工具，用来进行数据提取、转化、加载，这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。hive数据仓库工具能将结构化的数据文件映射为一张数据库表，并提供SQL查询功能，能将SQL语句转变成MapReduce任务来执行。Hive的优点是学习成本低，可以通过类似SQL语句实现快速MapReduce统计，使MapReduce变得更加简单，而不必开发专门的MapReduce应用程序。hive十分适合对数据仓库进行统计分析。

了解知道了吧。Hive是Hadoop之上的一个工具。采用Sql来替代底层MapReduce的开发(MapReduce简称：MR，MR是计算引擎)。在没有出现Hive之前是需要采用Java编写MR代码的。想想ÿ