5.1Hive安装部署

Hive安装部署

字体：

实验目的

1.了解Hive的安装部署

2.了解Hive的工作原理

实验原理

Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单的SQL查询功能，可以将SQL语句转换为MapReduce任务进行运行。 其优点是学习成本低，可以通过类SQL语句快速实现简单的MapReduce统计，不必开发专门的MapReduce应用，十分适合数据仓库的统计分析。

Hive构建在基于静态批处理的Hadoop之上，由于Hadoop通常都有较高的延迟并且在作业提交和调度的时候需要大量的开销。因此，Hive并不适合那些需要低延迟的应用，它最适合应用在基于大量不可变数据的批处理作业，例如，网络日志分析。

Hive的特点是：可伸缩（在Hadoop集群上动态的添加设备）、可扩展、容错、输出格式的松散耦合。

Hive将元数据存储在关系型数据库（RDBMS）中，比如MySQL、Derby中。

Hive有三种模式连接到数据，其方式是：单用户模式，多用户模式和远程服务模式。（也就是内嵌模式、本地模式、远程模式）。

 

实验环境

Linux Ubuntu 16.04

jdk-1.8.0_151-linux-x64

hadoop-2.6.5

hive-1.2.2

mysql

mysql-connector-java-5.1.45-bin.jar

实验内容

在已安装好的Hadoop环境基础上，安装并配置Hive。

实验步骤

1.首先在Linux本地，新建/data/hive1目录，用于存放所需文件。

1. sudo mkdir -p /usr/data/hive1  

切换目录到/usr/data/hive1下，下载hive所需安装包apache-hive-1.2.2-bin.tar.gz(下载地址：http://www.apache.org/dyn/closer.cgi/hive/）以及mysql-connector-java-5.1.45-bin.tar.gz(下载地址：https://dev.mysql.com/downloads/connector/j/）到该目录下，所有文件在第五次课文件目录下均有。

1. cd