Hive 介绍与安装

Hive是一个数据仓库基础工具在Hadoop中用来处理结构化数据。

它架构在Hadoop之上，总归为大数据，并使得查询和分析方便。并提供简单的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。

术语“大数据”是大型数据集，其中包括体积庞大，高速，以及各种由与日俱增的数据的集合。使用传统的数据管理系统，它是难以加工大型数据。因此，Apache软件基金会推出了一款名为Hadoop的解决大数据管理和处理难题的框架。 

Hive是什么？

Hive是一个数据仓库基础工具在Hadoop中用来处理结构化数据。它架构在Hadoop之上，总归为大数据，并使得查询和分析方便。 最初，Hive是由Facebook开发，后来由Apache软件基金会开发，并作为进一步将它作为名义下Apache Hive为一个开源项目。它用在好多不同的公司。例如，亚马逊使用它在 Amazon Elastic MapReduce。 

Hive 不是

1. 一个关系数据库
2. 一个设计用于联机事务处理（OLTP）
3. 实时查询和行级更新的语言

Hive 特点

1. 它存储架构在一个数据库中并处理数据到HDFS。
2. 它是专为OLAP设计。
3. 它提供SQL类型语言查询叫HiveQL或HQL。
4. 它是熟知，快速，可扩展和可扩展的。 

Hive 安装

1.下载hive2.1-tar.gz

下载链接：http://www.apache.org/dyn/closer.cgi/hive/

2.解压（tar命令）
        $>tar -xzvf hive-2.1.0.tar.gz -C /soft    //tar开
        $>cd /soft/hive-2.1.0                    //
        $>ln -s hive-2.1.0 hive                    //符号连接

注：此处版本根据自己下载的更改

3.配置环境变量
        [/etc/profile]
        HIVE_HOME=/soft/hive
        PATH=...:$HIVE_HOME/bin

4.验证hive安装成功
        $>hive --v

5.配置hive,使用win7的mysql存放hive的元数据.
        a)复制mysql驱动程序到hive的lib目录下。
          
        b)配置hive-site.xml
            复制hive-default.xml.template为hive-site.xml
            修改连接信息为mysql链接地址，将${system:...字样替换成具体路径。
            [hive/conf/hive-site.xml]
            <property>
                <name>javax.jdo.option.ConnectionPassword</name>
                <value>root</value>
                <description>password to use against metastore database</description>
            </property>
            <property>
                <name>javax.jdo.option.ConnectionUserName</name>
                <value>root</value>
                <description>Username to use against metastore database</description>
            </property>
            <property>
                <name>javax.jdo.option.ConnectionURL</name>
                <value>jdbc:mysql://192.168.231.1:3306/hive2</value>
            </property>
            <property>
                <name>javax.jdo.option.ConnectionDriverName</name>
                <value>com.mysql.jdbc.Driver</value>
                <description>Driver class name for a JDBC metastore</description>
            </property>

6.在msyql中创建存放hive信息的数据库
            mysql>create database hive;

7.初始化hive的元数据(表结构)到mysql中。
            $>cd /soft/hive/bin
            $>schematool -dbType mysql -initSchema
 

hive  表

-----------------------------------------
 1.managed table
        托管表。
        删除表时，数据也删除了。

  2.external table
        外部表。
        删除表时，数据不删。

3.分区表
    目录.
    where 缩小查询范围。

4.bucket表
    文件。
    hash
    clustered by ''

hive命令行操作

----------------------------------------
    1.创建hive的数据库

        $hive>hive --version                // 查看hive版本
        $hive>hive --help                    // 查看hive帮助

        $hive>create database mydb;                //创建hive数据库mydb
        $hive>show databases ;                         //查看所有数据库
        $hive>use mydb2 ;                                 //打开数据库
        $hive>create table mydb2.t(id int,name string,age int);          //创建表
        $hive>drop table t ;                                                                 //删除表
        $hive>drop table mydb2.t ;                                                      //删除表       
        $hive>select * from mydb2.t ;                          //查看指定库的表
        $hive>exit ;                                                       //退出

        $>hive                                //hive --service cli            进入hive客户端