熟悉Hive的基本操作

熟悉Hive的基本操作

安装hive
hive下载地址
点击backup sites下面的链接，跳转到
选择hive-1.2.2/中的apache-hive-1.2.2-bin.tar.gz

下载完成后把软件传入Linux中，解压，配置文件

bashrc文件

保存退出后，运行如下命令使配置立即生效：
source ~/.bashrc
修改/usr/local/hive/conf下的hive-site.xml
执行如下命令：
cd /usr/local/hive/conf
mv hive-default.xml.template hive-default.xml
上面命令是将hive-default.xml.template重命名为hive-default.xml；
然后，使用vim编辑器新建一个配置文件hive-site.xml，命令如下：
cd /usr/local/hive/conf
vim hive-site.xml
在hive-site.xml中添加如下配置信息：

<?xml version="1.0" encoding="UTF-8" standalone="no"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration>
  <property>
    <name>javax.jdo.option.ConnectionURL</name>
    <value>jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true</value>
    <description>JDBC connect string for a JDBC metastore</description>
  </property>
  <property>
    <name>javax.jdo.option.ConnectionDriverName</name>
    <value>com.mysql.jdbc.Driver</value>
    <description>Driver class name for a JDBC metastore</description>
  </property>
  <property>
    <name>javax.jdo.option.ConnectionUserName</name>
    <value>hive</value>
    <description>username to use against metastore database</description>
  </property>
  <property>
    <name>javax.jdo.option.ConnectionPassword</name>
    <value>hive</value>
    <description>password to use against metastore database</description>
  </property>
</configuration>

然后，按键盘上的“ESC”键退出vim编辑状态，再输入:wq，保存并退出vim编辑器。

安装并配置mysql

安装MySQL，过程中需要输入密码
开启数据库，做一些基本操作，建立hive数据库，配置mysql允许hive接入

下载jdbc驱动包，Select Operating System:选择platform independent,点击第一个旁边的下载按钮，保存到文件中，再通过shell命令拷贝到对应的目录下。我下载的是8.0.20版本的，有些电脑上会报jdbc包的不兼容错误，可以更换成5.1.40版本的或者别的版本

下载地址
shell命令
tar -zxvf mysql-connector-java-8.0.20.tar.gz
#解压
cp mysql-connector-java-8.0.20/mysql-connector-java-8.0.20.jar /usr/local/hive/lib
#将mysql-connector-java-8.0.20.jar拷贝到/usr/local/hive/lib目录下

使用hive，先退出MySQL，然后在终端先开启Hadoop服务，后再执行hive命令，就可以进行hive操作了

实验内容

在Hive Shell模式下，创建数据库hive，并根据上面给出的usr表格，在数据库hive下设计用户表usr。
创建数据库命令：create database if not exists hive;
然后使用数据库：use hive;
这样才能在hive数据库里创建表。创建表的语句在截图中给出，记得要在后面加row format delimited fields terminated by ‘,’ 语句，意思是按照逗号（，）来分隔，不加的话在导入文件数据到表格中会出现表中的数据全为null的现象。

设计完后，用show命令查看hive数据库下包含的所有表，用describe命令查看表usr的基本信息，可以使用select * from usr命令来查看数据是否插入成功

查询hanmei 的兴趣爱好新建一个与usr表拥有相同列的空表new_usr，并把usr中数据插入到new_usr中
查询结果

把文件usr_add.txt文件中内容增加到usr表中，其中，文件usr_add.txt中内容为：4，lily，35，singing，在计算机中建立文件，然后就可以导入了

统计usr表中有相同兴趣爱好的人的个数。使用sql语句完成