Hive工具介绍（二）

Hive的安装及配置

 

一、Mysql安装

安装MySQL可以基于yum进行安装

1. 安装mysql数据库

        yum install -y mysql-server

1. 对数据库的字符集进行配置

        vi /etc/my.cnf

        在配置文件的最后加上配置信息指定默认的指符集为utf-8

        default-character-set=utf8

1. 启动mysql

        service mysqld start

1. 查看mysql的状态

        service mysqld status

1. 设置mysql开机自动启动

        chkonfig mysqld on

1. 设置mysql的root密码

        mysql -u root -p  #进入mysql

        set password for root@localhost=password('123456');  #设置root账号密码为123456

        如果远端使用工具无法连接到mysql可以创建新的用户并且赋予相应的权限

1. ​创建一个远程连接用户

        create user 'xiesheng'@'%' identified by '123456';

1. 对创建的用户进行授权

        grant all on *.* to 'xiesheng'@'%';

 

二、Hive配置

1. 下载Hive    apache-hive-3.1.2-bin.tar.gz
2. 上传服务器
3. 解压Hive tar -zxvf apache-hive-3.1.2-bin.tar.gz
4. 在解压后hive的conf目录下创建hive-site.xml文件

<?xml version="1.0"?>

<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>

<configuration>

/*Hive的数据存储路径*/

<property>

<name>hive.metastore.warehouse.dir</name>

<value>/usr/hive/warehouse</value>

</property>

<property>

<name>hive.metastore.local</name>

<value>true</value>

</property>

<property>

<name>javax.jdo.option.ConnectionURL</name>

<value>jdbc:mysql ://localhost/hive?createDatabaseIfNotExist=true</value>

</property>

<property>

<name>javax.jdo.option.ConnectionDriverName</name>

<value>com.mysql.jdbc.Driver</value>

</property>

<property>

<name>javax.jdo.option.ConnectionUserName</name>

<value>root</value>

</property>

<property>

<name>javax.jdo.option.ConnectionPassword</name>

<value>123456</value>

</property>

</configuration>

 

1. 把hive的bin目录下的jline-2.12.jar拷贝到hadoop下

        scp /root/software/apache-hive-3.1.2-bin/lib/jline-2.12.jar /root/software/hadoop-3.1.3/share/hadoop/yarn/lib

1. 把Hive配置到环境变量
2. 启动hive   

        hive shell

 

 

报错：NoSuchMethodError: com.google.common.base.Preconditions.checkArgument(ZLjava/lang/String;L

解决方案：引起的原因是hadoop中guava.jar与hive中的这个jar包版本不一致，将hive下lib中的相关的这个包复制到 hadoop\common\lib下，并且把hadoop中的原来这个包删除掉

 

报错：HiveException java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient

解决方案：引起的原因是没有初始化数据库导致的，执行下面这个命令：schematool -dbType mysql -initSchema

 

报错：org.apache.hadoop.hive.metastore.HiveMetaException: Failed to load driver

解决方案：下载mysql-connector-java-5.1.49.jar jar包，放到hive的lib目录下即可