hive安装

hive安装

0. Hive源码包下载
   http://mirror.bit.edu.cn/apache/hive/

1. 下载软件包
   wget http://mirror.bit.edu.cn/apache/hive/hive-2.3.3/apache-hive-2.3.3-bin.tar.gz
   tar zxvf apache-hive-2.3.3-bin.tar.gz

2. 创建HDFS目录
   hadoop fs -mkdir -p /data/hive/warehouse
   hadoop fs -mkdir -p /data/hive/tmp
   hadoop fs -mkdir -p /data/hive/log
   hadoop fs -chmod -R 777 /data/hive/warehouse
   hadoop fs -chmod -R 777 /data/hive/tmp
   hadoop fs -chmod -R 777 /data/hive/log

创建文件系统目录
mkdir /data/hive/tmp

3. 修改Hive配置文件
   cd apache-hive-2.3.3-bin/conf

cp hive-default.xml.template hive-site.xml

vim hive-site.xml

`

<property>  
    <name>hive.exec.scratchdir</name>  
    <value>/data/hive/tmp</value>  
</property> 
<property>
    <name>hive.querylog.location</name>
    <value>/data/hive/log/hadoop</value>
</property> 
<property>
    <name>javax.jdo.option.ConnectionURL</name>
    <value>jdbc:mysql://master:3306/hive?createDatabaseIfNotExist=true</value>
</property>
<property>
    <name>javax.jdo.option.ConnectionDriverName</name>
    <!--这里驱动用的是最新的,com.mysql.jdbc.Driver改为com.mysql.cj.jdbc.Driver-->
    <value>com.mysql.cj.jdbc.Driver</value>
</property>
<property>
    <name>javax.jdo.option.ConnectionUserName</name>
    <value>hive</value>
</property>
<property>
    <name>javax.jdo.option.ConnectionPassword</name>
    <value>hive</value>
</property>

`

#我这里是吧配置文件给master改为了localhost

然后mysql因为有权限问题,所以用户名改为了root和adminadmin,改为了root用户名和密码

cp hive-env.sh.template hive-env.sh
vim hive-env.sh
HADOOP_HOME=/usr/local/src/hadoop-2.6.5
HIVE_CONF_DIR=/usr/local/src/apache-hive-2.3.3-bin/conf
HIVE_AUX_JARS=/usr/local/src/apache-hive-2.3.3-bin/lib

4. 增加环境变量
   #Master、Slave1、Slave2
   vim ~/.bashrc
   HIVE_HOME=/usr/local/src/apache-hive-2.3.3-bin
   PATH=$HIV{E}_{H}OME/bin:$PATH
   #刷新环境变量
   source ~/.bashrc

5. 安装MySQL
   #Master
   yum -y install mysql-server
   chkconfig --add mysql
   service mysqld start
   #配置MySQL Root用户密码
   mysqladmin -uroot password hadoop
   grant all on . to ‘hive’@’%’ identified by ‘hive’;
   flush privileges;

6. 安装MySQL连接工具
   #Master
   1）下载安装包

这里的地址已经过期了

wget https://cdn.mysql.com//Downloads/Connector-J/mysql-connector-java-5.1.44.tar.gz

试试这个

wget https://dev.mysql.com/downloads/connector/j/mysql-connector-java-8.0.13.tar.gz

这是直接去下面这个地址下载的tar文件

https://dev.mysql.com/downloads/connector/j/
tar zxvf mysql-connector-java-5.1.44.tar.gz
2）复制连接库文件
cp mysql-connector-java-5.1.44/mysql-connector-java-5.1.44-bin.jar /usr/local/src/apache-hive-2.3.3-bin/lib

当使用的 hive 是 1.x 之前的版本，不做初始化也是 OK 的，当 hive 第一次启动的 时候会自动进行初始化，只不过会不会生成足够多的元数据库中的表。在使用过程中会 慢慢生成。但最后进行初始化。如果使用的 2.x 版本的 Hive，那么就必须手动初始化元 数据库。使用命令：

schematool -dbType mysql -initSchema
#也看了一些这个博客
https://www.cnblogs.com/qingyunzong/p/8708057.html#_label1_5
8. 启动HiveServer（WebUI）
hiveserver2 &

9. 启动Hive服务
   hive