hive安装
-
Hive源码包下载
http://mirror.bit.edu.cn/apache/hive/ -
下载软件包
wget http://mirror.bit.edu.cn/apache/hive/hive-2.3.3/apache-hive-2.3.3-bin.tar.gz
tar zxvf apache-hive-2.3.3-bin.tar.gz -
创建HDFS目录
hadoop fs -mkdir -p /data/hive/warehouse
hadoop fs -mkdir -p /data/hive/tmp
hadoop fs -mkdir -p /data/hive/log
hadoop fs -chmod -R 777 /data/hive/warehouse
hadoop fs -chmod -R 777 /data/hive/tmp
hadoop fs -chmod -R 777 /data/hive/log
创建文件系统目录
mkdir /data/hive/tmp
- 修改Hive配置文件
cd apache-hive-2.3.3-bin/conf
cp hive-default.xml.template hive-site.xml
vim hive-site.xml
`
<property>
<name>hive.exec.scratchdir</name>
<value>/data/hive/tmp</value>
</property>
<property>
<name>hive.querylog.location</name>
<value>/data/hive/log/hadoop</value>
</property>
<property>
<name>javax.jdo.option.ConnectionURL</name>
<value>jdbc:mysql://master:3306/hive?createDatabaseIfNotExist=true</value>
</property>
<property>
<name>javax.jdo.option.ConnectionDriverName</name>
<!--这里驱动用的是最新的,com.mysql.jdbc.Driver改为com.mysql.cj.jdbc.Driver-->
<value>com.mysql.cj.jdbc.Driver</value>
</property>
<property>
<name>javax.jdo.option.ConnectionUserName</name>
<value>hive</value>
</property>
<property>
<name>javax.jdo.option.ConnectionPassword</name>
<value>hive</value>
</property>
`
#我这里是吧配置文件给master改为了localhost
然后mysql因为有权限问题,所以用户名改为了root和adminadmin,改为了root用户名和密码
cp hive-env.sh.template hive-env.sh
vim hive-env.sh
HADOOP_HOME=/usr/local/src/hadoop-2.6.5
HIVE_CONF_DIR=/usr/local/src/apache-hive-2.3.3-bin/conf
HIVE_AUX_JARS=/usr/local/src/apache-hive-2.3.3-bin/lib
-
增加环境变量
#Master、Slave1、Slave2
vim ~/.bashrc
HIVE_HOME=/usr/local/src/apache-hive-2.3.3-bin
PATH= H I V E H O M E / b i n : HIVE_HOME/bin: HIVEHOME/bin:PATH
#刷新环境变量
source ~/.bashrc -
安装MySQL
#Master
yum -y install mysql-server
chkconfig --add mysql
service mysqld start
#配置MySQL Root用户密码
mysqladmin -uroot password hadoop
grant all on . to ‘hive’@’%’ identified by ‘hive’;
flush privileges; -
安装MySQL连接工具
#Master
1)下载安装包
这里的地址已经过期了
wget https://cdn.mysql.com//Downloads/Connector-J/mysql-connector-java-5.1.44.tar.gz
试试这个
wget https://dev.mysql.com/downloads/connector/j/mysql-connector-java-8.0.13.tar.gz
这是直接去下面这个地址下载的tar文件
https://dev.mysql.com/downloads/connector/j/
tar zxvf mysql-connector-java-5.1.44.tar.gz
2)复制连接库文件
cp mysql-connector-java-5.1.44/mysql-connector-java-5.1.44-bin.jar /usr/local/src/apache-hive-2.3.3-bin/lib
当使用的 hive 是 1.x 之前的版本,不做初始化也是 OK 的,当 hive 第一次启动的 时候会自动进行初始化,只不过会不会生成足够多的元数据库中的表。在使用过程中会 慢慢生成。但最后进行初始化。如果使用的 2.x 版本的 Hive,那么就必须手动初始化元 数据库。使用命令:
schematool -dbType mysql -initSchema
#也看了一些这个博客
https://www.cnblogs.com/qingyunzong/p/8708057.html#_label1_5
8. 启动HiveServer(WebUI)
hiveserver2 &
- 启动Hive服务
hive