Hadoop3.0.3 + hive3.0.0填一个大坑
1.问题
因为需要熟悉新版本的功能,所以部署了Hadoop3.0.3。看了下hive的配套说明:
This release works with Hadoop 3.x.y. 所以选择hive3.0.0进行安装。但很无奈hive的文档真的太不详细了,按其一步步进行安装报了两个错,困扰了很久,现总结一下配置过程。前置条件为hadoop3.0.3正常运行,mysql服务配置完全
2. 配置过程
2.1. 解压文件配置环境变量
- 解压文件
$ tar -xzvf hive-x.y.z.tar.gz
- 配置环境变量
export HIVE_HOME={
{
pwd}}
export PATH=$HIVE_HOME/bin:$PATH
- 将mysql的JDBC包放到hive的lib文件夹中。注意是.jar文件
2.2. 配置hive-env.sh
HADOOP_HOME=/opt/modules/hadoop-3.0.3
export HIVE_CONF_DIR=/opt/modules/hive-3.0.0-bin
2.3. 配置hive-site.xml
<configuration>
<property>
<name>hive.metastore.schema.verification</name>
<value>false</value>
</property>
<property>
<name>hive.metastore.warehouse.dir</name>
<value>/user/hive/warehouse</value>
</property>
<property>
<name>hive.exec.mode.local.auto</name>
<va