Windows10下配置大数据开发环境（2） - 安装HIVE

最新推荐文章于 2024-11-17 16:22:10 发布

hawkzy

最新推荐文章于 2024-11-17 16:22:10 发布

阅读量4.8k

点赞数 3

分类专栏：大数据文章标签： hive 大数据

本文链接：https://blog.csdn.net/hawkzy/article/details/86472449

版权

本文详细介绍了在Windows10上配置Hadoop、Hive和MariaDB的步骤，包括环境变量设置、Hive-site.xml配置、数据库初始化、Hive仓库配置以及Hive服务的启动。通过此教程，读者将能够成功搭建Hive大数据开发环境。

摘要由CSDN通过智能技术生成

一准备工作

安装Hadoop 3.1.1
安装JDK 1.8或更高版本
Hadoop已经能正常启动，启动过程中无exception或error信息
下载hive 3.1.0：http://mirror.bit.edu.cn/apache/hive/
下载下来应该是tar包的形式：apache-hive-3.1.0-bin.tar.gz
找一个较早的hive版本源码包，在其bin文件夹下必须含有hive.cmd等文件
这个比较困难，我找的是apache-hive-0.14.0-src.tar.gz，非常老的版本。
下载mariadb-10.3.10（或MySQL），以及mysql jdbc驱动：mysql-connector-java-8.0.12.jar

二安装和配置HIVE

解压apache-hive-3.1.0-bin.tar.gz到D:\hive-3.1.0
配置Hive环境变量：

hive path

备份D:\hive-3.1.0\bin文件夹。解压apache-hive-0.14.0-src.tar.gz，复制bin及其子目录ext下的所有cmd文件到D:\hive-3.1.0\bin及其相应子文件夹下。

在D:\hive-3.1.0\conf\下新建hive-site.xml文件，修改内容如下：

<?xml version="1.0" encoding="UTF-8" standalone="no"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration>
  <!-- 下面这几个是将mysql作为metastore存储的配置 -->
  <property>
      <name>javax.jdo.option.ConnectionURL</name>
      <!-- 下面的hive是后面创建MariaDB时建立的数据库名 -->
      <value>jdbc:mysql://localhost:3306/hive?serverTimezone=UTC</value>
      <description>JDBC connect string for a JDBC metastore</description>
  </property>
  <property>
      <name>javax.jdo.option.ConnectionDriverName</name>
      <value>com.mysql.jdbc.Driver</value>
      <description>Driver class name for a JDBC metastore</description>
  </property>
  <property>
      <!-- 数据库连接名 -->
      <name>javax.jdo.option.ConnectionUserName</name>
      <value>root</value>