Hive集成Mysql

最新推荐文章于 2024-09-03 14:16:07 发布

wanghuan524

最新推荐文章于 2024-09-03 14:16:07 发布

阅读量157

点赞数

分类专栏： hive 文章标签： hive mysql metastore

本文链接：https://blog.csdn.net/wanghuan524/article/details/103231058

版权

hive 专栏收录该内容

13 篇文章 0 订阅

订阅专栏

Hive使用Mysql存储元数据

环境说明
配置步骤

环境说明

OS ： CentOs 6.4
mysql version ： mysql-libs.zip 5.7.24
Hive 默认使用Derby内嵌的内存数据库，不支持多Hive CLI 连接，业内默认使用Mysql作为元数据管理数据库。
tips：Mysql和Hive安装在同一台Server上

配置步骤

1. hive-site.xml

// hive-default.xml.template 生成hive-site.xml配置文件（修改hive-site.xml中的配置才会生效）
1.  cp hive-default.xml.template hive-site.xml
// 配置 mysql连接串
//hostname:端口号
//数据库名为metastore ，若数据库不存在则创建
<property>
  <name>javax.jdo.option.ConnectionURL</name>
  <value>jdbc:mysql://hadoopnode1:3306/metastore?createDatabaseIfNotExist=true</value>
  <description>JDBC connect string for a JDBC metastore</description>
</property>
//msyql 驱动包 ，需要将该驱动jar包放到hive lib下
<property>
  <name>javax.jdo.option.ConnectionDriverName</name>
  <value>com.mysql.jdbc.Driver</value>
  <description>Driver class name for a JDBC metastore</description>
</property>
// mysql 连接用户名
<property>
  <name>javax.jdo.option.ConnectionUserName</name>
  <value>root</value>
  <description>username to use against metastore database</description>
</property>
// mysql 连接用户密码
<property>
  <name>javax.jdo.option.ConnectionPassword</name>
  <value>123456</value>
  <description>password to use against metastore database</description>
</property>

2. mysql jdbc jar copy

// 解压jar包
1.  tar -zxvf mysql-connector-java-5.1.27.tar.gz
// 拷贝至hive lib目录下
2. cp mysql-connector-java-5.1.27-bin.jar /opt/app/hive-0.13.1/lib/

3. 测试

// 启动 bin/hive
1. bin/hive
// 启动mysql client
2. mysql -uroot -p123456

Hive启动之后，会在mysql中创建元数据库 metastore
hive元数据库

一般需要将Hive和Mysql配置到同一台Server，配置到不同Server需要修改参数配置