Hive MetaStore 元数据库表分析及操作

最新推荐文章于 2024-07-12 08:57:26 发布

Simple_Zz

最新推荐文章于 2024-07-12 08:57:26 发布

阅读量5.3k

点赞数 3

分类专栏： Hive 文章标签： Hive hadoop 大数据

本文链接：https://blog.csdn.net/love284969214/article/details/82982847

版权

本文详细介绍了Hive元数据库的概念、配置以及在MySQL中的表结构。通过分析元数据库的重要表，展示了如何使用metatool脚本进行元数据更新。同时，列举了一系列查询元数据库的实用SQL语句，帮助理解和操作Hive的表和分区。

摘要由CSDN通过智能技术生成

在安装Hive时，需要在hive-site.xml文件中配置元数据相关信息。与传统关系型数据库不同的是，hive表中的数据都是保存的HDFS上，也就是说hive中的数据库、表、分区等都可以在HDFS找到对应的文件。这里说到的元数据可以理解成hive中用于保存数据库、表、分区或者表字段等基本属性，以及这些属性与HDFS文件对应关系的一个映射。
　　这些映射关系比较常见的一个场景是保存在mysql数据库中。接下来会分析hive安装时的一些配置信息，以及元数据库中主要表的用途。

一、hive配置

　　有关hive的配置都在hive-site.xml文件中。

属性	描述	默认值
hive.metastore.warehouse.dir	指定hive表在hdfs上的存储路径	/user/hive/warehouse
javax.jdo.option.ConnectionURL	配置元数据的连接URL
javax.jdo.option.ConnectionUserName	元数据库连接用户名
javax.jdo.option.ConnectionPassword	元数据库连接密码

比如如下的配置：

<property>
  <name>javax.jdo.option.ConnectionURL</name>
  <value>jdbc:mysql://m000:3306/hive</value>
  <description>JDBC connect string for a JDBC metastore</description>
</property>

<property>
  <name>javax.jdo.option.ConnectionUserName</name>
  <value>hiveuser</value>
  <description>username to use against metastore database</description>
</property>

<property>
  <name>javax.jdo.option.ConnectionPassword</name>
  <value>hiveuser</value>
  <description>password to use against metastor