Hive中metastore的三种方式区别和搭建

最新推荐文章于 2024-07-10 08:30:00 发布

51_big_data

最新推荐文章于 2024-07-10 08:30:00 发布

阅读量967

点赞数

分类专栏： Hive 文章标签： Hive

本文链接：https://blog.csdn.net/qq_20174285/article/details/86345376

版权

本文介绍了Hive中metastore的三种存储方式：内嵌Derby、Local（单用户模式）和Remote（多用户模式）。Derby模式简单但不支持多客户端并发；Local模式需要本地MySQL服务器，适合单用户；Remote模式分为一体和分开两种，适用于多用户场景，需要远程MySQL服务器，并可能涉及服务端与客户端的配置分离。

摘要由CSDN通过智能技术生成

Hive中metastore（元数据存储）的三种方式：
a)内嵌Derby方式
b)Local方式
c)Remote方式
1.本地模式（derby）
这种方式是最简单的存储方式，只需要在hive-site.xml做如下配置便可

<?xml version="1.0"?> <?xml-stylesheet type="text/xsl" href="configuration.xsl"?> javax.jdo.option.ConnectionURL jdbc:derby:;databaseName=metastore_db;create=true javax.jdo.option.ConnectionDriverName org.apache.derby.jdbc.EmbeddedDriver hive.metastore.local true hive.metastore.warehouse.dir /user/hive/warehouse

注：使用derby存储方式时，运行hive会在当前目录生成一个derby文件和一个metastore_db目录。这种存储方式的弊端是在同一个目录下同时只能有一个hive客户端能使用数据库，否则会提示如下错误
[html] view plaincopyprint?
hive> show tables;
FAILED: Error in metadata: javax.jdo.JDOFatalDataStoreException: Failed to start database ‘metastore_db’, see the next exception for details.
NestedThrowables:
java.sql.SQLException: Failed to start database ‘metastore_db’, see