Hive部署本地模式

最新推荐文章于 2024-09-06 19:14:58 发布

千锋IT教育

最新推荐文章于 2024-09-06 19:14:58 发布

阅读量777

点赞数

分类专栏：大数据从0到1的完美落地文章标签：大数据 hive mysql

本文链接：https://blog.csdn.net/longz_org_cn/article/details/130965057

版权

本文介绍了如何在本地模式下配置Hive，使用MySQL替代Derby存储元数据。内容包括安装MySQL，配置Hive环境，修改配置文件以连接MySQL，以及启动Hive服务的过程。注意在配置中，需要确保MySQL服务运行，修改hive-site.xml的特殊字符，并将MySQL驱动添加到Hive的lib目录。

摘要由CSDN通过智能技术生成

本地模式

使用mysql替换derby进行元数据的存储，hive的相关进程都是在同一台机器上，即本地模式。mysql因为是独立的进程，所以mysql可以和hive在同一机器上，也可以在其他机器上。

说明：

通常使用关系型数据库来进行元数据存储（mysql、oracle等执行带jdbc驱动的数据库）

优点：支持多session

缺点：需要配置、还需要安装mysql等关系型数据库

配置安装mysql

安装包准备

通过SSH工具，将MySQL的RPM安装包上传到Linux的 ~/software 目录下。

MySQL的RPM安装包，可以在MySQL的官网下载，也可以直接使用课程提供的资料。 注意事项:
- 在官网下载安装包的时候，注意版本号
- mysql-8.0.26-1.el7.x86_64.rpm-bundle.tar
- 这里的el7，表示适用于CentOS7的版本。注意，不要下载el6的。
- x86_64: 这个表示arm版本的CentOS，如果是amd64架构的，可以选择x64。
复制代码

安装前准备

 # CentOS7中，系统默认采用的数据库是mariadb，这个数据库与MySQL冲突!
# 因此，在安装MySQL之前，需要先将其卸载!
[root@qianfeng01 ~]# rpm -qa | grep mariadb 	# 查询是否已经安装了mariadb 
mariadb-libs-5.5.68-1.el7.x86_64 				# 查询结果。如果没有这个结果，说明没有安装。

# 强制卸载mariadb
# --nodeps: 强制卸载，