ubuntu22.04安装MySQL、Hive及Hive连接MySQL操作

前言

这篇文章主要讲述的是ubuntu22.04上数据仓库Hive的安装和使用

正文

建议按照文章实践前稍微通读下全文

安装MySQL服务端和客户端

相关命令:

sudo apt-get install mysql-server

sudo apt-get install mysql-client

修改mysql的配置文件

在终端中输入sudo vim /etc/mysql/mysql.conf.d/mysqld.cnf修改mysql的配置文件

[mysqld]之后,任意新建一行,添加文本skip-grant-tables,并保存

在这里插入图片描述

mysql登录操作

相关命令:

重启mysql服务:service mysql restart

mysql -u root -p 无需输入密码,直接回车,即可登录

在这里插入图片描述

mysql修改登录密码操作

先切换到名为mysql的数据库 use mysql,然后再更新user表中的root用户的密码,本例设置密码为123

相关命令:

update user set authentication_string='123' where user = 'root';

flush privileges;

ALTER USER 'root'@'localhost' IDENTIFIED WITH mysql_native_password BY '123';

退出mysql终端:quit
在这里插入图片描述

恢复前面所修改的mysql配置文件

删除或注释掉所添加skip-grant-tables,并保存

相关命令:

sudo vim /etc/mysql/mysql.conf.d/mysqld.cnf

mysql -u root -p 密码为前面设置的密码123

在这里插入图片描述

在这里插入图片描述

MySQL JDBC驱动程序安装

ubuntu22.04安装MySQL JDBC驱动程序

在这里插入图片描述

Hive的安装部署

将Hive的安装文件“apache-hive-3.1.2-bin.tar.gz”复制到当前用户目录中

在终端中输入 sudo tar -zxvf apache-hive-3.1.2-bin.tar.gz -C /usr/local 命令进行软件包的解压缩

对解压缩输出文件夹进行重命名为Hive,并授予当前用户访问权限

cd /usr/local/

sudo mv apache-hive-3.1.2-bin hive

sudo chown -R lion hive
在这里插入图片描述

将安装的驱动程序文件夹中的JAR文件“mysql-connector-j-8.0.31.jar”复制到Hive安装目录的lib文件夹中

在这里插入图片描述

编辑用户的环境变量配置文件 sudo vim ~/.bashrc

在文件的开头位置,添加如下几行内容:

export HIVE_HOME=/usr/local/hive
export HADOOP_HOME=/usr/local/hadoop
export PATH= P A T H : PATH: PATH:HIVE_HOME/bin

在这里插入图片描述
让环境变量设置生效 source ~/.bashrc

在这里插入图片描述

将“/usr/local/hive/conf”目录下的hive-default.xml.template文件重命名为hive-default.xml,命令如下:

cd /usr/local/hive/conf

sudo mv hive-default.xml.template hive-default.xml

使用vim编辑器新建一个文件hive-site.xml,命令如下:

cd /usr/local/hive/conf

vim hive-site.xml

在hive-site.xml中输入如下配置信息:

<?xml version="1.0" encoding="UTF-8" standalone="no"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration>
  <property>
    <name>javax.jdo.option.ConnectionURL</name>
    <value>jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true</value>
    <description>JDBC connect string for a JDBC metastore</description>
  </property>
  <property>
    <name>javax.jdo.option.ConnectionDriverName</name>
    <value>com.mysql.jdbc.Driver</value>
    <description>Driver class name for a JDBC metastore</description>
  </property>
  <property>
    <name>javax.jdo.option.ConnectionUserName</name>
    <value>hive</value>
    <description>username to use against metastore database</description>
  </property>
  <property>
    <name>javax.jdo.option.ConnectionPassword</name>
    <value>hive</value>
    <description>password to use against metastore database</description>
  </property>
</configuration>

Hive访问MySQL的用户名设置为hive 密码被设置为hive

查看目录“/usr/local/Hadoop/share/Hadoop/common/lib”目录下guava.jar的版本
查看目录“/usr/local/hive/lib”目录下guava.jar的版本
检查hadoop和hive的guava.jar的版本是否一致
如果不一致,则启动hive会出错。
解决方法:删除低版本guava.jar,用高版本的guava.jar代替

如:hadoop 3.1.3的guava为guava-27.0-jre,hive3.1.2的guava为guava-19.0。

在这里插入图片描述

Hive连接MySQL的配置

启动MySQL

在MySQL中为Hive新建数据库

配置MySQL允许Hive接入

相关命令:

create user hive identified by 'hive';

grant all privileges on hive.* to hive@'%' with grant option;

flush privileges;

在这里插入图片描述

启动Hive

启动Hive之前,需要先启动Hadoop集群 伪分布式 start-dfs.sh

再执行如下命令初始化 cd /usr/local/hive bin/schematool -dbType mysql -initSchema

在这里插入图片描述

hive命令启动Hive
在这里插入图片描述

简单操作
在这里插入图片描述

小结

此为经验篇,仅供参考,如果想依葫芦画瓢,最好先决条件一致~

  • 9
    点赞
  • 43
    收藏
    觉得还不错? 一键收藏
  • 4
    评论
根据提供的引用内容,目前在Ubuntu 22.04安装Mangodb可能会遇到困难,因此建议您使用虚拟机安装Ubuntu 20.04版本来安装Hive。以下是在Ubuntu 20.04上安装Hive的步骤: 1.安装Java Hive需要Java环境才能运行,因此首先需要安装Java。在终端中输入以下命令: ```shell sudo apt update sudo apt install default-jdk ``` 2.下载Hive 在Apache Hive官网上下载最新版本的Hive。在终端中输入以下命令: ```shell wget https://mirrors.tuna.tsinghua.edu.cn/apache/hive/hive-3.1.2/apache-hive-3.1.2-bin.tar.gz ``` 3.解压Hive 在终端中输入以下命令解压Hive: ```shell tar -zxvf apache-hive-3.1.2-bin.tar.gz ``` 4.配置环境变量 在终端中输入以下命令打开.bashrc文件: ```shell nano ~/.bashrc ``` 在文件末尾添加以下内容: ```shell export HIVE_HOME=/path/to/hive export PATH=$PATH:$HIVE_HOME/bin ``` 其中,/path/to/hive是你解压Hive的路径。 保存并退出.bashrc文件,然后在终端中输入以下命令使配置生效: ```shell source ~/.bashrc ``` 5.配置Hive 在终端中进入Hive的conf目录: ```shell cd /path/to/hive/conf ``` 复制hive-default.xml.template文件并将其重命名为hive-site.xml: ```shell cp hive-default.xml.template hive-site.xml ``` 使用nano编辑hive-site.xml文件: ```shell nano hive-site.xml ``` 在文件中添加以下内容: ```xml <property> <name>javax.jdo.option.ConnectionURL</name> <value>jdbc:derby:;databaseName=/path/to/metastore_db;create=true</value> <description>JDBC connect string for a JDBC metastore</description> </property> <property> <name>javax.jdo.option.ConnectionDriverName</name> <value>org.apache.derby.jdbc.EmbeddedDriver</value> <description>Driver class name for a JDBC metastore</description> </property> <property> <name>javax.jdo.option.ConnectionUserName</name> <value>hive</value> <description>username to use against metastore database</description> </property> <property> <name>javax.jdo.option.ConnectionPassword</name> <value>hive</value> <description>password to use against metastore database</description> </property> ``` 其中,/path/to/metastore_db是你想要存储Hive元数据的路径。 保存并退出hive-site.xml文件。 6.启动Hive 在终端中输入以下命令启动Hive: ```shell hive ``` 现在,您已经成功地在Ubuntu 20.04上安装Hive

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 4
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值