23.大数据---Hive安装之本地模式和远程模式

Hive安装之本地模式和远程模式

本地和远程模式安装配置方式大致相同,本质上是将Hive默认的元数据存储介质由自带的Derby数据库替换为MySQL数据库,这样无论在任何目录下以任何方式启动Hive,只要连接的是同一台Hive服务,那么所有节点访问的元数据信息是一致的,从而实现元数据的共享。下面就以本地模式为例,讲解安装过程。

本地模式的Hive安装主要包括两个步骤:首先安装MySQL服务,再安装Hive。具体步骤如下:

1.安装数据库mysql

Mysql的安装方式:
1.先检查系统是否装有mysql
rpm -qa | grep mysql
2.下载mysql的repo源
wget http://repo.mysql.com/mysql-community-release-el7-5.noarch.rpm
如果报错: -bash: wget: 未找到命令
安装插件 yum -y install wget(wget就是给一个地址直接下载)
3.安装 mysql-community-release-el7-5.noarch.rpm包
sudo rpm -ivh mysql-community-release-el7-5.noarch.rpm
4.安装MySQL
sudo yum install mysql-server
5.重置MySQL密码
mysql -u root
如果报错:
ERROR 2002 (HY000): Can’t connect to local MySQL server through socket ‘/var/lib/mysql/mysql.sock’ (2)
原因:原因是/var/lib/mysql的访问权限问题。
chown root /var/lib/mysql/
重启MySQL服务
service mysqld restart
接着登陆设置密码
mysql -u root
use mysql;
update user set password=password(‘123456’) where user=‘root’;
exit;
6.重启MySQL服务
service mysqld restart
接着设置Root账户远程连接密码,账户和密码都是 root
mysql -u root -p
GRANT ALL PRIVILEGES ON . TO root@“%” IDENTIFIED BY “root”;

grant all privileges on . to ‘root’@‘%’ identified by ‘root的密码’ with grant option;
重启服务器
service mysqld restart
7.使用外网工具连接MySQL
连接mysql的用户名和密码都是 root
关闭防火墙
systemctl stop firewalld.service

至此,安装MySQL成功,可用使用命令查看:

启动MySQL服务:systemctl start mysqld.service
查看MySQL服务当前状态:systemctl status mysqld.service
在这里插入图片描述
停止MySQL服务:systemctl stop mysqld.service

设置mysql服务开机自启动:systemctl enable mysqld.service

停止mysql服务开机自启动:systemctl disable mysqld.service

MySQL连接并登陆MySQL服务
在这里插入图片描述

Navicat连不上!

解决方法:
一、端口设置
1.查看当前机子MySQL的端口号:
mysql>show global variables like ‘port’;

Tips:
3306,也是Navicat的默认端口。
在这里插入图片描述

2.检查防火墙状态:

Centos7以下:service iptables status
Centos7以上:systemctl status firewalld.service
若查无3306端口,请开启。
当然,你也可以简单除暴些——关闭防火墙:

Centos7以下:service iptables stop
Centos7以上:systemctl stop firewalld.service
在这里插入图片描述

二、权限设置
1.赋予ip权限:
mysql> grant all privileges on . to ‘root’@‘%’ identified by ‘pwd’ with grant option;

grant all privileges on . to ‘root’@‘%’ identified by ‘root的密码’ with grant option;
在这里插入图片描述

Tips:
root为数据库用户名,pwd为数据库密码。
这表示给本地 ip赋予了所有的权限,包括远程访问权限,%表示允许任何 ip访问数据库。

2.重新加载,使配置生效:
mysql> flush privileges;
在这里插入图片描述

3.检查一下,命令查看是否修改成功:
mysql> select host,user from user;
在这里插入图片描述

4.退出数据库:
mysql> exit

5.重启数据库:
systemctl restart mysqld.service
在这里插入图片描述

2.Hive的配置

1.在原先解压出来的基础上进行:
在这里插入图片描述
2.修改hive-env.sh配置文件,配置Hadoop环境变量
进入Hive安装包下的conf文件夹,将hive-env.sh.template文件进行拷贝并重命名为hive-env.sh,具体指令如下:
在这里插入图片描述
cp hive-env.sh.template hive-env.sh
在这里插入图片描述
3.使用命令:vi hive-env.sh修改配置文件,在48行修改Hadoop环境变量。如下图所示。(或者用编辑器)
在这里插入图片描述
在这里插入图片描述
上述操作是设置Hadoop环境变量,作用是无论系统是否配置Hadoop环境变量,在Hive执行时,一定能够通过hive-env.sh 配置文件去加载Hadoop环境变量,由于在部署Hadoop集群时已经配置了全局Hadoop环境变量,因此可以不设置该参数。
在这里插入图片描述
这个里边如果是localhost就出现提示密码错误和权限问题;
可以用ip地址或者机器名字:
在这里插入图片描述
或者:
在这里插入图片描述

4.添加hive-site.xml配置文件,配置MySQL相关信息
由于Hive安装包conf目录下,没有提供hive-site.xml文件,这里需要创建并编辑一个hive-site.xm1配置文件,具体内容如下所示:

完成配置后,Hive就会把默认使用Derby数据库方式所覆盖。这里需要注意的是,由于使用了MySQL数据库,那么就需要上传MySQL连接驱动的Jar包到Hive安装包的lib文件夹下。

5.添加mysql的connect的jar包
/usr/local/hive/apache-hive-1.2.1-bin/lib/
在这里插入图片描述
如果使用远程模式的安装方式,只需要将hive-site.xm1配置文件中的localhost修改为具有MySQL服务的节点IP即可,这样无论用户通过什么路径下启动Hive客户端,都可以访问相同的元数据信息。

  1. 环境变量配置
      配置完毕后对环境变量进行配置:vim /etc/profile(可以通过工具也可以)
      在这里插入图片描述
     7.hive启动使用方式
     
      启动须知:使用hive前,需要将HDFS和YARN进行启动,再使用HIVE.
      最简单的方式是start-all.sh 直接把集群启动;
      也可以分别启动 hdfs;和yarm
    start-dfs.sh
    start-yarn.sh
    在这里插入图片描述
    如果不启动 分布式的:出错:连接被拒绝
    在这里插入图片描述

正常启动后:
在这里插入图片描述
这里就已经使用到了远程模式来进行hive的安装;并且在mysql中创建了对应的数据库 hive
在这里插入图片描述

如果启动的时候出错:
在这里插入图片描述

检查集群是否正处于安全模式

查看安全模式状态

  • hadoop dfsadmin –safemode get

进入安全模式状态

  • hadoop dfsadmin –safemode enter

离开安全模式状态

  • hadoop dfsadmin –safemode leave

节点扩展连接操作:(扩展操作)

  • 0
    点赞
  • 5
    收藏
  • 打赏
    打赏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
©️2022 CSDN 皮肤主题:大白 设计师:CSDN官方博客 返回首页
评论

打赏作者

学无止境的大象

你的鼓励将是我创作的最大动力

¥2 ¥4 ¥6 ¥10 ¥20
输入1-500的整数
余额支付 (余额:-- )
扫码支付
扫码支付:¥2
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、C币套餐、付费专栏及课程。

余额充值