跟我学,一起完成Hive安装部署

详尽的视频讲解,请查看该地址:https://edu.csdn.net/course/detail/9572

1.Mysql安装

1.1在线安装MySQL

使用yum在线安装mysql:yum install mysql-server

1.2查看mysql服务状态

使用service mysqld status 命令查看mysql状态

1.3启动mysql服务

使用service mysqld start命令启动mysql服务

1.4设置mysql root用户密码

Mysql刚刚安装完成,默认root用户是没有密码的,登录mysql设置root用户密码。

第一次登陆输入以下命令:mysql -u root -p

Enter password: 默认没有密码,回车即可。

进入mysql后,输入如下命令设置root用户密码:

set password for root@localhost=password('root');

第二次登陆输入以下命令:mysql -u root -p密码为root

1.5创建hive账号

安装hive客户端,我们使用mysql元数据库,类似与Hadoop安装,需要创建新的用户。

这里比如创建hive 用户

create user 'hive' identified by 'hive';

将mysql所有权限授予hive用户

grant all on *.* to 'hive'@'hadoop03' identified by 'hive';

刷新信息

flush privileges;

查看mysql 用户表user

select host ,user,password from mysql.user;

更新用户信息(授权所有ip连接mysql)

update mysql.user set Host='%' where User = 'root' and Host='localhost'

1.6创建hive数据库

使用hive用户登录mysql

mysql -h hadoop03 -uhive -p (密码为hive)

创建数据库hive

mysql> create database hive;

查看所有数据库

mysql> show databases;

2.Hive 安装配置

2.1下载

CDH版本:http://archive-primary.cloudera.com/cdh5/cdh/5/

这里下载hive-1.1.0-cdh5.10.0.tar.gz版本的安装包,上传至hadoop03(规划节点)节点的/home/hadoop/app目录下。

2.2解压

Hive安装包解压命令:tar -zxvf hive-1.1.0-cdh5.10.0.tar.gz

2.3创建软连接

创建软连接:ln -s hive-1.1.0-cdh5.10.0 hive

2.4修改配置文件

2.4.1修改hive-log4j.properties

Hive安装包解压后只有hive-log4j.properties.template模板文件,需要通过模板拷贝一份hive-log4j.properties文件。

mv hive-log4j.properties.template hive-log4j.properties

vi hive-log4j.properties

hive.log.dir=/home/hadoop/app/hive/logs #目录提前创建

2.4.2修改hive-env.sh

Hive安装包解压后只有hive-env.sh.template模板文件,需要通过模板拷贝一份hive-env.sh文件。

mv hive-env.sh.template hive-env.sh

vi hive-env.sh

export HADOOP_HOME=/home/hadoop/app/hadoop

export HIVE_CONF_DIR=/home/hadoop/app/hive/conf

2.4.3修改hive-site.xml

CDH版本的Hive安装包解压后并没有hive-site.xml文件,可以从Apache版本中的解压文件获取hive-default.xml.template模板文件,然后再拷贝一份hive-site.xml文件。

mv hive-default.xml.template hive-site.xml

vi hive-site.xml

<configuration>

<property>

<name>javax.jdo.option.ConnectionURL</name>

<value>jdbc:mysql://hadoop03/metastore?createDatabaseIfNotExist=true</value>

</property>

<property>

<name>javax.jdo.option.ConnectionDriverName</name>

<value>com.mysql.jdbc.Driver</value>

</property>

<property>

<name>javax.jdo.option.ConnectionUserName</name>

<value>hive</value>

</property>

<property>

<name>javax.jdo.option.ConnectionPassword</name>

<value>hive</value>

</property>

</configuration>

2.5添加mysql驱动包

下载mysql-connector-java-5.1.38.jar,将mysql驱动包拷贝到hive的lib目录下。

3.Hive服务启动与测试

3.1启动HDFS与YARN服务

sbin/start-dfs.sh

sbin/start-yarn.sh

3.2启动hive服务

bin/hive

如果单独配置的Metastore,得先启动metastore服务,然后再启动hive.

bin/hive --service metastore

bin/hive

3.3测试运行

3.3.1创建表

通过hive服务创建表

CREATE TABLE stu(id INT,name STRING) ROW FORMAT DELIMITED FIELDS TERMINATED BY '\t' ;

3.3.2准备测试数据集

创建数据文件

vi /home/hadoop/app/hive/stu.txt

00001 zhangsan

00002 lisi

00003 wangwu

00004 zhaoliu

3.3.3数据加载到Hive表

通过如下命令加载数据到hive表中

load data local inpath '/home/hadoop/app/hive/stu.txt' into table stu;

3.3.4表数据查询

通过标准的sql语句查询hive表数据

select * from stu;

4.Hive图像界面配置运行

4.1下载hive源码包

下载对应版本的hive源码包hive-1.1.0-cdh5.10.0-src.tar.gz,上传至hadoop03(规划节点)节点的/home/hadoop/app目录下。

4.2解压

Hive源码包解压命令:tar -zxvf hive-1.1.0-cdh5.10.0-src.tar.gz

4.3打war包

进入hive源码解压目录对hive源码打hive hwi war包

cd hwi/web

jar cvf hive-hwi-1.0.0.war ./*

cp hive-hwi-1.0.0.war ../../../hive/lib/

4.4修改hive-site.xml配置文件

vi hive-site.xml

<property>

<name>hive.hwi.war.file</name>

<value>lib/hive-hwi-1.0.0.war</value>

<description>This sets the path to the HWI war file, relative to ${HIVE_HOME}. </description>

</property>

<property>

<name>hive.hwi.listen.host</name>

<value>0.0.0.0</value>

<description>This is the host address the Hive Web Interface will listen on</description>

</property>

<property>

<name>hive.hwi.listen.port</name>

<value>9999</value>

<description>This is the port the Hive Web Interface will listen on</description>

</property>

4.5启动hive web 模式

Hive Web 界面的启动命令:hive - -service hwi

#通过浏览器访问 Hive,默认端口为 9999。

http://hadoop03:9999/hwi/

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

易水大数据

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值