hive环境详细搭建过程

1.hive基本安装配置

1.1下载mysql国内rpm包

国内镜像源下载地址：http://mirrors.ustc.edu.cn/mysql-ftp/Downloads/MySQL-5.7/
需要下载server包，client包，common包和lib包

重启mysql服务并查看状态

使用数据库连接工具Navicat连接

1.2Hive安装配置

安装包选择安装在/opt目录下

配置profile文件

检查配置是否正确

元数据库初始化

执行hive启动hive命令行界面

创建数据库testdb

2.利用mysql配置元数据库

hive-site.xml配置
在node01上安装hive
把以下配置添加到hive-site.xml文件中

<?xmlversion="1.0"encoding="UTF-8"standalone="no"?> <?xml-stylesheettype="text/xsl"href="configuration.xsl"?> javax.jdo.option.ConnectionURL jdbc:mysql://node01/metastore?createDatabaseIfNotExist=true&useSSL=false javax.jdo.option.ConnectionDriveName com.mysql.jdbc.Driver javax.jdo.option.ConnectionUserName root javax.jdo.option.ConnectionPassword 123456 上传mysql驱动JAR 下载地址: [https://mvnrepository.com/artifact/mysql/mysql-connector-java/5.1.38).

初始化

查看数据库
showdatabases;

在node03上上传mysql-connector-java-5.1.38.jar

hive查看node03上的表信息

检查配置结果

3.元数据库Server配置

3.1远程拷贝Hive

node01上远程拷贝Hive安装目录到node02上

配置profile

执行hive命令，查看表

把node01和node03作为客户端配置

启动Server

检查配置结果

4.HCatalog配置

修改hcat_server.sh

编辑hcat_server.sh脚本

创建hcatalog日志目录

启动HCatalog服务

启动WebHCat服务

5.hiveserver2和beeline配置

在node01上修改core-site.xml

在node01上启动hiveserver2

beeline连接访问
能查询出数据库表示配置成功

6.实验心得体会

Hive搭建的过程中遇到MSQL数据库无法安装，之后找到在上网查找相关的资料原来是端口号被占用了，才得以解决。之后将继续提升自己不断进步。