hive2.1.1 访问 mysql_mysql与hive2.1.1安装和配置

本文详细介绍了如何在Ubuntu系统上安装MySQL并配置Hive2.1.1以访问MySQL数据库。步骤包括MySQL的在线安装、Hive的下载与解压、环境变量设置、配置文件修改、HDFS目录创建、jdbc驱动添加以及初始化Hive等关键步骤。
摘要由CSDN通过智能技术生成

1.mysql安装

这个安装很简单,是在线安装,只需要按顺序执行一下几个命令就ok了。

(1)sudo apt-get install mysql-server

(2)sudo apt-get install mysql-client

(3)sudo apt-get install libmysqlclient-dev

安装过程会让你给数据库root用户输入密码,不要忽略。然后通过如下命令检查是否安装成功:

sudo netstat -tap | grep mysql

登录验证:

mysql -u root -p

就可以登录到mysql了,可以执行show databases;查看数据库:

8e8a71dee0e039a76cce308ebaab9b09.png

2 hive配置

2.1 下载hive2.1.1安装包,解压到/usr/local目录下,然后用mv命令重命名为hive,然后通过以下命令修改hive目录的读写权限

chown -R 当前用户名 /usr/local/hive

比如我当前用户为hadoop,那么命令就如下:

chown -R hadoop /usr/local/hive

2.2 配置hive环境变量

export HIVE_HOME=/usr/local/hive

export PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$HBASE_HOME/bin:$HIVE_HOME/bin:$JAVA_HOME:$PATH

2.3 进入/usr/local/hive/conf目录,这个目录下存在的文件都是模板,需要复制和改名,要修改的如下

cp hive-env.sh.template hive-env.sh

cp hive-default.xml.template hive-site.xml

cp hive-log4j2.properties.template hive-log4j2.properties

cp hive-exec-log4j2.properties.template hive-exec-log4j2.properties

2.4 在hdfs目录下建立三个文件,用来存放hive信息,并赋予777权限

hdfs dfs -mkdir -p /user/hive/warehouse

hdfs dfs-mkdir -p /user/hive/tmp

hdfs dfs-mkdir -p /user/hive/log

hdfs dfs-chmod -R 777 /user/hive/warehouse

hadoop fs -chmod 777 /user/hive/tmp

hdfs dfs-chmod -R 777 /user/hive/tmp

hdfs dfs-chmod -R 777 /user/hive/log

2.5 修改hive-env.sh文件

export JAVA_HOME=/usr/java/jdk1.7.0_79

export HADOOP_HOME=/usr/local/hadoop

export HIVE_HOME=/usr/local/hive

export HIVE_CONF_DIR=/usr/local/hive/conf

2.6 修改hive-site.xml文件

hive.exec.scratchdir

/user/hive/tmp

hive.metastore.warehouse.dir

/user/hive/warehouse

hive.querylog.location

/user/hive/log

javax.jdo.option.ConnectionURL

jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true&characterEncoding=UTF-8&useSSL=false

javax.jdo.option.ConnectionDriverName

com.mysql.jdbc.Driver

javax.jdo.option.ConnectionUserName

root

javax.jdo.option.ConnectionPassword

123456

2.7 创建/usr/local/hive/tmp文件夹

mkdir /usr/local/hive/tmp

然后在配置文件hive-site.xml中,把所有的${system:java.io.tmpdir} 都替换为/usr/local/hive/tmp,把所有的${system:user.name}替换为${user.name}

2.8 配置jdbc的驱动

下载mysql-connector-java-5.1.30-bin.jar 包,复制放到/usr/local/hive/lib目录下就可以了

2.9 初始化hive,在hive2.0以后的版本,初始化命令都是:

schematool -dbType mysql -initSchema

2.10 初始化成功后,就可以运行hive了,可以检测一下hive是否正常

如果配置了hive的bin环境变量,就可以在任意目录下输入hive,就可以进入hive了

0fc4597f53b7811d31d6a81f10461e04.png

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值