Hive的配置与搭建

以下所需要的压缩包已通过百度网盘分享(提取码fgfa):

hive安装包,提取码fgfahttps://pan.baidu.com/s/12RvjPUHWGG-KCZ74wJUVQwhttps://pan.baidu.com/s/12RvjPUHWGG-KCZ74wJUVQw

环境:虚拟机,Linux和hadoop集群

一.安装MySQL

1.rpm -qa|grep -i mysql  查看MySQL是否安装

2.rpm -e --nodeps mysql-libs-5.1.71-1.el6.x86_64删除系统自带MySQL

3.tar -vxf MySQL-5.5.54-1.linux2.6.x86_64.rpm-bundle.tar -C /opt/modules/

将MySQL-5.5.54-1.linux2.6.x86_64(百度网盘中的)上传到softwares并解压到opt/modules目录下

4.在modules目录下安装离线MySQL,依次执行以下操作:

rpm -ivh MySQL-server-5.5.54-1.linux2.6.x86_64.rpm

rpm -ivh MySQL-devel-5.5.54-1.linux2.6.x86_64.rpm

rpm -ivh MySQL-client-5.5.54-1.linux2.6.x86_64.rpm

MySQL-embedded-5.5.54-1.linux2.6.x86_64.rpm

5.①service mysql start         启动MySQL

mysqladmin -u root password 123456        将MySQL密码更改为123456

mysql -u root -p         登录Mysql

6. /usr/share/mysql目录下的my-huge.cnf 文件复制到/etc目录下,并改名为my.cnf;并设置etc/my.cnf文件,将#binlog_format=mixed这一行前面的#去掉,并保存退出;最后重启mysql即可

cp /usr/share/mysql/my-huge.cnf  /etc/my.cnf 复制并改名

vi /etc/my.cnf   将注释掉的binlog_format=mixed去掉#

重启mysql: service mysql restart

7.输入mysql -u root -p后输入密码123456进入mysql

(退出mysql命令: exit;)

二 .搭建数据仓库hive

1.在softwares文件夹中上传并解压hive压缩包至modules文件中

tar -zxvf apache-hive-2.1.0-bin.tar.gz  -C /opt/modules

2.在modules文件中重命名apache-hive-2.1.0-bin为hive-2.1.0

mv apache-hive-2.1.0-bin/ hive-2.1.0

3. 添加环境变量

输入vi /etc/profile在最后一行添上::

export HADOOP_HOME=/opt/modules/hadoop-2.6.5

export HIVE_HOME=/opt/modules/hive-2.1.0

后保存退出, 使文件生效source /etc/profile

4. 将jar文件(百度网盘中的mysql-connector-java-5.1.46.jar)上传到softwares文件夹中后,将此驱动添加到hive-2.1.0/lib目录下:

 cp mysql-connector-java-5.1.46.jar /opt/modules/hive-2.1.0/lib/

再进入hive-2.1.0文件下的conf文件中创建hive-site.xml: touch hive-site.xml

5.对hive-site.xml文件添加相关配置:

<?xml version="1.0" encoding="UTF-8" standalone="no"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration>
  <property>
    <name>javax.jdo.option.ConnectionURL</name>
    <value>jdbc:mysql://slave1.hadoop:3306/metastore?createDatabaseIfNotExist=true</value>
  </property>
  <property>
    <name>javax.jdo.option.ConnectionDriverName</name>
    <value>com.mysql.jdbc.Driver</value>
  </property>
  <property>
    <name>javax.jdo.option.ConnectionUserName</name>
    <value>root</value>
  </property>
  <property>
    <name>javax.jdo.option.ConnectionPassword</name>
    <value>123456</value>
  </property>
  <property>
    <name>hive.cli.print.header</name>
    <value>true</value>
  </property>
  <property>
    <name>hive.cli.print.current.db</name>
    <value>true</value>
  </property>
</configuration>

注意:后续报错可能就是由于使用上述代码,未注意代码中的主机名,端口号,密码等是否与自己相符,所以需要读者自行进行更改.

6.进入hive安装目录下初始化metastore;

bin/schematool -dbType mysql -initSchema

 尾部出现schemaTool completed就代表成功了

7.启动hive

在hive目录下输入: bin/hive  即可启动hive

  • 3
    点赞
  • 1
    评论
  • 0
    收藏
  • 一键三连
    一键三连
  • 扫一扫,分享海报

©️2021 CSDN 皮肤主题: 游动-白 设计师:白松林 返回首页
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、C币套餐、付费专栏及课程。

余额充值