hadoop，hive组件安装

1.解压安装文件

（1）使用 root 用户，将 Hive 安装包

/opt/software/apache-hive-2.0.0-bin.tar.gz 路解压到/usr/local/src 路径下。

（2）将解压后的 apache-hive-2.0.0-bin 文件夹更名为 hive；

（3）修改 hive 目录归属用户和用户组为 hadoop

2.卸载 MariaDB 数据库

卸载 Linux 系统自带的 MariaDB。

3.安装 MySQL 数据库

（1）按如下顺序依次安装 MySQL 数据库的 mysql common、mysql libs、mysql client

（2）安装 mysql server 软件包。

（3）修改 MySQL 数据库配置，在/etc/my.cnf 文件中添加 MySQL 数据库配置项。

将以下配置信息添加到/etc/my.cnf 文件 symbolic-links=0 配置信息的下方。

default-storage-engine=innodb

innodb_file_per_table

collation-server=utf8_general_ci

init-connect='SET NAMES utf8'

character-set-server=utf8

（4）启动 MySQL 数据库

（5）查询 MySQL 数据库默认密码。

MySQL 数据库安装后的默认密码保存在/var/log/mysqld.log 文件中，在该文件中以 password 关键字搜索默认密码。

（6）MySQL 数据库初始化。

执行 mysql_secure_installation 命令初始化 MySQL 数据库，初始化过程中需要设定

数据库 root 用户登录密码，密码需符合安全规则，包括大小写字符、数字和特殊符号，

可设定密码为 Password123$。

在进行 MySQL 数据库初始化过程中会出现以下交互确认信息：

1）Change the password for root ? ((Press y|Y for Yes, any other key for

No)表示是否更改 root 用户密码，在键盘输入 y 和回车。

2）Do you wish to continue with the password provided?(Press y|Y for Yes,

any other key for No)表示是否使用设定的密码继续，在键盘输入 y 和回车。

3）Remove anonymous users? (Press y|Y for Yes, any other key for No)表示是

否删除匿名用户，在键盘输入 y 和回车。

4）Disallow root login remotely? (Press y|Y for Yes, any other key for No)

表示是否拒绝 root 用户远程登录，在键盘输入 n 和回车，表示允许 root 用户远程登录。

5）Remove test database and access to it? (Press y|Y for Yes, any other key

for No)表示是否删除测试数据库，在键盘输入 y 和回车。

6）Reload privilege tables now? (Press y|Y for Yes, any other key for No)

表示是否重新加载授权表，在键盘输入 y 和回车。

mysql_secure_installation 命令执行过程如下：

（7）添加 root 用户从本地和远程访问 MySQL 数据库表单的授权。

4.配置 Hive 组件

1.设置 Hive 环境变量并使其生效。

# 在文件末尾追加以下配置内容

[root@master ~]# vi /etc/profile

# set hive environment

export HIVE_HOME=/usr/local/src/hive

export PATH=$PATH:$HIVE_HOME/bin

# 使环境变量配置生效

[root@master ~]# source /etc/profile

2.修改 Hive 组件配置文件。

切换到 hadoop 用户执行以下对 Hive 组件的配置操作。

将/usr/local/src/hive/conf 文件夹下 hive-default.xml.template 文件，更名为

hive-site.xml。

（3）通过 vi 编辑器修改 hive-site.xml 文件实现 Hive 连接 MySQL 数据库，并设定Hive 临时文件存储路径。设置 MySQL 数据库连接

2）配置 MySQL 数据库 root 的密码。

3）验证元数据存储版本一致性。若默认 false，则不用修改。

4）配置数据库驱动。

<property>

<name>javax.jdo.option.ConnectionDriverName</name>

<value>com.mysql.jdbc.Driver</value>

<description>Driver class name for a JDBC metastore</description>

</property>

5）配置数据库用户名 javax.jdo.option.ConnectionUserName 为 root。

<property>

<name>javax.jdo.option.ConnectionUserName</name>

<value>root</value>

<description>Username to use against metastore database</description>

</property>

将以下位置的 ${system:java.io.tmpdir}/${system:user.name} 替换为

“/usr/local/src/hive/tmp”目录及其子目录。

<name>hive.querylog.location</name>

<value>/usr/local/src/hive/tmp</value>

<description>Location of Hive run time structured log

file</description>

<name>hive.exec.local.scratchdir</name>

<value>/usr/local/src/hive/tmp</value>

<name>hive.downloaded.resources.dir</name>

<value>/usr/local/src/hive/tmp/resources</value>

<name>hive.server2.logging.operation.log.location</name>

<value>/usr/local/src/hive/tmp/operation_logs</value>

在 Hive 安装目录中创建临时文件夹 tmp。

1）将 MySQL 数据库驱动（/opt/software/mysql-connector-java-5.1.46.jar）拷贝到

Hive 安装目录的 lib 下；

2）重新启动 hadooop 即可

3）初始化数据库

4）启动 hive