CentOS 7 MySql&Hive 1.2.2安装

第一部分：MySql安装

        1. 下载mysql的repo源
        wget http://repo.mysql.com/mysql-community-release-el7-5.noarch.rpm
        安装mysql-community-release-el7-5.noarch.rpm包
        sudo rpm -ivh mysql-community-release-el7-5.noarch.rpm

        2. 安装mysql
        yum install mysql-server

        3. 启动MySQL
        systemctl start  mysqld.service 或 service mysqld start
    
        4. 查看MySQL运行状态
        systemctl status mysqld.service 或 service mysqld status

        5. 关闭MySQL
        systemctl stop mysqld.service 或 service mysqld stop

        6. 设置用户名和密码
        mysqladmin -u root password
        New password:1

        7. 测试登录是否成功
        mysql -u root -p1

        8. 配置mysql权限
        grant all privileges on *.* to 'root'@'master' identified by '1' with grant option;
        grant all privileges on *.* to 'root'@'slave1' identified by '1' with grant option;
        grant all privileges on *.* to 'root'@'slave2' identified by '1' with grant option;
        flush privileges;
    
        service mysqld restart
    
        9. 验证权限
        mysql -u root -p1 -hmaster

第二部分：Hive 1.2.2安装

1. 下载软件包
        wget http://mirror.bit.edu.cn/apache/hive/hive-1.2.2/apache-hive-1.2.2-bin.tar.gz
        解压
        tar zxvf apache-hive-1.2.2-bin.tar.gz
        mv apache-hive-1.2.2-bin hive-1.2.2-bin
    
        2. 服务端——修改Hive配置文件(Master)
        cd apache-hive-1.2.2-bin/conf
        vim hive-site.xml

<configuration>
    <property>
        <name>javax.jdo.option.ConnectionURL</name>
        <value>jdbc:mysql://master:3306/hive?createDatabaseIfNotExist=true</value>
    </property>
    <property>
        <name>javax.jdo.option.ConnectionDriverName</name>
        <value>com.mysql.jdbc.Driver</value>
    </property>
    <property>
        <name>javax.jdo.option.ConnectionUserName</name>
        <value>root</value>
    </property>
    <property>
        <name>javax.jdo.option.ConnectionPassword</name>
        <value>1</value>
    </property>
    <property>
        <name>hive.metastore.warehouse.dir</name>
        <value>/hive/warehouse</value>
    </property>
    <property>
        <name>hive.exec.scratchdir</name>
        <value>/hive/tmp</value>
    </property>
    <property>
        <name>hive.querylog.location</name>
        <value>/hive/log</value>
    </property>
</configuration>

        3. 创建hive-site.xml文件中指定的目录
        hadoop fs -mkdir -p /hive/warehouse
        hadoop fs -mkdir -p /hive/tmp
        hadoop fs -mkdir -p /hive/log
    
        4. 设置hdfs目录权限
        hadoop fs -chmod 777 /hive/warehouse
        hadoop fs -chmod 777 /hive/tmp
        hadoop fs -chmod 777 /hive/log
    
        5. 配置环境变量
        vim ~/.bashrc

# hive
export HIVE_HOME=/usr/local/src/hive-1.2.2-bin
export PATH=$PATH:$HIVE_HOME/bin

        6. 配置hive-env.sh & hive-log4j.properties
        cp hive-env.sh.template hive-env.sh
        vim hive-env.sh

export HADOOP_HOME=/usr/local/src/hadoop-2.6.1
export HIVE_CONF_DIR=/usr/local/src/hive-1.2.2-bin/conf

        cp hive-log4j.properties.template hive-log4j.properties
        vim hive-log4j.properties

#hive.log.dir=${java.io.tmpdir}/${user.name}
hive.log.dir=/usr/local/src/hive-1.2.2-bin/logs

        mkdir -p /usr/local/src/hive-1.2.2-bin/logs

        7. 安装MySQL连接工具
        下载安装包
        mysql-connector-java-5.1.41.tar.gz
        
        tar -zxvf mysql-connector-java-5.1.41.tar.gz
        cp mysql-connector-java-5.1.41/mysql-connector-java-5.1.41-bin.jar /usr/local/src/apache-hive-1.2.2-bin/lib

        8. 拷贝jline-2.12.jar至/usr/local/src/hadoop-2.6.1/share/hadoop/yarn/lib/目录
        mv jline-0.9.94.jar jline-0.9.94.jar.bak
        
        cp /usr/local/src/hive-1.2.2-bin/lib/jline-2.12.jar /usr/local/src/hadoop-2.6.1/share/hadoop/yarn/lib/
        
        9. 格式化mysql数据库
        cd /usr/local/src/apache-hive-1.2.2-bin/bin
        ./schematool --dbType mysql --initSchema

        
        10. 启动metastore服务
        hive --service metastore &

        
        11. 客户端
        scp -r /usr/local/src/hive-1.2.2-bin/ slave1:/usr/local/src/
        scp -r /usr/local/src/hive-1.2.2-bin/ slave2:/usr/local/src/
        
        修改Hive配置文件

<configuration>
    <property>
        <name>hive.metastore.uris</name>
        <value>thrift://master:9083</value>
        <description>IP address(or fully-qualified domain name) and port of the metastore host</description>
    </property>
    <property>
        <name>javax.jdo.option.ConnectionURL</name>
        <value>jdbc:mysql://master:3306/hive?createDatabaseIfNotExist=true</value>
    </property>
    <property>
        <name>javax.jdo.option.ConnectionDriverName</name>
        <value>com.mysql.jdbc.Driver</value>
    </property>
    <property>
        <name>javax.jdo.option.ConnectionUserName</name>
        <value>root</value>
    </property>
    <property>
        <name>javax.jdo.option.ConnectionPassword</name>
        <value>1</value>
    </property>
    <property>
        <name>hive.metastore.warehouse.dir</name>
        <value>/hive/warehouse</value>
    </property>
    <property>
        <name>hive.exec.scratchdir</name>
        <value>/hive/tmp</value>
    </property>
    <property>
        <name>hive.querylog.location</name>
        <value>/hive/log</value>
    </property>
</configuration>