15.linux下hive和zeepline安装

前提：
hive配置的时候需要在mysql已经启动，和Hadoop集群已经启动的情况下才可以配置，因为需要这两个的依赖
#---------------------配置-----------------------#

[root@vwmaster conf]# pwd
/opt/bigdata/hadoop/hive110/conf



# 新建hive-site.xml文件
# ------------ thrift => rpc -----------------#
# ipc => 同节点进程之间函数调用
# rpc => 不同节点进程之间函数调用（微服的核心）
#thrift通过一个中间语言IDL(接口定义语言)来定义RPC的数据类型和接口,这些内容写在以.thrift结尾的文件中,
#然后通过特殊的编译器来生成不同语言的代码,以满足不同需要的开发者,比如java开发者,就可以生成java代码,c++开发者可以生成c++代码，
#生成的代码中不但包含目标语言的接口定义,方法,数据类型,还包含有RPC协议层和传输层的实现代码
# --------------------------------------------#

[root@vwmaster conf]# vi hive-site.xml
<?xml version="1.0" encoding="UTF-8" standalone="no"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration>
   <property>
    <name>hive.metastore.warehouse.dir</name>
    <value>/hive110/warehouse</value>
  </property>
  <property>
    <name>javax.jdo.option.ConnectionURL</name>mysql
    <value>jdbc:mysql://20.0.0.100:3306/hive110?createDatabaseIfNotExist=true</value>
  </property>
  <property>
    <name>javax.jdo.option.ConnectionDriverName</name>
    <value>com.mysql.jdbc.Driver</value>
  </property>
  <property>
    <name>javax.jdo.option.ConnectionUserName</name>
    <value>root</value>
  </property>
  <!--本地连接-->
  <property>
    <name>javax.jdo.option.ConnectionPassword</name>
    <value>root</value>
  </property>
</configuration>



# 将mysql-java驱动拷贝到 hive110/lib中

[root@vwmaster lib]# cp /opt/install/hadoop/mysql-connector-java-5.1.38.jar ./



# hive环境变量

export HIVE_HOME=/opt/bigdata/hive110
export PATH=$PATH:$HIVE_HOME/bin


注意：环境变量配完需要source /etc/profile


# 初始化hive

./schematool -dbType mysql -initSchema



# 启动hive访问hiveserver

[root@vwmaster bin]# ./hive




我们需要进入的hive2的用另外的控制台输入
#启动h2


nohup hiveserver2 >/dev/null 2>&1 &
beeline -u jdbc:hive2://192.168.6.200:10000




可能会碰到的问题
如果初始化的时候出错了，我们需要在mysql中授权
use school;

grant all on *.* to root@'%'  identified by 'root';

-- ----------------------zeepline -------------------------- zeepline-site.xml-----

[root@vwmaster conf]# cp zeppelin-site.xml.template zeppelin-site.xml
[root@vwmaster conf]# vi zeppelin-site.xml



<property>
  <name>zeppelin.server.addr</name>
  <value>20.0.0.100</value>
  <description>Server binding address</description>
</property>
<property>
  <name>zeppelin.server.port</name>
  <value>8000</value>
  <description>Server port.</description>
</property>


-- zeepline-env.sh

[root@vwmaster conf]# cp zeppelin-env.sh.template zeppelin-env.sh
[root@vwmaster conf]# vi zeppelin-env.sh
export JAVA_HOME=/opt/bigdata/java/jdk180
export HADOOP_CONF_DIR=/opt/bigdata/hadoop/hadoop260



-- 启动

[root@vwmaster bin]# ./zeppelin-daemon.sh start / stop


-- 访问
http://20.0.0.100:8000
    --配置hive解释器：zeepline未提供hive解释器
    --1、拷贝hive的配置文件
        [root@vwmaster conf]# pwd
        /opt/bigdata/hadoop/zeppelin082/conf
        [root@vwmaster conf]# cp /opt/bigdata/hadoop/hive110/conf/hive-site.xml ./
    --2、拷贝jar包
        [root@vwmaster interpreter]# pwd
        /opt/bigdata/hadoop/zeppelin082/interpreter
        [root@vwmaster interpreter]# cp /opt/bigdata/hadoop/hadoop260/share/hadoop/common/hadoop-common-2.6.0-cdh5.14.2.jar ./jdbc/
        [root@vwmaster interpreter]# cp /opt/bigdata/hadoop/hive110/lib/hive-jdbc-1.1.0-cdh5.14.2-standalone.jar ./jdbc/
    --3、web界面配置hive继承hive
        右上角anonymous => interpreter => 右上角 create =>
            Interpreter Name
                hive110
            Interpreter group
                jdbc
        => 设置properties
            default.driver  org.apache.hive.jdbc.HiveDriver
            default.url     jdbc:hive2://20.0.0.100:10000
            default.user    root
        => 左下角 save
        => 列表中找到 hive110 => 右上角restart
    --4、web界面 create note
        -- zeepline命令行不能有分号
        -- 以%hive110作为第一行