hive 1.2.2 基于hadoop 2.7.5 搭建

  1. 版本:
    1. jdk:hive 0.14 to 1.1 只能支持到 jdk1.6,从1.2.2开始,要求最近jdk 1.7,推荐1.8,本次采用1.8.0_231  64位
    2. Hadoop:0.13之前的版本支持 Hadoop 0.20.x,0.23.x,后续版本可以使用2.x,1.x版本,但自2.0.0版本后,只能使用2.x
  2. 解压文件:
    1. 下载:http://www.apache.org/dyn/closer.cgi/hive/
    2. 解压文件:tar -zxvf apache-hive-1.2.2-bin.tar.gz
    3. 修改目录名字 :mv apache-hive-1.2.2-bin hive-1.2.2
  3. 修改全局变量:
    1. export HIVE_HOME=/usr/local/src/hive-1.2.2
    2. export PATH=$HIVE_HOME/bin:$PATH
  4. 启动验证:
    1. /usr/local/src/hadoop-2.7.5/sbin/start-all.sh 需要先启动Hadoop,否则会报错
    2. bin/hive 
    3. 官方测试脚本:
      1.      建表:
         CREATE TABLE page_view(viewTime INT, userid BIGINT,
                             page_url STRING, referrer_url STRING,
                             ip STRING COMMENT 'IP Address of the User')
             COMMENT 'This is the page view table'
             PARTITIONED BY(dt STRING, country STRING)
             STORED AS SEQUENCEFILE;

         

      2. 展示表:show tables;
      3. 描述表:DESCRIBE page_view;
  5. 配置hive:
    1. 配置方式分为三种:
      1. 命令行:使用CLI和Beeline后,使用命令 
         set hive.exec.scratchdir=/tmp/mydir;
      2.   --hiveconf 设置

          bin/hive --hiveconf hive.exec.scratchdir=/tmp/mydir

         

      3.  

        使用hive-site.xml设置

         

          <property>
            <name>hive.exec.scratchdir</name>
            <value>/tmp/mydir</value>
            <description>Scratch space for Hive jobs</description>
          </property>

         

      4. 可用于属性:

        hive注册属性
        变量值 变量描述 默认值
        hive.ddl.output.format hive的ddl操作的输出格式,通常为text格式,0.9.0版本后增加json格式 text
        hive.exec.script.wrapper 对脚本操作语句调用的包装 null
        hive.exec.plan hive的执行计划,默认为空,目前没有枚举值 null
        hive.exec.scratchdir

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值