Hive下的变量使用

Hive的变量前面有一个命名空间,包括三个hiveconf,system,env,还有一个hivevar


1. hiveconf的命名空间指的是hive-site.xml下面的配置变量值。
2. system的命名空间是系统的变量,包括JVM的运行环境。
3. env的命名空间,是指环境变量,包括Shell环境下的变量信息,如HADOOP_HOME之类的

 

普通的变量可以使用
         --define key=value
或者 --hivevar key=value
来声明,这都代表是hivevar,的变量。
如:
$ hive --define key=value

简写 hive -d key=value

$ hive --hivevar key=value

添加多个变量的时候如下:

$ hive --define a='a' --define b='b'

  

对于使用hivevar,前缀是可有可无的,如:

hive> create table toss1(i int, ${hivevar:foo} string);

等价于

hive> create table toss2(i2 int, ${foo} string);

  

但是对于使用命名空间如hiveconf,system,env的,前缀则不可少

在hive下面,可以通过
set;
或者
set -v
来查看现有环境的所有变量的值。加上 -v参数,可以获取到HDFS和MapReduce的环境变量信息。

 

一个简单的Sample

hive> set CURRENT_DATE='2012-09-16';
hive> select * from foo where day >= '${hiveconf:CURRENT_DATE}'
similarly, you could pass on command line:

 

hive -f xxx.hql

$ hive -hiveconf CURRENT_DATE='2012-09-16' -hiveconf CURRENT_DATE='2012-09-16' -f test.hql

 

hive -hiveconf mapred.job.queue.name=queue2 -e "set mapred.job.queue.name;"

Hive中,可以使用变量来在SQL文件中传递参数值。有几种方法可以在SQL中使用变量。 一种方法是使用-hivevar参数来定义变量。在SQL文件中,可以使用${变量名}来引用这些变量。例如,可以使用以下命令执行SQL脚本: ``` hive --hivevar minscore=60 --hivevar maxscore=85 -S -f test.sql ``` 在test.sql文件中,可以使用${minscore}和${maxscore}来引用这些变量。 另一种方法是使用-hiveconf参数来定义变量。在SQL文件中,同样可以使用${变量名}来引用这些变量。例如,可以使用以下命令执行SQL脚本: ``` hive -S -d minscore=60 -d maxscore=85 -f test.sql ``` 在test.sql文件中,同样可以使用${minscore}和${maxscore}来引用这些变量。 此外,在shell脚本中也可以定义变量并在Hive使用。例如,可以创建一个shell脚本文件shelltest,其中定义了minscore和maxscore变量,并在Hive使用这些变量: ``` #!/bin/bash minscore=60 maxscore=70 hive -S -e "use hive_test;select * from score where score >= ${minscore} and score <= ${maxscore};" ``` 然后,通过给shell脚本文件赋予执行权限并执行该脚本来运行Hive查询: ``` chmod 777 shelltest sh shelltest ``` 需要注意的是,在命令行或shell脚本中定义变量时,等号左右两侧不能有空格。另外,使用-hiveconf、-hivevar或-d时,如果需要定义多个变量,每个变量前面都需要加对应的参数,一个参数只对应一个变量。在命令行中使用hive -e参数调用变量时,-e参数后面的SQL语句需要使用单引号'',否则无法解析获取到变量。 #### 引用[.reference_title] - *1* *3* [hive变量使用](https://blog.csdn.net/weixin_43990245/article/details/124433738)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^control,239^v3^insert_chatgpt"}} ] [.reference_item] - *2* [Hive开发中使用变量的两种方法](https://blog.csdn.net/peishuai1987/article/details/89882731)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^control,239^v3^insert_chatgpt"}} ] [.reference_item] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值