hive map 转string_Hive之SELECT语句的实用技巧 (一) | 每日五分钟学大数据

最新推荐文章于 2022-09-20 22:10:12 发布

weixin_39926311

最新推荐文章于 2022-09-20 22:10:12 发布

阅读量935

点赞数

文章标签： hive map 转string hive 将null值替换为0 hive 数组 hive编程指南 hive编程指南pdf select count(*) from返回的类型

SELECT是SQL中的射影算子，FROM子句标识了从哪个表、视图或嵌套查询中选择记录。对于一个给定的记录，SELECT指定了要保存的列以及输出函数需要调用的一个或多个列(例如，像 count(*) 这样的聚合函数)。来看这样一个数据类型稍复杂的例子

CREATE TABLE employees (name STRING,salary  FLOAT,subordinates ARRAY,deductions MAP,address STRUCT)PARTITIONED BY (country STRING, state STRING);

当用户选择的列是集合数据类型时，Hive会使用JSON 语法应用于输出。subordinates 列为一个数组，其值使用一个被括在内的以逗号分隔的列表进行表示。注意，集合的字符串元素是加上引号的，而基本数据类型STRING的列值是不加引号的。

hive> SELECT  subordinates FROM employees;["Mary Smith", "Todd Jones”] ["Bill King"]

deductions列是一个MAP,其使用JSON格式来表达map,即使用一个被括在｛...｝内的以逗号分隔的键：值对列表进行表示：

hive> SELECT deductions from employees;{”FederalTaxes" : 0.2, HState Taxes" : 0.05, ''Insurance": 0.1}

最后，address列是一个STRUCT,其也是使用JSON map格式进行表示的:

hive> SELECT name, address FROM employees;{ "street" : nl Michigan Ave. ", "city” ："Chicago*', "state**: nIL", nzip":60600}

接下来，让我们看看如何引用集合数据类型中的元素。首先，数组索引是基于0的，这个和在Java中是一样的。这里是一个选择subordinates数组中的第1个元素的查询:

hive> SELECT name, subordinates[0] FROM employees; John DoeMary SmithTodd JonesBill King

注意，引用一个不存在的元素将会返回NULL。同时，提取出的STRING数据类型的值将不再加引号！为了引用一个MAP元素，用户还可以使用ARRAY[.„]语法，但是使用的是键值而不是整数索引。最后，为了引用STRUCT中的一个元素，用户可以使用“点”符号，类似于前面提到的 “表的别名.列名”这样的用法：

hive> SELECT name, address.city FROM employees;John DoeMary SmithTodd JonesBill King

WHERE子句中同样可以使用这些引用方式，后面还会有一篇特别介绍where语句。 其他的一些SELECT技巧1. 使用正则表达式来指定列我们甚至可以使用正则表达式来选择我们想要的列。下面的查询将会从表Stocks中选择symbol列和所有列名以price作为前缀的列:

hive> SELECT symbol, 'price.*' FROM stocks;

2. 算术运算符Hive中支持所有典型的算术运算符

运算符	类型	描述
A + B	数值	A和B相加
A-B	数值	A减去B
A*B	数值	A和B相乘
A/B	数值	A除以B。如果能整除，那么返回商数(译者注：商数是一个整数，表示在不考虑有余数的情况下，除数可以除被除数的次数)
A%B	数值	A除以B的余数
A&B	数值	A和B按位取与
A\|B	数值	A和B按位取或
~A	数值	A按位取反