hive建表设置如果为null_Hive--对空值和NULL的处理

本文探讨了Hive中默认将NULL表示为'N'的问题,以及如何通过建表语句或`alter table`命令来指定NULL的表示方式。通过设置`serialization.null.format`,可以将NULL标识为'NULL'或'',从而更好地管理和检索空值数据。这种方法有助于在处理大量NULL值时节省存储空间。
摘要由CSDN通过智能技术生成

问题描述

Hive中默认将NULL存为\N,NULL类型的字符串如何检索?

创建一个测试表及准备测试数据,SQL如下:

create table test_null (id int, age string)

ROW FORMAT DELIMITED

FIELDS TERMINATED BY ','

LINES TERMINATED BY '\n'

STORED AS TEXTFILE;

测试数据如下:

1,23

2,24c

3,32d

4,30

5,NULL

6,\N

将数据Load到test_null表中显示如下:

image.png

如上图所5、6两条数据均显示的为NULL,通过数据我们无法真实的区别那条数据的age真正的为空。

解决方案

通过指定查询条件可以检索出空值和NULL类型字符串数据

使用is null可以检索出存储为\N的数据(即id为6的这条数据)

使用=’NULL’可以检索出为NULL字符串的数据(即id为5的这条数据)

1 可以通过建表语句中指定Hive保存和标识NULL,也可以通过alter修改已存在的表,建表指定方式如下:

create table test_null_1 (id int, age string)

ROW FORMAT DELIMITED

FIELDS TERMINATED BY ','

LINES TERMINA

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值