hive中多个字段拼接注意躲避空值坑

最新推荐文章于 2024-04-23 10:18:04 发布
最新推荐文章于 2024-04-23 10:18:04 发布
阅读量1.1w 收藏 5
点赞数 6
文章标签： hive
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lh0912666/article/details/80427623
版权

select concat(leix01,leix02,leix03) from dim_ivr_dictionary where ivr_table like 'zj%' and bm='40102'；

select concat(nvl(leix01,''),nvl(leix02,''),nvl(leix03,'')) from dim_ivr_dictionary where ivr_table like 'zj%' and bm='40102'

如果三个字段都不为空，可以直接使用第一个语句获取拼接字段

若三个字段中包含空值，则使用第一个语句获取的拼接字段为空值，使用第二个语句才可获取正确拼接字段。

切记拼接字段的时候使用nvl预防空值



Sunshine~L&H
关注
  • 6
    点赞
  • 踩
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
hive表新增字段或者修改字段
04-20
hive表新增字段或者修改字段，原理和具体操作
Hive事务管理避坑指南
02-01
Hive作为Hadoop家族历史最悠久的组件之一，一直以其优秀的兼容性支持和稳定性而著称，越来越多的企业将业务数据从传统数据库迁移至Hadoop平台，并通过Hive来进行数据分析。但是我们在迁移的过程中难免会碰到如何将传统数据库的功能也迁移到Hadoop的问题，比如说事务。事务作为传统数据库很重要的一个功能，在Hive中是如何实现的呢？Hive的实现有什么不一样的地方呢？我们将传统数据库的应用迁移到Hive如果有事务相关的场景我们该如何去转换并要注意什么问题呢？本文会通过很多真实测试案例来比较Hive与传统数据库事务的区别，并在文末给出一些在Hive平台上使用事务相关的功能时的指导和建议。为了
sqoop从mysql到hive的时间字段问题
01-07
一、问题发现与分析 问题： 用公司的大数据平台导数，已经开发上线一个多月的一批报表，突然有同事说有个报表数据不准。出在时间字段上。 分析: 1、先看了原数据MySQL字段类型为datetime,目标字段为string类型； 2、经发现所有时间的差距都是8小时，怀疑是因为时区转换的原因； 3、对比其他表，看看是大范围现象还是特殊情况，发现其他的同样情况字段的一样没有问题 二、解决办法 经过对比：sqoop在转换MySQL的datatime字段类型为hive的string时会出现问题：默认先转为对应时间戳，再转换为北京市区时间，就会使时间多8小时。 解决办法有两个： 1、在sql里将时间字段转换为
hive字段拼接
weixin_46767998的博客
09-06 7352
hive工作中用到的一些拼接函数 concat(string s1, string s2, string s3) 这个函数能够把字符串类型的数据连接起来，连接的某个元素可以是列值。 如 concat( aa, ‘:’, bb) 就相当于把aa列和bb列用冒号连接起来了，aa:bb。 cast 用法：cast(value as type) 功能：将某个列的值显示的转化为某个类型 例子：cast(age as string ) 将int类型的数据转化为了String类型 concat_ws(seperator
hive补全连续或非连续空值数据sql
chimchim66的博客
12-01 1422
hive补全连续或非连续空值数据sql
hive字符串拼接常用方法
热门推荐
MusicDancing的博客
09-03 3万+
hive中常用的一些拼接函数 1. concat() 实现把若干个字段(字段类型可不相同)数据拼接起来 用法: concat(string a1, int a2, float a3) select concat("aa", 11, 2.2); aa112.2 不同字段之间用分隔符连接("_") select concat("aa","_",11,"_",2.2); aa_11_2.2 2. concat_ws() 使用分隔符将若干个字符串拼接起来，实现“列转行” 用法: 其...
hive中多个字段拼接注意躲避空值坑，使用nvl函数
Tak-Wah Blog
02-28 2257
（1）如果三个字段都不为空，直接使用如下语句获取拼接字段： select concat(leix01, leix02, leix03) from dim_ivr_dictionary; （2）若三个字段中包含空值，则使用（1）语句获取的拼接字段为空值，需要使用如下语句才可获取正确拼接字段： select concat(nvl(leix01,''), nvl(leix02,''), nvl(l...
hive中的拼接函数（concat,group_concat,concat_ws,collect_set）
zll_1234的博客
05-25 1万+
1、concat concat() 函数用于将多个字符串连接成一个字符串。 concat(string s1, string s2, string s3,…)表示通过s1、s2和s3连接一起 举例： +----+--------+ | id | name | +----+--------+ | 1 | city | +----+--------+ CONCAT(id,’:’,name) = 1:city 2、concat_ws concat_ws() 指定参数之间的分隔符 concat_ws(s
hive中的拼接函数contact,concat_ws,collect_set()及explode()，lateral view函数
mojolang
03-08 6821
hive工作中用到的一些拼接函数。 一， concat(string s1, string s2, string s3) 这个函数能够把字符串类型的数据连接起来，连接的某个元素可以是列值。 如 concat( aa, ‘:’, bb) 就相当于把aa列和bb列用冒号连接起来了，aa:bb。 二， cast 用法：cast(value as type) 功能：将某个列的值显示的转化为某个类型 例...
Hive中查询操作
01-20
starting with Hive 0.13.0) SELECT [ALL | DISTINCT] select_expr, select_expr, ... FROM table_reference [WHERE where_condition] [GROUP BY col_list] [ORDER BY col_list] [CLUSTER BY col_list | [DISTRIBUTE...
0738-6.2.0-如何在Hive中使用多分隔符
01-07
文档编写目的 Hive在0.14及以后版本支持字段的多分隔符，参考: ... 而Fayson在以前的文章中也基于C5...如何将多个字符作为字段分割符的数据文件加载到Hive表中，示例数据如下： 字段分隔符为“@#$” test1@#$test1name@#$t
hive向上补齐空值
硅谷工具人
03-08 2209
准备的数据，现在要求将b, c两列中空白的值使用前面的值补充。 补充完的结果需要如下： 第一步： 确定数据是否有行号，如果没有，则自己增加一列行号，如准备数据的a列。如果已经有，此步可忽略。 第二步： 增加两列b1,c1, 将空值设置为0，非空值设置为1。 select a,b,c, case when b = '' or b is null then 0 else 1 end b1,...
hive sql 数据汇总成数组以及用&&拼接数组中每一个元素
风逍遥-ygq
03-22 8121
with price_group_01 as( select partner_id, collect_set(pgd) as pgd_set from (select distinct partner_id, concat(division,'-',price_group_description) as pgd from ccsd.tb_cpp_et...
pyspark 拼接hive table所有的列
huangqihao723的博客
05-31 1315
表名：data 构成：data.printSchema() 可以看到有map类型的大字段以及其他string or long or timestamps字段 #解决方法： 1.针对map类型大字段，利用hive中的concat_ws函数即可完成里面所有字段的拼接 2.除大字段外，剩余的字段在data样例中不多，直接用concat函数进行拼接 若剩余字段字段比较多，不想手工敲，那...
Hive的NULL值求和与求平均
iiiitttttt的博客
04-21 4935
Hive的NULL值求和求平均 sum(列1) : 这一列直接求和的时候遇到NULL值是会忽略不计的 avg(列1) : 直接求平均值的时候遇到NULL值也是忽略不计，其他有值的正常计算 列1+列2：如果两列里有其中一列为NULL的话，那么结果就是为null的 count(列1)：如果列1里边有NULL的话是不进行计算的 count(*) ：在进行统计计数的时候，所有的列都进行计算，包括NULL也算 1-函数对NULL值的求和求平均 首先来看这段代码 with temp as (select null
Hive-sql拼接字段
weixin_43829532的博客
11-27 3087
将字段用collect_set()转化为数组，再用concat_ws()拼接 例子： concat_ws(’,’,collect_set(a.cuid)) as cuid
hive sql中的字符组合/字符拼接函数
tutu_a的博客
02-01 4227
1.简单拼接 Concat(str1,str2,str3,……) 函数返回结果为函数中的几个参数连接组成的字符串，如果参数中有一个为null，则返回值为null。 Eg: select concat(‘每天’,’都要’,’开心’) Result:’每天都要开心’ ; 2.可自定义拼接时的间隔符 concat_ws(separater,str1,str2,str3,……) ，第一个参数为其他参数的分隔符，分隔符放在要连接的两个字符之间，分隔符可以是一个字符也可以是其它参数。 Eg: select concat
Hive服务详解
最新发布
喻师傅的学习笔记
04-23 633
hive服务
hive空值处理写成一个字段
06-09
在Hive中，可以使用COALESCE函数将多个字段的空值处理为一个字段。具体语法如下： ``` SELECT COALESCE(col1, col2, col3, 'default') AS new_col FROM table_name; ``` 其中，COALESCE函数接受多个参数，它会从左...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值