Hive中利用正则表达式过滤列名

最新推荐文章于 2022-01-27 15:22:51 发布
最新推荐文章于 2022-01-27 15:22:51 发布
阅读量2.6k 收藏 3
点赞数
分类专栏： sql hive 文章标签： Hive
sql 同时被 2 个专栏收录
4 篇文章 0 订阅
订阅专栏
hive
3 篇文章 0 订阅
订阅专栏

Hive中利用正则表达式过滤列名

Hive 0.13.0之后，select列表支持正则表达式了，如果想要查询除了某个列以外的其他字段的内容，可以使用以下方式，而不是把字段名全部敲出来了。

select `(col_name1|col_name2|col_name3)?+.+`  from table;

其中col_name* 是指不要查询的列名。

Fantastic_Liar
关注
  • 0
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
15/18位身份证号码验证的正则表达式总结（详细版）
12-13
前言 开发过程中，常常需要对一些输入信息进行有效性验证，使用正则表达式进行校验是最简单、效率最高的方式了，下面就来看看15/18位身份证号码验证的正则表达式吧。 介绍 xxxxxx yyyy MM dd 375 0     十八位 xxxxxx    yy MM dd   75 0     十五位 地区： [1-9]\d{5} 年的前两位： (18|19|([23]\d))            1800-2399 年的后两位： \d{2} 月份： ((0[1-9])|(10|11|12)) 天数： (([0-2][1-9])|10|20|30|31)          闰年不能禁止
Hive中利用正则表达式选择除指定列名以外的列的SQL语法
笔记本
07-15 2611
HiveSQL利用正则表达式可以选取指定的列，不用写出所有列名 select `(anything)?+.+` from dual ; anything可以换成任意列名，多个列名之间用“|”连接 如果从多个表取数,则可以在表达式前面加表别名 select a.`(anything)?+.+` ,b.`(anything)?+.+` from table_a a left outer ...
[hive]在使用正则选择列名时，列名是怎样的
胖胖的博客
01-27 937
select * from test.student1; select * from test.student2; set hive.support.quoted.identifiers=none; select t.* from ( select student1.`(name1)?+.+`, student2.name1 from student1 join student2 on student1.id = student2.id..
hive查询除某些字段的其余字段
anyitian的博客
05-18 3665
在日常使用hive的时候，难免会遇到查询除某些字段的其余字段，比如使用开窗函数分组取第一条，那有没有一种方法能达到这个效果呢？答案是有的。 首先需要设置一个参数： set hive.support.quoted.identifiers=None; 然后指定要剔除哪个字段： select `(dateline)?+.+` from test.dm_user_add 剔除多个字段： ## 最好按照字段顺序来写，遇到字段未过滤的时候把字段顺序换一下试试 select `(dateline|thirty_day
hive中的正则表达式
fuyun6363的博客
07-14 5005
目录正则表达式基本语法普通字符非打印字符特殊字符限定符定位符选择在Hive中的使用 在大数据日常开发中，遇到从某些字符串中匹配或替换某个元素是很常见的事情，比如：电话号码字段的值会有+86、86开头的值，现想将这列的值全部变为11的手机号码，那么我们就需要利用hive中的正则表达式达到效果 create table temp.temp_mobile_tb (mobile string); in...
Hive正则表达式对数据过滤
热门推荐
王洋的专栏
03-09 2万+
正在做的一个项目中，由于数据量比较大，所以数据的内容比较乱，比如说mac地址，这个地址有的数据中存在，有的数据中不存在，当通过hive进行导出数据的时候，如果存在些非法的类型的数据会造成NoSuchElement异常，经过几天的排查与摸索，终于将该隐患排除。在hive中如果某些字段，尤其是中间的部分字段是空的值的话，很容易出错，在数据量十分大的情况下甚至于很难去查询到这种比较特殊的情况。 如图
Hive中支持正则表达式根据需求输出指定的列
cuichunchi的博客
11-23 1857
本人采用hive-1.1版本 表中的数据以及列名如下： 日常工作中我们需要用到两种方式： 第一种：过滤调不需要的列名 如下：SELECT `(id|100name)?+.+` from st; 不需要id和100name的列名 第二种：需要某些有相似性的列名 如下：SELECT `.+name` from st; 需要以name为后缀的所有列名 ...
hive中灵活运用正则表达式处理字段
zhouqi1991i的博客
10-23 1034
灵活运用正则表达式 hive中经常会需要处理字符串，本篇文章就来聊聊如何灵活运用正则表达式来出来数据； 正则表达式中的符号介绍 ^ 匹配输入字符串的开始位置。 $ 匹配输入字符串的结束位置。 […] 字符集合。匹配所包含的任意一个字符。例如， ‘[abc]’ 可以匹配 “plain” 中的 ‘a’。 [^…] 负值字符集合。匹配未包含的任意字符。例如， ‘[^abc]’ 可以匹配 “plain” ...
hivezzy:添加partition支持正则表达式
06-04
hivezzy 添加partition支持正则表达式
正则表达式实现匹配连续数字的方法
10-20
我这两天刚刚学正则表达式。我觉的正则对连续的字符匹配很简单，但是对连续的一段数字匹配就不是很好。正好最近有朋友问了匹配连续数字的正则，就帮忙写了一下，算是当作温习一下吧。下面这篇文章就主要介绍了正则...
正则表达式大全
05-03
正则表达式(Regular Expression)是一种文本模式，包括普通字符（例如，a 到 z 之间的字母）和特殊字符（称为"元字符"）。 正则表达式使用单个字符串来描述、...许多程序设计语言都支持利用正则表达式进行字符串操作。
电话号码及日期时间提取(正则表达式 C)
10-09
电话号码及日期时间提取(采用正则表达式方式的C语言代码) 支持中国大陆区域通用手机号及固定电话号码提取，简体中文文本网页时间提取。
hive中的正则表达式及其应用
weixin_44388193的博客
11-10 895
今天来说一下hive中的正则表达式，主要包含：元字符匹配、位置匹配、频率匹配 1、元字符匹配 (.)表示匹配除换行符以外的任意字符。 (\w) 表示匹配字母、下划线、数字或汉字(\\W)。 (\d) 表示匹配数字 (\s) 表示匹配任意的空白符 ([ ])表示匹配方括号中任一字符 ([^匹配内容]) 表示匹配方括号中任一字符 2、位置匹配 (^) 表示匹配字符串的开始，...
二级理论题（选择83+判断96）.xlsx
05-07
二级理论题（选择83+判断96）.xlsx
2024年中国超声非侵入式腐蚀检测传感器行业研究报告.docx
05-07
2024年中国超声非侵入式腐蚀检测传感器行业研究报告
设备OEE实践与教学知识
最新发布
05-07
设备自动化综合利用率实践，详细描述了OEE各方面的参数与应用，让设备自动化工厂利用此工具可以快速提高生产
tensorflow-gpu-2.2.3-cp37-cp37m-win-amd64.whl
05-07
python
server-jre-8u411-windows-x64.tar.gz
05-07
server-jre-8u411-windows-x64.tar.gz
node-v7.8.0-sunos-x64.tar.xz
05-07
Node.js，简称Node，是一个开源且跨平台的JavaScript运行时环境，它允许在浏览器外运行JavaScript代码。Node.js于2009年由Ryan Dahl创立，旨在创建高性能的Web服务器和网络应用程序。它基于Google Chrome的V8 JavaScript引擎，可以在Windows、Linux、Unix、Mac OS X等操作系统上运行。 Node.js的特点之一是事件驱动和非阻塞I/O模型，这使得它非常适合处理大量并发连接，从而在构建实时应用程序如在线游戏、聊天应用以及实时通讯服务时表现卓越。此外，Node.js使用了模块化的架构，通过npm（Node package manager，Node包管理器）,社区成员可以共享和复用代码，极大地促进了Node.js生态系统的发展和扩张。 Node.js不仅用于服务器端开发。随着技术的发展，它也被用于构建工具链、开发桌面应用程序、物联网设备等。Node.js能够处理文件系统、操作数据库、处理网络请求等，因此，开发者可以用JavaScript编写全栈应用程序，这一点大大提高了开发效率和便捷性。 在实践中，许多大型企业和组织已经采用Node.js作为其Web应用程序的开发平台，如Netflix、PayPal和Walmart等。它们利用Node.js提高了应用性能，简化了开发流程，并且能更快地响应市场需求。
hive中使用正则表达式去除列值中的单引号
06-09
在Hive中使用正则表达式去除列值中的单引号，可以使用`regexp_replace`函数。具体语法如下： ``` SELECT regexp_replace(column_name, "'", "") FROM table_name; ``` 其中，`column_name`是需要处理的列名，`table_name`是需要处理的表名。该语句会将`column_name`列中的所有单引号替换为空字符串，并返回处理结果。 需要注意的是，如果您要在Hive中使用正则表达式，需要将正则表达式用双引号包裹起来，例如： ``` SELECT regexp_replace(column_name, "\"", "") FROM table_name; ``` 上述语句会将`column_name`列中的所有双引号替换为空字符串。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值