Hive技巧-选出某些列其余所有的列

最新推荐文章于 2024-06-18 16:10:07 发布

流风雨情

最新推荐文章于 2024-06-18 16:10:07 发布

阅读量9.7k

点赞数 3

分类专栏： BigData 文章标签： hive

本文链接：https://blog.csdn.net/qq_29232943/article/details/79462381

版权

在Hive中，当面对包含大量字段的表时，要选取除个别字段外的所有字段，以往可能需要繁琐的操作。但从Hive 0.13.0版本开始，查询语句支持更简洁的方法。以前需要通过查看表结构、复制到Excel，然后手动删除不需要的字段。而现在，Hive提供了更便捷的方式，可以直接在查询语句中选取剩余字段。

摘要由CSDN通过智能技术生成

##HIVE中select除了某些字段之外的剩余所有字段

这是HIVE中查询语句的一个小技巧，一个表字段太多，我们想要除个别字段外的剩余所有字段，全部列出来看起来难受，实际上hive语句可以解决这个问题。

Hive 0.13.0之后，select列表支持正则表达式了

insert overwrite table tb2 partition(dt=xx, hr=xx) select * from tb1 是不行的，因为后者是N个列，前者是N-2个列

以前的做法

insert overwrite table tb2

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

流风雨情

关注关注

3
点赞
踩
10

收藏

觉得还不错? 一键收藏
4
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

专栏目录

数据分析大数据面试题大杂烩01

GavinKai

03-09

1820

互联网:通过埋点实时计算用户浏览频次用优惠券等措施吸引用户,通过历史信息用非智能学习的title方式构造用户画像(抖音,京东) 电信,银行统计营收和针对用户的个人画像:处理大量非实时数据政府:健康码,扫码之后确诊,找出与确诊对象有关联的人订单订单表(除商品以外所有信息),商品详情表,通过搜集用户title进行定制化推荐点击流数据通过埋点进行用户点击行为分析 FLINK一般用来做实时 SPARK一般用来做离线原理胜过代码 List 与set 的区别? List特点:元素有放入顺序,元素可重复 ,

数据分析大数据面试题大杂烩02

GavinKai

03-09

2457

Map端会处理输入数据并产生中间结果,这个中间结果会写到本地磁盘,每个Map的输出会先写到内存缓冲区中,当写入的数据达到设定的阈值时,系统将会启动一个线程将缓冲区的数据写到磁盘,这个过程叫做spill(spill写入之前,会先进行二次排序,首先根据数据所属的partition进行排序,然后每个partition中的数据再按key来排序 . partition的目是将记录划分到不同的Reducer上去,以期望能够达到负载均衡,以后的Reducer就会根据partition来读取自己对应的数据 . 接着运行co

4 条评论您还未登录，请先登录后发表或查看评论

Hive查询指定字段之外的所有字段

cpc_haikuotiankong的博客

05-09

1995

hive查询指定字段之外所有字段

mysql SELECT语句去除某个字段的重复信息

09-11

mysql SELECT语句去除某个字段的重复信息,需要的朋友可以收藏下。

HIVE中select除了某些字段之外的剩余所有字段

热门推荐

车水马龙

07-27

2万+

这是HIVE中查询语句的一个小技巧，一个表字段太多，我们想要除个别字段外的剩余所有字段，全部列出来看起来难受，实际上hive语句可以解决这个问题。 set hive.support.quoted.identifiers=None; //设置支持倒引号 select `(name|id|pwd)?+.+` from tableName;

Hive中利用正则表达式选择除指定列名以外的列的SQL语法

笔记本

07-15

2758

HiveSQL利用正则表达式可以选取指定的列，不用写出所有列名 select `(anything)?+.+` from dual ; anything可以换成任意列名，多个列名之间用“|”连接如果从多个表取数,则可以在表达式前面加表别名 select a.`(anything)?+.+` ,b.`(anything)?+.+` from table_a a left outer ...

剔除 HIVE中select除了某些字段之外的剩余所有字段

chimchim66的博客

08-30

2737

只需要设置参数 set hive.support.quoted.identifiers=None; 指定要剔除哪个字段 select (剔除的字段)?+.+ from table 示例：选择tableName表中除了name、id、pwd之外的所有字段： set hive.support.quoted.identifiers=None; select (name|id|pwd)?+.+ from tableName; 选择tableName表中除了ds之外的所有字段： set hive.support.q

hive查询除某些字段的其余字段

anyitian的博客

05-18

3875

在日常使用hive的时候，难免会遇到查询除某些字段的其余字段，比如使用开窗函数分组取第一条，那有没有一种方法能达到这个效果呢？答案是有的。首先需要设置一个参数： set hive.support.quoted.identifiers=None; 然后指定要剔除哪个字段： select `(dateline)?+.+` from test.dm_user_add 剔除多个字段： ## 最好按照字段顺序来写，遇到字段未过滤的时候把字段顺序换一下试试 select `(dateline|thirty_day

【大数据下的倒插法排序】：海量数据处理的策略与技巧

[【大数据下的倒插法排序】：海量数据处理的策略与技巧](https://www.atatus.com/blog/content/images/2023/07/set-sampling-rates-1.png) # 1. 大数据排序基础与挑战在大数据时代的背景下，数据排序不仅是一个...

2024大数据面试题汇总(完善中。。。)

最新发布

为人性僻语不惊人

06-18

1570

自己汇总的面试题，涉及到大数据的常用组件，将持续更新... ... 部分图片不全，后期继续完善更新记录: 2024-6-18 初版0.1.0 :hadoop，hbase，doris，hive，mysql，es 2024-6-26 1.0.0 : java，spark，redis，kafka，flink，kafka，数据仓库

hive查询时，通过正则查询除了某个字段的其他所有字段

qq_40302627的博客

07-31

366

【代码】hive查询时，通过正则查询除了某个字段的其他所有字段。

hive中如何查询除了其中某个字段剩余所有字段

qq_43193797的博客

09-02

2437

想要将hive分区表中的某个分区复制到新的分区中，使用如下sql语句 insert overwrite table zcfw_sda.sda04_core_request_base_ratio_ifrs partition (etl_tx_dt = 20190327) select * from zcfw_sda.sda04_core_request_base_ratio_ifrs where...

查询除某一列外的所有列的数据

woyaoxiazaianimei的博客

05-11

1958

查询除某一列外的所有列的数据： declare @name varchar(64) declare @sql varchar(1024) SET @sql='select ' //定义要执行的select语句，后面的逻辑会拼凑成一条除了指定字段外的所有字段的查询语句 DECLARE C11 CURSOR FOR //作一个光标，逐个读取column的名字 //以下的sel...

select * 时清除某个字段的值

我有一个魔盒的博客

04-26

7518

首先获得字段： select GROUP_CONCAT(case COLUMN_NAME when 'id' then concat('null as ', COLUMN_NAME) else COLUMN_NAME end) others from information_schema.COLUMNS where table_schema = '数据库' AND table_name = '表名...

hive select * 语法中去掉部分列

spark_dev的博客

03-23

8276

hive表有很多列，大部分列需要，其中一列不需要，例如分区表的dt字段不要，例如1000列中去掉1列

创建相关表的SELECT 语句(排除指定字段)的代码

猫儿

03-24

4526

createorreplaceprocedure sql_create( i_tbname varchar2, -- 默认大写(可以写成小写，但我会将其转换成大小去比较，这里可以按照你的需求去更改) i_except_columns varchar2, -- 要排除的字段名，多个字段用逗号(,)隔开(因为Oracle里面的字段默认均为大写，所以输入时要注意，当然可以用upper()函数，那是后话) o_sql out varchar2)is v_sqls varchar2(4000)

Mybatis-Plus select不列出全部字段两种方式，查询部分字段，排除部分字段

yuguang的博客

06-02

1337

两种方式，如果只查询个别字段，用 qw.select("id","real_name"); 如果去除一些字段： qw.select(SysUserDO.class,info->!info.getColumn().equals("open_id")&&!info.getColumn().equals("user_code"));

MySQL中如何查出除了某个字段外的所有字段的值

_江屿_

08-10

1351

MySQL中如何查出除了某个字段外的所有字段的值

请教如何查询除某列外的其他列

gh_hgxhgx的专栏

05-23

1065

得到表中除Col1、Col2的所有列 例如：userno_fm、userno_to createtabletest( numintidentity(1,1), userno_fmvarchar(10), userno_tovarchar(10), usernamevarchar(10)) select*fromtest declare@s

命令hive和hive --service metastore的区别

05-23

Hive是一个基于Hadoop的数据仓库工具，用于处理大规模数据集。而hive --service metastore是Hive的一个元数据服务，它提供了Hive元数据的访问和管理。 Hive命令是用于执行Hive查询、创建表、加载数据等操作的命令行...