hive里面select count()为0，select 有数据

最新推荐文章于 2024-02-28 17:39:59 发布

若水-周

最新推荐文章于 2024-02-28 17:39:59 发布

阅读量3.1k

点赞数 4

文章标签： hive

本文链接：https://blog.csdn.net/zxlstart/article/details/111314057

版权

在Hive项目场景中，遇到一个奇怪的问题：执行`select count(*)`从table_a获取到的结果是0，而使用`select count(table_a.x)`时得到非0结果。这表明问题可能在于空值处理。经过分析，原因是当表中有空值（NULL）时，`count(*)`不会包含这些空值，而`count(列名)`则会忽略列中的空值，因此导致计数差异。解决这个问题需要检查并处理表中的空值情况。

摘要由CSDN通过智能技术生成

项目场景：

在hive 中执行select count(1) from table_a 结果显示是0

问题描述：

hive 中使用select count(1) from table_a 查询结果显示是0，但使用 select count(table_a.x) from table_a 查询结果却不是0。

select count(1) from jdc where rfq ='20201215';
select count(sbbh) from jdc where rfq ='20201215';
在同样的环境中执行查询语句结果却不一致

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

若水-周

关注关注

4
点赞
踩
16

收藏

觉得还不错? 一键收藏
2
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

Hive查询count(*)有数据，但是select * 没有数据

杨鑫newlife的专栏

10-13

9160

若发生将一个使用LZO压缩过的表数据导入一个没有被压缩过表内，类似于如下两个表：图一：LZO压缩图二未压缩查询将出现这种状况，hdfs目录下明明有数据，count(*)有数据总量，但是select就是查询不出来，具体原因：表的结构是未压缩过的，但是数据是压缩过的，通过select（此处查询的方法跟表的结构有关系）查询压缩过的结果，肯定不会显示，具体解决办法：使用se...

数据仓库 - hive 查询表select count(*) 数据量为0 ，select * 有数据

DolphinF的博客

07-18

1064

因为执行count(1)或count(*)统计行数时，默认会从Hive的元数据库中查询 rowsNum。data的方式填充表数据，则不会收集此统计信息，Hive收集的统计信息与收集时机见官方文档。对于类似于“count(1)”的基础查询不使用元数据中的统计信息，而是执行MR Job。对应值作为结果返回，一般情况下，如果是使用加载数据文件load。这个是窗口级别的临时设置。下次再进入hive时还需要重新设置。3、使用ANALYZE命令手动更新表统计信息。

2 条评论您还未登录，请先登录后发表或查看评论

Hive 表中有数据但 select count(*) 结果为0

日格一物

12-23

2658

备忘 hive里面select count(*)为0，select * 有数据

系统突然访问变慢，如何排查和解决？

热门推荐

夏夜凉月

05-29

1万+

第一步：登录后台服务器/监控平台，查看系统资源是否达到上限，例如：CPU、内存、磁盘、I/O、网络带宽等，如果是这些问题，先将这些问题逐一解决：如果是CPU的问题，则需要查看一下CPU占比比较高的进程，然后使用jstack命令生成进程的堆栈信息，看是否发生频繁Full GC，如果是的话，还需要看一下内存快照，分析一下内存情况（可以使用java自带的或第三方工具）；如果是磁盘空间满了，及...

为什么hive表有数据，但count(*)返回0

weixin_30548917的博客

08-27

821

因为数据的存储问题该表创建时指定的存储格式为parquet，所以count()无法统计转载于:https://www.cnblogs.com/lidapengwww/p/11418751.html

服务器响应变慢排查步骤

qq_44945889的博客

04-25

3749

一步：登录后台服务器/监控平台，查看系统资源是否达到上限，例如：CPU、内存、磁盘、I/O、网络带宽等，如果是这些问题，先将这些问题逐一解决：如果是CPU的问题，则需要查看一下CPU占比比较高的进程，然后使用jstack命令生成进程的堆栈信息，看是否发生频繁Full GC，如果是的话，还需要看一下内存快照，分析一下内存情况（可以使用java自带的或第三方工具）；如果是磁盘空间满了，及时清理磁盘；...

记一次服务器响应慢问题的排查

Seraph_v3的专栏

01-25

1553

这次问题查了一个星期，期间有点紧张，慌得一比，确定问题原因之前都是懵的。 1.发现日志里面有mysql连接超时（Communications link failure，The last packet sent successfully to the server was 0 milliseconds ago. Caused by: java.net.ConnectException: Connection timed out）的情况； 2.发现有的请求花了6s，有的花了12s，有的15s超时报异常；

Hive读取索引文件问题：select * 和select count(*)读取出来的行数不一致

Sun's Blog

02-04

1057

两种方式，分别查询数据有多少行： hive (gmall)> select * from ods_log; Time taken: 0.706 seconds, Fetched: 2955 row(s) hive (gmall)> select count(*) from ods_log; 2959 两次查询结果不一致的原因分析 hive (gmall)> drop table if exists ods_log; CREATE EXTERNAL TABLE ods_log (`l

关于HIVE的SELECT count(*) 优化

a95473004的博客

02-28

9035

生产服务器变慢了，如何排查思路？

Blueeyedboy521的博客

04-19

540

通过count(*)和 count(1)统计hive表中数据数量为0

weixin_38251332的博客

11-18

1324

临时生效（当前session）进入hive shell，输入set hive.compute.query.using.stats=false，然后运行下查询语句，发现正常。全局生效对应Ambari中Hive组件的配置参数：修改后可能对查询性能稍微有点影响

【Linux】linux | 服务响应慢、问题排查 | 带宽问题导致 | 网速

hgSuper的博客

06-16

1461

1、项目使用云服务器，服务器配置：5M带宽、4核、32G，1T，CentOS72、CPU、内存、磁盘IO都没有达到瓶颈，猜测是带宽问题3、应用比较多，应用+中间件，十几个差不多4、同时在线人数30+5、已经大概猜到是带宽问题了，文档主要记录是如何提供证据给领导反馈的。

hive执行select count(1)返回0

最新发布

s07aser123的专栏

02-28

865

select count(1)返回0，原因以及解决方案

hive里面select count(*)始终为0，select * 有数据

及时雨的csdn

02-04

2597

如题，在使用hive的时候，使用聚合函数select count（*）的时候，不走MR程序，直接返回0，而select * 是有数据的：原因是我的数据是直接通过put命令上传到指定目录的，并没用load进行上传，使用hdfs查看文件：俩个文件的权限是不一样的，暂时没有好的办法解决，我的办法是删除原来的数据，老老实实使用load命令进行加载数据就可以了。 ...

Hive查询count(*)和count(1)显示为0，但表中存在数据

周源的专栏

11-06

8084

进入hive shell，输入set hive.compute.query.using.stats=false，然后运行下查询语句，发现正常。对应Ambari中Hive组件的配置参数：修改后可能对查询性能稍微有点影响...

错误排查笔记（一）——客户反馈使用服务器突然出现明显延迟卡顿应该如何排查与解决方案

qq_35318921的博客

10-11

1180

客户使用服务突然出现明显网络波动或延迟卡顿的排查方案

hive select count为 0

youngyang_dz的博客

05-15

638

查询的表中的数据是由impala插入的，所以可能是统计信息没更新导致的即重新计算统计信息，在hive命令行数输入一下语句 ANALYZE TABLE $table_name COMPUTE STATISTICS; ANALYZE TABLE $table_name partition(p=$1) COMPUTE STATISTICS; ...

服务器卡顿排查方法

weixin_39539399的博客

11-09

1万+

踩坑实录Hive中select * 没有数据，而select count(*)有数据

chimchim66的博客

05-27

2120

目录背景问题定位原因1.压缩导致解决方案原因2.分区文件location不一致导致解决方案原因3.元数据未更新解决方案背景 hdfs文件有数据，Hive中select * 没有数据，而select count(*)有数据问题定位原因1.压缩导致表结构未压缩，数据压缩了，select查询与表结构有关系解决方案使用select时指定与数据一致的压缩方法就可以查询出来压缩过的收据了 SET hive.exec.compress.output=

hive数据库select*全部都是NULL

08-22

### 回答1： ...综上所述，当Hive数据库中的select*语句返回全部NULL值时，需要检查表中是否有数据，数据类型是否匹配，数据质量是否正确以及查询语句是否正确，并根据具体情况进行适当的调整和修复。

hive里面select count(*)为0，select * 有数据

项目场景：

问题描述：

hive里面select count()为0，select 有数据