hive 中有数据但是count(*)和count(1)的结果都是0。解决方法。

最新推荐文章于 2024-04-15 17:43:32 发布
最新推荐文章于 2024-04-15 17:43:32 发布
阅读量3.9k 收藏 3
点赞数
分类专栏： 异常解决 文章标签： 大数据 dolphin hive
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_44162809/article/details/121507936
版权
本文介绍了在MySQL数据导入Hive后，为何count查询返回0的问题解决方案。首先，提及了临时设置hive.compute.query.using.stats=false的必要性，然后指出了直接针对字段进行count的有效方法。
摘要由CSDN通过智能技术生成

今天做数据交换任务后，将mysql数据导入hive，任务跑成功了，select * 有数据，但是想count查询却显示为0。

问题解决：

1、查询前输入 set hive.compute.query.using.stats=false
  • 这个是窗口级别的临时设置。下次再进入hive时还需要重新设置。
2、直接count表中的某个字段。
  • 不进行参数设置的情况下，也可以通过count某个字段的方法实现。
  • 比如 store_info表中有str_cd 字段。那我们不用select count(*) from store_info,
  • 可以改用select count(str_cd) from store_info
若小鱼
关注
  • 0
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Hive中count(1)结果为0的解决办法
nhm_lxy的专栏
08-24 878
执行count(1)或count(*)统计行数时，默认会从Hive的元数据库中查询 rowsNum 对应值作为结果返回。但是如果是使用加载数据文件load data的方式填充表数据，则hive元数据不会收集此统计信息,那么count时就会为0。也就是说通过insert的方式写入数据的表会更新hive元数据的rowsNum信息；第二种 对于类似于count(1)的基础查询不使用元数据中的统计信息，而是执行Job，即设置参数值为false。hive中执行count(1)函数，统计结果为0。
hive.ziphive数据迁移和数据分析
01-10
在大数据处理领域，Hive...总结，Hive.ziphive数据迁移和数据分析涉及多个环节，从数据的导入、存储压缩到查询分析和结果导出，每个步骤都需精心设计和优化。理解并掌握这些知识点，对于大数据处理和分析工作至关重要。
[hive]hive count(*)=0但是select *有数据
胖胖的博客
02-06 445
当设置hive.compute.query.using.stats=true时,hive在执行某些查询时，例如select count()，只利用元数据存储中保存的状态信息返回结果，从而提高了响应速度。这是一个CBO(基于成本的优化)的设置。
数据仓库 - hive 查询表select count(*) 数据量为0 ，select * 有数据
DolphinF的博客
07-18 975
因为执行count(1)或count(*)统计行数时，默认会从Hive的元数据库中查询 rowsNum。data的方式填充表数据，则不会收集此统计信息，Hive收集的统计信息与收集时机见官方文档。对于类似于“count(1)”的基础查询不使用元数据中的统计信息，而是执行MR Job。对应值作为结果返回，一般情况下，如果是使用加载数据文件load。这个是窗口级别的临时设置。下次再进入hive时还需要重新设置。3、使用ANALYZE命令手动更新表统计信息。
hive count(*) 为0
weixin_38751513的博客
11-18 1204
因为hive有个设置 hive.compute.query.using.stats 默认为true,并且count语句不会走mapreduce,所有需要先配置下以下设置,就会走mapreduce任务 set hive.compute.query.using.stats=false;
hive中使用count但是结果为0
lx2wenhui的博客
05-11 755
小问题解决
Hive查询count(*)和count(1)显示为0，但表中存在数据
周源的专栏
11-06 8055
进入hive shell，输入set hive.compute.query.using.stats=false，然后运行下查询语句，发现正常。 对应Ambari中Hive组件的配置参数： 修改后可能对查询性能稍微有点影响...
1、通过亿级数据量在hive和impala中查询比较text、orc和parquet性能表现（二）
05-29
在Hive和Impala中，ORCFile通常比TextFile有更高的查询速度，尤其是在涉及大量数据扫描和复杂查询时。 ParquetFile同样是一种列式存储格式，被设计用于大规模数据处理，它具有深度优化的压缩算法和高效的存储结构，...
Hive进行数据处理1
08-03
外部表是指存储在HDFS中的数据，可以通过Hive进行管理和处理。创建外部表的语句如下： create external table flux ( url string, urlname string, title string, chset string, scr string, col string, lg...
hive sql + left join 数据缺失
02-29
### Hive SQL Left Join 数据缺失问题解析 #### 一、问题背景 在大数据处理场景中，Hive 是一种广泛使用的工具，...通过上述方法，可以有效解决Hive 3版本中Left Join操作出现的数据缺失问题，确保数据分析的准确性。
Hive实战模拟电商数据
01-23
在大数据领域，Hive是一个非常重要的工具，尤其在处理电商数据时，它的优势在于能够对海量数据进行存储、管理和分析。本实战模拟将带你深入理解Hive如何在电商数据分析中发挥作用，通过`retail_shop_data_analysis_...
hive count结果为0
一亿年开发经验
05-24 559
加上limit 1 正常查询 select count（*） from table limit 1;
Hive 表中有数据但 select count(*) 结果为0
日格一物
12-23 2537
备忘 hive里面select count(*)为0，select * 有数据
[Oracle] “表中有数据，但select count(*)的结果为0”问题的解决办法
asdfgh0077的博客
08-25 914
[Oracle] “表中有数据，但select count(*)的结果为0”问题的解决办法
2021-11-14 hive select * 有数据，但是 select count(*) 没有数据
weixin_41930667的博客
11-14 2998
一、hive 查询时发现 select * 有数据，但是 select count(*) 没有数据 select * from ods.ods_start_log limit 11; select count(*) from ods.ods_start_log; 二、原因 建表以location的方式加载数据，此时元数据还没有记录新的数据，当执行 count(*) 时，系统会自动到元数据中读取数据，此时元数据是没有数据的。 三、解决办法 使用参数 hive.compute.query.using.s
hive执行select count(*) 返回0，但是select * 有数据
weixin_35843253的博客
03-15 133
hive执行select count(*) 返回0，但是select * 有数据 - 简书
记录查询HIVE表的条目数为0，select* 却可以看到数据的异常
越疆
01-10 940
一个现象： SELECT * FROM <tbl_name> 是有数据的 但是 SELECT COUNT(*) FROM <tbl_name> 结果为 0 原因是字段不匹配。需要检查字段名称或者字段个数。
hive里面select count(*)始终为0，select * 有数据
及时雨的csdn
02-04 2566
如题，在使用hive的时候，使用聚合函数select count（*） 的时候，不走MR程序，直接返回0，而select * 是有数据的： 原因是我的数据是直接通过put命令上传到指定目录的，并没用load进行上传，使用hdfs查看文件： 俩个文件的权限是不一样的，暂时没有好的办法解决，我的办法是删除原来的数据，老老实实使用load命令进行加载数据就可以了。 ...
Hive执行count结果为0，Spark执行count不为0
最新发布
WeIJiAYinG00的博客
04-15 326
【问题现象】 在Hive中执行count语句时，结果条数显示为0，而在Spark中执行count语句时能够正常显示count数。
hive中聚合函数怎么对count(*)结果命名
07-12
在Hive中，可以使用子查询和别名来对COUNT(*)函数的结果进行命名。以下是一个示例： ``` SELECT count(*) AS total_count FROM your_table; ``` 在上述示例中，COUNT(*)函数的结果被命名为total_count。你可以根据需要自定义别名，对查询结果进行命名。这样，在结果集中，COUNT(*)的结果将以指定的别名显示。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值