Mysql 千万级数据库表 count()问题

最新推荐文章于 2023-11-17 17:30:13 发布

weixin_33963189

最新推荐文章于 2023-11-17 17:30:13 发布

阅读量695

点赞数

文章标签：数据库

原文链接：https://my.oschina.net/u/2338362/blog/715131

版权

2019独角兽企业重金招聘Python工程师标准>>>

数据库表不知不觉到了千万级别数据，使用count看一下全表数据，竟然耗时N秒。

查阅资料，发现这个压根无法优化（Mysql5.6）。

实时业务要用count怎么办？

方案：

重新做个计数表A，每次对B表进行insert或者delete时，就对A表进行 a=a+1操作，可以忽略准确性（不需要加锁，反正也不可能100%准确，错就错吧），然后做定时任务，几个小时就校准一次。

OK啦！

用的时候不用count，直接从A表select出来用吧。错就错了。哈哈

转载于:https://my.oschina.net/u/2338362/blog/715131

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

weixin_33963189

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
Mysql 千万级数据库表 count()问题

2019独角兽企业重金招聘Python工程师标准>>> ...
复制链接

扫一扫

MySQL 中 count(*) 千万级别数据查询

lixiaoyu123456的博客

02-15

6407

MySQL中count(*)千万级别数据查询优化

mysql 千万级数据 select count_【MySql】记一次千万级数据处理的优化过程

weixin_39931923的博客

12-05

1017

1.需求从mongodb数据库的A表(或者叫集合)读取数据经过处理后导入MySQL的B表中其中A表有近2000万条的数据需要对每条数据进行分析处理，分析处理过程就不细说了每条A表数据分析处理后可提取生成数条B表数据B表数据的字段中有school、speciality和post三个字段，和一个字段number导入B表中的数据需要通过这三个字段联合去重，并统计重复的条数number最终将生成...

参与评论您还未登录，请先登录后发表或查看评论

MySQL Explain解析

石似心的博客

08-24

321

概要描述： id:选择标识符 select_type:表示查询的类型。 table:输出结果集的表 partitions:匹配的分区 type:表示表的连接类型 possible_keys:表示查询时，可能使用的索引 key:表示实际使用的索引 key_len:索引字段的长度 ref:列与索引的比较 rows:扫描出的行数(估算的行数) filtered:按表条件过滤的行百分比 Extra:执行情况的描述和说明 ...

mysql千万级别的数据使用count(*)查询比较慢怎么解决？

Harry的博客

08-04

8470

当MySQL中的数据量达到千万级别时，使用COUNT()查询可能会变得比较慢。一些优化COUNT(*)查询的方法：使用索引、使用近似值、使用缓存、分批查询、数据分片等技术来解决问题

mysql的count(*)的优化，获取千万级数据表的总行数

铁柱的博客

11-23

2万+

一、前言 &amp;amp;nbsp;&amp;amp;nbsp;&amp;amp;nbsp;&amp;amp;nbsp;&amp;amp;nbsp;&amp;amp;nbsp;这个问题是今天朋友提出来的，关于查询一个1200w的数据表的总行数，用count(*)的速度一直提不上去。找了很多优化方案，最后另辟蹊径，选择了用explain来获取总行数。二、关于count的优化 &amp;amp;n

mysql千万数据对比分析count(*)与count(1)性能

jya126的专栏

06-11

265

https://www.jggbk.com/blogs/article/69.html

【mysql系列】mysql group by 执行原理及千万级别count 查询优化

最新发布

我活在当下，我巨他妈勇敢。

11-17

399

大家好，我是蓝胖子,前段时间mysql经常碰到慢查询报警，我们线上的慢sql阈值是1s，出现报警的表数据有 7000多万，经常出现报警的是一个group by的count查询，于是便开始着手优化这块，遂有此篇，记录下自己优化过程中的心得。优化慢sql前，肯定是要懂sql的查询逻辑，所以我先介绍下group by 语句的执行逻辑。

mysql 千万级的 count统计对比

上班搞IT，下班搞ITF。

08-08

7136

在统计查询的时候尽量使用count(id)，不要使用count(*)这样的；特别是数据量特别大的时候。

mysql千万数据_Mysql 千万级别数据数据查询

weixin_42321940的博客

01-18

681

1.构建数据--创建MyISAM模式表方便批量跑数据CREATE TABLE `logs1` (`id` int(11) NOT NULL AUTO_INCREMENT,`logtype` varchar(255) DEFAULT NULL,`logurl` varchar(255) DEFAULT NULL,`logip` varchar(255) DEFAULT NULL,`logdz` va...

【MySQL性能优化系列】select count(*)走二级索引比主键索引快几百倍，你敢信？

7me

11-03

6941

在MySQL版本5.7数据测试过程中，一张百万数据的表用 select count(*)查询特别慢需要20s并且是走了主键索引，为什么查询还需要这么久？如何优化？下面我们将请到当事SQL进行发言

MySQL 千万级数据处理

在森林里麋了鹿

11-01

4361

MySQL 处理千万级数据

MySQL 千万级数据表 partition 实战应用

weixin_34162695的博客

02-21

252

目前系统的 Stat 表以每天 20W 条的数据量增加，尽管已经把超过3个月的数据 dump 到其他地方，但表中仍然有接近 2KW 条数据，容量接近 2GB。 Stat 表已经加上索引，直接 select … where … limit 的话，速度还是很快的，但一旦涉及到 group by 分页，就会变得很慢。据观察，7天内的 grou...

MySQL 的 count(*) 的优化，获取千万级数据表的总行数

u011277123的博客

04-18

3201

Java芋道源码2019-04-12 21:44:23 一、前言二、关于count的优化三、使用explain获取行数 1、关于explain 2、关于返回值一、前言这个问题是今天朋友提出来的，关于查询一个1200w的数据表的总行数，用count(*)的速度一直提不上去。找了很多优化方案，最后另辟蹊径，选择了用explain来获取总行数。二、关于count的优化网上关...

mysql Innodb单表31m千万级数据count计数方案及调优

Anteoy的博客

10-27

8215

ENV 线上环境为RDS,版本5.7.15 select version() output: 5.7.15-log 测试环境为docker搭建的mysql,版本5.7.19 select version() output: 5.7.19 单表3000万+的class表以及20万+的学校表,需要使用count查询实时数量用于分页,延迟不能太高,否则影响业务因需要使用事务功能,使用

mysql中使用count()统计总结与思考

weixin_33743661的博客

04-12

1305

如果你的需要是统计总行数时，为什么要使用count(*),而避免使用指定具体的列名？count()函数里面的参数是列名的的时候,那么会计算这个字段有值项的次数。也就是,该字段没有值的项并不会进入计算范围(就是网上常说的值为null的项不纳入统计) 很多地方都有类似表述： COUNT ( column ) counts all non-NULL occurences (or should … ...

高性能MySQL之Count统计查询