本文讨论了在MySQL中遇到的一个性能问题，即当在含有3000万条记录的`campaign_logs`表上执行涉及COUNT(DISTINCT subscriber_id)的查询时，查询速度极慢。通过分析查询语句和索引，发现即使使用了覆盖索引，性能提升也有限。尝试将COUNT(DISTINCT subscriber_id)替换为COUNT(*)并未显著改善情况。作者发现删除COUNT(DISTINCT subscriber_id)后性能大幅提升，但失去了所需的数据。目前寻求一种方式在不牺牲查询速度的情况下获取COUNT(DISTINCT ...)的值。
我们在
MySql中有一个表有大约3000万条记录,以下是表结构
CREATE TABLE `campaign_logs` (
`domain` varchar(50) DEFAULT NULL,
`campaign_id` varchar(50) DEFAULT NULL,
`subscriber_id` varchar(50) DEFAULT NULL,
`message` varchar(21000) DEFAULT NULL,
`log_time` datetime DEFAULT NULL,
`log_type` varchar(50) DEFAULT NULL,
`level` varchar(50) DEFAULT NULL,
`campaign_name` varchar(500) DEFAULT NULL,
KEY `subscriber_id_index` (`subscriber_id`),
KEY `log_type_index` (`log_type`),
KEY `log_time_index` (`log_time`),
KEY `campid_domain_logtype_logtime_subid_index` (`campaign_id`,`domain`,`log_type`,`log_time`,`subscriber_id`),
KEY `domain_logtype_logtime_index` (`domain`,`log_type`,`log_time`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8 |
以下是我的查询
我正在做UNION ALL而不是使用IN操作
SELECT log_type,
DATE_FORMAT(CONVERT_TZ(log_time,'+00:00','+05:30'),'%l %p') AS log_date,
count(DISTINCT subscriber_id) AS COUNT,
COUNT(subscriber_id) AS total
FROM stats.campaign_logs USE IN
最低0.47元/天 解锁文章
6760
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
