MySQL大数据量表根据非索引字段检索优化

最新推荐文章于 2023-10-23 20:10:24 发布
最新推荐文章于 2023-10-23 20:10:24 发布
阅读量1.7k 收藏 2
点赞数 1
分类专栏： Java基础 文章标签： mysql 索引 优化
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ZHIZUNYU9_/article/details/77571454
版权

MySQL大数据量表根据非索引字段检索优化

项目背景

在项目业务中经常会出现根据非索引字段查询数据的场景。如根据根据订单支付状态查询未支付或者已支付的的订单信息进行一些业务处理。
假设订单表支付状态列有两个值（1-已支付/0-未支付），实际项目中由于此字段仅有两个值是不适合加索引的，所以当我们仅根据支付状态字段查询订单信息的时候其实是进行的全表扫描。如下图所示：
这里写图片描述

执行该SQL耗时如下：

这里写图片描述

优化思路

MySQL数据表主键id默认为唯一索引，所以可根据ID排序+做分页来实现索引。但是此分页跟普通分页有所不同，即此分页不查符合查询条件的总条数。
查第一页的时候查询出符合

最低0.47元/天 解锁文章
IBENNY0
关注
专栏目录
在大量数据中进行查询，有无索引查询的速度效果测试
caojiaxin19970801的博客
11-17 4737
首先在JAVA程序中向数据库中进行数据的插入 ，因为要利用索引 ，少量的数据是不能够测试出索引的效果，所以要插入大量的数据进行测试，这次我们插入50万条记录 JAVA程序如下：建立一个表classfor，向其中录入50万条记录 package com.oracle.jdbc1.test; import java.sql.Connection; import java.sql.DriverMa
MySQL查询不使用索引汇总
江湖一屌丝，人间一屁民！
02-12 228
众所周知，增加索引是提高查询速度的有效途径，但是很多时候，即使增加了索引，查询仍然不使用索引，这种情况严重影响性能，这里就简单总结几条MySQL不使用索引的情况 如果MySQL估计使用索引比全表扫描更慢，则不使用索引。例如，如果列key均匀分布在1和100之间，下面的查询使用索引就不是很好：select * from table_name where key>1 and key&lt...
mysql 一个没有索引的字段，查询效率差异巨大分析
jinyoufu12345的博客
05-29 2179
1.问题说明 最近开发人员反馈，有个业务查询非常慢，而且是时快时慢，影响了业务。有客户进行了投诉，我们第一时间，进行相关模块进行分析。大概摘出来这样一个语句，这里仅是一个简单的语句，业务的语句可能会很复杂，但是也足以可以说明问题。 问题sql：SELECT a.* FROM tbl_member_vehicles a WHERE a.carm_no = ‘044’ LIMIT 10 ; 说明：表的数据量大概300万左右。 2.分析过程 1.SQL执行时间： mysql> SELECT a.* FROM
mongodb，redis，mysql 简要对比
weixin_33851177的博客
05-24 135
mongodb： 它是一个内存数据库，数据都是放在内存里面的。 对数据的操作大部分都在内存中，但mongodb并不是单纯的内存数据库。 持久化方式： mongodb的所有数据实际上是存放在硬盘的，所有要操作的数据通过mmap的方式映射到内存某个区域内。 然后，mongodb就在这块区域里面进行数据修改，避免了零碎的硬盘操作。 至于mmap上的内容flush到硬盘就是操作系统的事情了，所...
不用索引怎么优化百亿数据？ | MySQL性能优化篇
qq_58360406的博客
03-11 1840
百亿数据怎么查询？怎么插入？怎么更新？怎么删除？这篇文章将从底层到面试必问性能问题讲透数据库性能优化问题
MySQL性能优化
04-16
非聚集索引的叶节点包含索引字段值以及指向数据页数据行的逻辑指针，其行数量与数据表行数据量一致。 在一张表上只能创建一个聚集索引，因为真实数据的物理顺序只能有一种。如果没有聚集索引，则表中的数据行没有...
Mysql 索引原理和优化方式
最新发布
造梦先森Kai的专栏
10-23 221
索引是存储引擎用于快速找到记录的一种数据结构。可以联想到字典中的目录。
【大数据时代：IDEA MySQL优化探讨全攻略】：优化探讨与实践分享
大数据时代背景介绍与MySQL优化意义 在当今大数据时代，数据量正在爆炸性增长，这对数据库系统的性能提出了更高的要求。MySQL作为广泛应用的关系型数据库管理系统，在大数据环境下的运行面临挑战和机遇。优化MySQL...
MySQL索引的数据结构和索引优化
日拱一卒
04-23 265
索引是帮助我们查找数据的排好序的数据结构，现在MySQL索引支持HASH和BTREE。我们大多数使用BTREE。下面我们介绍一下常见的几种数据结构，并解释一下为什么mysql不采用这些数据结构而是用BTREE。 索引的数据结构 平衡二叉树 就拿主键索引来说，当表中数据量级增大，索引也越来越多，构建的索引二叉树也越来越高，数据库索引是存储在外部磁盘上的，当我们利用索引查找数据时，不可能把整个索引全部加载到内存，只能逐一加载每个磁盘页，磁盘页对应索引树的节点，那么这时需要做的磁盘IO增多，所以不使用
mysql在索引上查询非索引类型的值导致的慢查询
待风宜月
02-19 997
发生问题的sql如下： SELECT column_name,comment,type_name,integer_idx FROM tmp_alipay_columns WHERE sd_id=(SELECT CAST(cd_id as SIGNED) FROM tmp_alipay_sds WHERE sd_id=333 AND cd_id IS NOT null AND cd_id tmp
mongodb如何写入图片_Mysql和MongoDB性能对比及应用场景分析
weixin_39953236的博客
11-28 447
一、前言为什么调研MongoDB？下图是DB-Engines2017年8月数据库的排名统计，可以看到MongoDB总排名在第5，在Nosql数据库中排名第1。优点： 1)社区活跃，用户较多，应用广泛。 2)MongoDB在内存充足的情况下数据都放入内存且有完整的索引支持，查询效率较高。 3)MongoDB的分片机制，支持海量数据的存储和扩展。 缺点： 1)不支持事务 2)不支持join、复杂查询 ...
Python爬取100G级别，2000K以上数据量，用mysql还是mongodb？
qq_42022255的博客
05-02 1395
欢迎大家在网易新闻搜索：py柯西，欢迎大家点点关注，如果觉得小编写的好的可以点点关注，点点赞，给个评论，欢迎吐槽这个问题我们可以从两个角度去解答。一个是100G的数据量用MySQL和MongoDB在存读取上有什么区别，另一个是数据本身的结构和你要进行的应用来考虑使用哪种数据库比较方便。100G的数据量 目前来看100G的数据量其实对MySQL和MongoDB在...
linux之database（数据库基础）二
weixin_43051805的博客
11-20 878
linux之database（数据库基础） 01： 数据库服务概述 、 构建MySQL服务 、 数据库基本管理 、 MySQL数据类型 02： 表结构 、 MySQL键值 03： 数据导入导出 、 管理表记录 、 匹配条件 、 MySQL管理工具 04： 用户授权 、 完全备份 、 增量备份 05： percona软件介绍 、 innobackupex备份与恢复 文章目录linux之database（数据库基础）表结构 、 MySQL键值案例1：约束条件案例2：修改表结构案例3：index 普通索引案例4
MySQL高级：explain分析SQL，索引失效&常见优化场景
weixin_50205273的博客
10-28 711
本篇，我们先着重讲解如何分析，具体如何找到SQL，后续的实战篇，我们再来详细谈一谈。
mysql查询数据量大的时候不走索引
京北游戏官方
09-23 3839
如果达到 30% 则MYSQL不会再使用索引。因为使用索引的开销反而更大。 可以在from表后面加强制索引 from S_SALE_FOLLOW T force index(index1)
MySQL数据库索引
m0_54065725的博客
03-13 464
提到数据库索引，很多人应该都不陌生，查询SQL慢的时候，一般的做法就是加索引。索引的出现其实就是为了提高数据查询的效率，就像书的目录一样，让我们可以很快的定位到具体哪一页，而不是一页一页的查找。 索引模型 常见的索引模型有哈希表、有序数组、B-Tree、B+Tree。 哈希表 跟数据结构讲的HashMap差不多，把值放在数组里，用一个哈希函数把 key 换算成一个确定的位置，然后把 value 放在数组的这个位置。当有多个值哈希之后的值相等时，数组上的值会形成链表。 有个缺点就是因为链表不是有序的，所以哈希
【ES】索引创建，为“非查询字段”不建索引 index store
weixin_43091333的博客
03-31 2127
目录 创建索引 PUT /索引的名字 { "mappings": { "properties": { "xxx1属性": { "type": "该属性的类型" }, "xxx2属性": { "type": "该属性的类型" } } } } ES客户端：PUT /索引的名字 Linux：curl -X PUT “localhost:9200/commodity?pretty” Postman：PUT htt
mysql 基于uuid的大数据量表的分页查询优化
04-24
对于基于UUID的大数据量表的分页查询优化，建议采用以下两种方案： 1. 利用UUID的时间戳属性进行优化：将UUID的时间戳属性作为索引建立索引，然后利用索引进行分页操作。在获取当前页数据时，先通过时间戳属性进行...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值