MYSQL 千万数据速度以及极限测试MyISAM--大数据插入（四）

最新推荐文章于 2024-04-11 09:00:00 发布
最新推荐文章于 2024-04-11 09:00:00 发布
阅读量921 收藏
点赞数
分类专栏： php MYSQL 文章标签： InnoDB MyISAM
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/yuexiage1/article/details/80705361
版权

换MyISAM体验一下插入数据：

生产第1批20000条数据耗时：0.001秒
MyISAM第1批插入20000条数据耗时0.089秒
生产第2批20000条数据耗时：0.001秒
MyISAM第2批插入20000条数据耗时0.083秒
生产第3批20000条数据耗时：0.001秒
MyISAM第3批插入20000条数据耗时0.078秒
生产第4批20000条数据耗时：0.001秒
MyISAM第4批插入20000条数据耗时0.089秒
生产第5批20000条数据耗时：0.001秒
MyISAM第5批插入20000条数据耗时0.083秒
生产第6批20000条数据耗时：0.001秒
MyISAM第6批插入20000条数据耗时0.083秒
生产第7批20000条数据耗时：0.001秒
MyISAM第7批插入20000条数据耗时0.084秒
生产第8批20000条数据耗时：0.001秒
MyISAM第8批插入20000条数据耗时0.083秒
生产第9批20000条数据耗时：0.001秒
MyISAM第9批插入20000条数据耗时0.079秒
生产第10批20000条数据耗时：0.001秒
MyISAM第10批插入20000条数据耗时0.084秒
生产第11批20000条数据耗时：0.001秒
MyISAM第11批插入20000条数据耗时0.082秒
生产第12批20000条数据耗时：0.001秒
MyISAM第12批插入20000条数据耗时0.083秒
生产第13批20000条数据耗时：0.001秒
MyISAM第13批插入20000条数据耗时0.088秒
生产第14批20000条数据耗时：0.001秒
MyISAM第14批插入20000条数据耗时0.088秒
生产第15批20000条数据耗时：0.001秒
MyISAM第15批插入20000条数据耗时0.084秒
生产第16批20000条数据耗时：0.001秒
MyISAM第16批插入20000条数据耗时0.09秒
生产第17批20000条数据耗时：0.001秒
MyISAM第17批插入20000条数据耗时0.086秒
生产第18批20000条数据耗时：0.001秒
MyISAM第18批插入20000条数据耗时0.086秒
生产第19批20000条数据耗时：0.001秒
MyISAM第19批插入20000条数据耗时0.088秒
生产第20批20000条数据耗时：0.001秒
MyISAM第20批插入20000条数据耗时0.091秒
生产第21批20000条数据耗时：0.001秒
MyISAM第21批插入20000条数据耗时0.082秒
生产第22批20000条数据耗时：0.001秒
MyISAM第22批插入20000条数据耗时0.09秒
生产第23批20000条数据耗时：0.001秒
MyISAM第23批插入20000条数据耗时0.091秒
生产第24批20000条数据耗时：0.001秒
MyISAM第24批插入20000条数据耗时0.09秒
生产第25批20000条数据耗时：0.001秒
MyISAM第25批插入20000条数据耗时0.096秒
生产第26批20000条数据耗时：0.001秒
MyISAM第26批插入20000条数据耗时0.089秒
生产第27批20000条数据耗时：0.001秒
MyISAM第27批插入20000条数据耗时0.094秒
生产第28批20000条数据耗时：0.001秒
MyISAM第28批插入20000条数据耗时0.084秒
生产第29批20000条数据耗时：0.001秒
MyISAM第29批插入20000条数据耗时0.104秒
生产第30批20000条数据耗时：0.001秒
MyISAM第30批插入20000条数据耗时0.115秒
生产第31批20000条数据耗时：0.001秒
MyISAM第31批插入20000条数据耗时0.1秒
生产第32批20000条数据耗时：0.001秒
MyISAM第32批插入20000条数据耗时0.098秒
生产第33批20000条数据耗时：0.001秒
MyISAM第33批插入20000条数据耗时0.097秒
生产第34批20000条数据耗时：0.001秒
MyISAM第34批插入20000条数据耗时0.087秒
生产第35批20000条数据耗时：0.001秒
MyISAM第35批插入20000条数据耗时0.098秒
生产第36批20000条数据耗时：0.001秒
MyISAM第36批插入20000条数据耗时0.087秒
生产第37批20000条数据耗时：0.001秒
MyISAM第37批插入20000条数据耗时0.089秒
生产第38批20000条数据耗时：0.001秒
MyISAM第38批插入20000条数据耗时0.096秒
生产第39批20000条数据耗时：0.001秒
MyISAM第39批插入20000条数据耗时0.094秒
生产第40批20000条数据耗时：0.001秒
MyISAM第40批插入20000条数据耗时0.092秒
生产第41批20000条数据耗时：0.001秒
MyISAM第41批插入20000条数据耗时0.09秒
生产第42批20000条数据耗时：0.001秒
MyISAM第42批插入20000条数据耗时0.095秒
生产第43批20000条数据耗时：0.001秒
MyISAM第43批插入20000条数据耗时0.1秒
生产第44批20000条数据耗时：0.001秒
MyISAM第44批插入20000条数据耗时0.092秒
生产第45批20000条数据耗时：0.001秒
MyISAM第45批插入20000条数据耗时0.097秒
生产第46批20000条数据耗时：0.001秒
MyISAM第46批插入20000条数据耗时0.093秒
生产第47批20000条数据耗时：0.001秒
MyISAM第47批插入20000条数据耗时0.097秒
生产第48批20000条数据耗时：0.001秒
MyISAM第48批插入20000条数据耗时0.094秒
生产第49批20000条数据耗时：0.001秒
MyISAM第49批插入20000条数据耗时0.088秒
生产第50批20000条数据耗时：0.001秒
MyISAM第50批插入20000条数据耗时0.081秒
生产第51批20000条数据耗时：0.001秒
MyISAM第51批插入20000条数据耗时0.082秒
生产第52批20000条数据耗时：0.001秒
MyISAM第52批插入20000条数据耗时0.082秒
生产第53批20000条数据耗时：0.001秒
MyISAM第53批插入20000条数据耗时0.081秒
生产第54批20000条数据耗时：0.001秒
MyISAM第54批插入20000条数据耗时0.081秒
生产第55批20000条数据耗时：0.001秒
MyISAM第55批插入20000条数据耗时0.084秒
生产第56批20000条数据耗时：0.001秒
MyISAM第56批插入20000条数据耗时0.081秒
生产第57批20000条数据耗时：0.001秒
MyISAM第57批插入20000条数据耗时0.104秒
生产第58批20000条数据耗时：0.001秒
MyISAM第58批插入20000条数据耗时0.108秒
生产第59批20000条数据耗时：0.001秒
MyISAM第59批插入20000条数据耗时0.1秒
生产第60批20000条数据耗时：0.001秒
MyISAM第60批插入20000条数据耗时0.099秒
生产第61批20000条数据耗时：0.001秒
MyISAM第61批插入20000条数据耗时0.087秒
生产第62批20000条数据耗时：0.001秒
MyISAM第62批插入20000条数据耗时0.12秒
生产第63批20000条数据耗时：0.001秒
MyISAM第63批插入20000条数据耗时0.098秒
生产第64批20000条数据耗时：0.001秒
MyISAM第64批插入20000条数据耗时0.105秒
生产第65批20000条数据耗时：0.001秒
MyISAM第65批插入20000条数据耗时0.116秒
生产第66批20000条数据耗时：0.001秒
MyISAM第66批插入20000条数据耗时0.098秒
生产第67批20000条数据耗时：0.001秒
MyISAM第67批插入20000条数据耗时0.111秒
生产第68批20000条数据耗时：0.001秒
MyISAM第68批插入20000条数据耗时0.103秒
生产第69批20000条数据耗时：0.001秒
MyISAM第69批插入20000条数据耗时0.098秒
生产第70批20000条数据耗时：0.001秒
MyISAM第70批插入20000条数据耗时0.116秒
生产第71批20000条数据耗时：0.001秒
MyISAM第71批插入20000条数据耗时0.101秒
生产第72批20000条数据耗时：0.001秒
MyISAM第72批插入20000条数据耗时0.098秒
生产第73批20000条数据耗时：0.001秒
MyISAM第73批插入20000条数据耗时0.102秒
生产第74批20000条数据耗时：0.001秒
MyISAM第74批插入20000条数据耗时0.101秒
生产第75批20000条数据耗时：0.001秒
MyISAM第75批插入20000条数据耗时0.095秒
生产第76批20000条数据耗时：0.001秒
MyISAM第76批插入20000条数据耗时0.101秒
生产第77批20000条数据耗时：0.001秒
MyISAM第77批插入20000条数据耗时0.108秒
生产第78批20000条数据耗时：0.001秒
MyISAM第78批插入20000条数据耗时0.095秒
生产第79批20000条数据耗时：0.001秒
MyISAM第79批插入20000条数据耗时0.11秒
生产第80批20000条数据耗时：0.001秒
MyISAM第80批插入20000条数据耗时0.102秒
生产第81批20000条数据耗时：0.001秒
MyISAM第81批插入20000条数据耗时0.097秒
生产第82批20000条数据耗时：0.001秒
MyISAM第82批插入20000条数据耗时0.104秒
生产第83批20000条数据耗时：0.001秒
MyISAM第83批插入20000条数据耗时0.106秒
生产第84批20000条数据耗时：0.001秒
MyISAM第84批插入20000条数据耗时0.097秒
生产第85批20000条数据耗时：0.001秒
MyISAM第85批插入20000条数据耗时0.12秒
生产第86批20000条数据耗时：0.001秒
MyISAM第86批插入20000条数据耗时0.096秒
生产第87批20000条数据耗时：0.001秒
MyISAM第87批插入20000条数据耗时0.096秒
生产第88批20000条数据耗时：0.001秒
MyISAM第88批插入20000条数据耗时0.124秒
生产第89批20000条数据耗时：0.001秒
MyISAM第89批插入20000条数据耗时0.098秒
生产第90批20000条数据耗时：0.001秒
MyISAM第90批插入20000条数据耗时0.096秒
生产第91批20000条数据耗时：0.001秒
MyISAM第91批插入20000条数据耗时0.099秒
生产第92批20000条数据耗时：0.001秒
MyISAM第92批插入20000条数据耗时0.119秒
生产第93批20000条数据耗时：0.001秒
MyISAM第93批插入20000条数据耗时0.108秒
生产第94批20000条数据耗时：0.001秒
MyISAM第94批插入20000条数据耗时0.098秒
生产第95批20000条数据耗时：0.001秒
MyISAM第95批插入20000条数据耗时0.099秒
生产第96批20000条数据耗时：0.001秒
MyISAM第96批插入20000条数据耗时0.1秒
生产第97批20000条数据耗时：0.001秒
MyISAM第97批插入20000条数据耗时0.124秒
生产第98批20000条数据耗时：0.001秒
MyISAM第98批插入20000条数据耗时0.098秒
生产第99批20000条数据耗时：0.001秒
MyISAM第99批插入20000条数据耗时0.101秒
生产第100批20000条数据耗时：0.001秒
MyISAM第100批插入20000条数据耗时0.103秒
生产第101批20000条数据耗时：0.001秒
MyISAM第101批插入20000条数据耗时0.101秒
生产第102批20000条数据耗时：0.001秒
MyISAM第102批插入20000条数据耗时0.088秒
生产第103批20000条
最低0.47元/天 解锁文章
yuexiage1
关注
专栏目录
22.6 插入数据的优化
weixin_41275260的博客
06-01 224
22.6　插入数据的优化 向数据表中插入数据时，如果数据表中存在索引、唯一性校验时，会影响插入数据的效率。优化数据的插入效率可以针对MyISAM数据表和InnoDB数据表分别进行优化。 22.6.1　MyISAM数据表插入数据的优化 向MyISAM数据表插入数据时，可以通过禁用索引、禁用唯一性检查、批量插入数据和批量导入数据的方式进行优化。 1．禁用索引 插...
mysql myisam表_MySQL两种表存储结构MyISAM和InnoDB的性能比较测试
weixin_39570838的博客
01-18 119
MySQL支持的两种主要表存储格式MyISAM，InnoDB，上个月做个项目时，先使用了InnoDB，结果速度特别慢，1秒钟只能插入10几条。后来换成MyISAM格式，一秒钟插入上万条。当时决定这两个表的性能也差别太大了吧。后来自己推测，不应该差别这么慢，估计是写的插入语句有问题，决定做个测试：测试环境：Redhat Linux9，4CPU，内存2G，MySQL版本为4.1.6-gamma-sta...
Mysql 建表用 MyISAM不用InnoDB(大数据高读取)
LaoChai的专栏
04-07 9604
MyISAM类型不支持事务处理等高级处理，而InnoDB类型支持。MyISAM类型的表强调的是性能，其执行数度比InnoDB类型更快，但是不提供事务支持，而InnoDB提供事务支持已经外部键等高级数据库功能。两种类型最主要的差别就是Innodb  支持事务处理与外键和行级锁.而MyISAM不支持.所以MyISAM往往就容易被人认为只适合在小项目中使用。 　　我作为使用MySQL的用户角度出发，I
mysql 插入大数据量和分区
zhuixunhebe1的专栏
04-07 743
hash 分区 create table t1( id int ) engine=myisam partition by hash(id) partitions 5 表示分5个区 create index in_id on t2(id); 创建索引 insert into t2 select * from t2; watch -n1 ls -h //不停
mysql myisam 性能_mysql的innodb和myisam的dml性能对比
weixin_39792747的博客
01-27 101
C:\Users\ibm>mysql -uroot -prootWelcome to the MySQL monitor. Commands end with ; or \g.Your MySQL connection id is 22Server version: 5.5.17 MySQL Community Server (GPL)Copyright (c) 2000, 2011, O...
mysql 查询 写入 性能极致优化 3000万数据3分钟 深层次优化大数据量
xijunhan的博客
08-28 2195
前言：为什么说是极致优化，不要小瞧上面的3000万说的比较少，为啥，因为我们知道数据量不能代表一切，还要看字段的长度，和字段数量，这3000万数据 分化在60张表里面，核心表6 7张每张数据量大约在300w-800w，字段长度在60-200不等，并且大部分表内部包涵超长文本。这样你还觉得慢吗。 背景：数据库迁移，sqlserver 将数据迁移至mysql。平行迁移。公司切换数据。 优化方向一：（代码级别优化） 优化点1：批量写入（大家应该都知道，但是这个批量写入还略有不同，区别在下面的优化点慢慢看） 优化点
MySQL海量数据存储与优化（上）
weixin_41274719的博客
01-19 1172
MySQL起源和分支 MySQL 是最流行的关系型数据库软件之一，由于其体积小、速度快、开源免费、简单易用、维护成本 低等，在集群架构中易于扩展、高可用，因此深受开发者和企业的欢迎。 Oracle和MySQL是世界市场占比最高的两种数据库。 IOE：IBM的服务器，Oracle数据库，EMC存储设备。都是有钱的公司产品采购，例如银行、电信、石 油、证券等大企业。 Oracle：垄断，有钱的大企业采用，互联网企业之外使用第一。 MySQL：互联网高速发展，互联网企业使用第一。 My
MySQL优化面试
许诗宇的博客
04-16 1761
注意：本文引用 https://zhenganwen.top/posts/433a3305/ 概要 一、概述 为什么要优化 系统的吞吐量瓶颈往往出现在数据库的访问速度上 随着应用程序的运行，数据库的中的数据会越来越多，处理时间会相应变慢 数据是存放在磁盘上的，读写速度无法和内存相比 如何优化 设计数据库时：数据库表、字段的设计，存储引擎 利用好MySQL自身提...
MySQL INSERT的4种形态
Enmotech的博客
08-07 684
墨墨导读：MySQL中常用的四种插入数据的语句: insert ，insert select，replace into，insert into on duplicate key upda...
mysql的极限性能压力测试
03-24
关于目前数据库性能的测试文档，mysql数据库极限性能的测试文档,ssd,高并发,每秒上万
MySQL MyISAM默认存储引擎实现原理
12-14
默认MyISAM的表会在磁盘中产生3个文件：.frm(表结构文件)、.MYD(数据文件）、.MYI(索引文件） 　　可以在创建的时候指定数据文件和索引文件的存储位置，只有MyISAM表支持： 　　　　DATA DIRECTORY [=] 数据保存的绝对路径 　　　　INDEX DIRECTORY [=] 索引文件的绝对路径 　　MyISAM单表最大支持的数据量为2的64次方跳记录　　 　　每个表最多可以建立64个索引 　　如果是复合索引，每个复合索引最多包含16个列，索引值最大长度是1000B 　　MyISAM引擎的存储格式： 　　　　定长（FIXED 静态） ：是指字段不包含VA
如何高效地向MySQL中插入10亿条数据
最新发布
fudaihb的博客
04-11 1579
在面对向MySQL中插入大量数据的挑战时，采取有效的策略和技术是确保数据导入任务成功完成的关键。通过本文的介绍，我们了解到了一系列优化性能的方法和技巧，从数据库准备到数据插入的过程中，都有许多可以优化和改进的地方。首先，我们强调了选择合适的存储引擎和调整MySQL配置的重要性。InnoDB作为默认的存储引擎，具有事务支持和行级锁等特性，更适合处理大规模数据插入任务。通过调整MySQL的相关配置参数，如和等，可以有效地提升数据库的性能和吞吐量。
MySQL几点重要的性能指标计算和优化
cug_jiang126com的专栏
01-22 1959
1 QPS计算(每秒查询数) 针对MyISAM引擎为主的DB mysql> show GLOBAL status like 'questions'; +---------------+------------+ | Variable_name | Value      | +---------------+------------+ | Questions     | 2009
(转)mysql isam的插入效率比innodb的要高
jackyrongvip的专栏
07-01 1712
今天看到concurrent_insert这个参数，解释一下：     MyISAM存储引擎有一个系统变量concurrent_insert，专门用以控制其并发插入的行为，其值分别可以为0、1或2。     当 concurrent_insert设置为0时，不允许并发插入。     当concurrent_insert设置为1时，如果MyISAM表中没有空洞（即表的中间没有被删除的
[MySQL] myisam比innodb查询过程效率探究
程序员老狼专注开发aigc或客服系统应用
12-09 547
当查询非主键的字段时 , MyISAM查询性能更好，从索引文件数据文件的设计来看 , myisam每一个索引字段都有上面的索引树： MyISAM直接找到物理地址后就可以直接定位到数据记录，但是InnoDB查询到叶子节点后，还需要再查询一次主键索引树，才可以定位到具体数据。 等于MyISAM一步就查到了数据，但是InnoDB要两步，那当然MyISAM查询性能更高 如果是查询的主键的字段时...
MySQL高级 - 内存优化 - MyISAM内存优化
Leon_Jinhai_Sun的博客
12-07 586
MyISAM 内存优化 myisam存储引擎使用 key_buffer 缓存索引块，加速myisam索引的读写速度。对于myisam表的数据块，mysql没有特别的缓存机制，完全依赖于操作系统的IO缓存。 key_buffer_size key_buffer_size决定MyISAM索引块缓存区的大小，直接影响到MyISAM表的存取效率。可以在MySQL参数文件中设置key_buffer_size的值，对于一般MyISAM数据库，建议至少将1/4可用内存分配给key_buffer_size。 在
mysql中myisam和,Mysql中Innodb和Myisam之间的性能差异
weixin_39771791的博客
03-17 122
这是一个惊人的巨大性能差异,但我可以想到一些可能有所贡献的事情.MyISAM在历史上被视为比InnoDB更快,但对于最新版本的InnoDB,对于更小,更小的用例集来说也是如此.对于只读表的表扫描,MyISAM通常更快.在大多数其他用例中,我通常发现InnoDB更快.通常快很多倍.在我使用MySQL的大部分时间里,表锁是MyISAM的丧钟.MyISAM在其密钥缓冲区中缓存索引.也许您已经将密钥缓冲区...
MySQL 千万 级数据量根据（索引）优化 查询 速度
php菜鸟技术天地
08-23 1679
一、索引的作用 索引通俗来讲就相当于书的目录，当我们根据条件查询的时候，没有索引，便需要全表扫描，数据量少还可以，一旦数据量超过百万甚至千万，一条查询sql执行往往需要几十秒甚至更多，5秒以上就已经让人难以忍受了。 提升查询速度的方向一是提升硬件(内存、cpu、硬盘)，二是在软件上优化（加索引、优化sql；优化sql不在本文阐述范围之内）。 能在软件上解决的，就不在硬件上解决，毕竟硬件提升代价昂贵，性价比太低。代价小且行之有效的解决方法就是合理的加索引。 索引使用得当，能使查询速度提升上万倍，效果惊
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值