mysql每秒写入量_MySQL每秒可以插入多少条记录?影响MySQL插入速度的因素有哪些?...

写入速度

MySQL每秒可以插入50w条记录吗?

带着疑问,我们一起看看mysql每秒可以插入多少条记录?

要回答这个问题,首先要考虑影响mysql插入速度的因素有哪些?

硬盘的速度,网卡的速度,写入行的数据量,数据在硬盘中的存放位置等等因素。

简单的数据,插入速度肯定快,复杂的插入肯定慢。

所以单纯这个问题不好回答,最好的办法是进行压力测试,最后求一个平均值。

一 测试环境:

MySQL表结构

CREATETABLE`user_10w`(

`id`int(10)NOTNULLAUTO_INCREMENT,

`name`varchar(20)DEFAULTNULL,

`mobile`varchar(11)DEFAULTNULL,

`add_time`int(11)DEFAULTNULL,

`groupid`tinyint(1)DEFAULTNULL,

`login_time`int(11)DEFAULTNULL,

PRIMARYKEY(`id`)

)ENGINE=MyISAMAUTO_INCREMENT=4730016DEFAULTCHARSET=utf8mb4

电脑配置

4核 Intel(R) Core(TM) i3-8100 CPU @ 3.60GHz

ssd 120G硬盘

二. 开始测试

说明:单机测试,不涉及网卡,网络传输的影响

测试程序php pdo

include_once("tool.php");

$dsn='mysql:dbname=demo;host=127.0.0.1';

$user='root';

$pass='root';

try{

$hand=newPDO($dsn,$user,$pass);

}catch(PDOException$e){

echo'Connectionfailed:'.$e->getMessage();

}

$query=$hand->prepare("insertintouser_10w(name,mobile,add_time,groupid,last_login_time)values(?,?,?,?,?)");

$n=0;

$count=1000000;//每次插入100w

$t=time();

echo'startwrite,timeis'.$t."\n";

while(true){

$n++;

$name=Tool::getRandomStr(5);

$mobile=Tool::getRandNum(9);

$group=Tool::getRandNum(1);

$rs=$query->execute([$name,'13'.$mobile,time(),$group,time()]);

if($n>$count)break;

}

echo'writeend,timeis'.(time()-$t)."\n";

1.无任何索引,单进程

startwrite,timeis1593338798

writeend,timeis50

耗时50s, 平均2w/秒

2. 给name添加普通索引

writeend,timeis60

[email protected]:/data/php#php7pdo.php

startwrite,timeis1593393695

writeend,timeis61

大概慢了10s ,所以索引会导致插入变慢,因为要更新索引

9710fe00a2f1599eaca62f4ca2efc083.png

负载

3. 多进程测试

用go写了一个简单的多进程执行程序

packagemain

import(

"os/exec"

"sync"

)

varwgsync.WaitGroup

functestRun(wg*sync.WaitGroup){

c:=exec.Command("php7","./pdo.php")

c.Run()

wg.Done()

}

funcmain(){

varnint=10

wg.Add(n)

fori:=0;i

gotestRun(&wg)

}

wg.Wait();

}

724dc3cf16e40e959fc66e3bbc1ced81.png

4进程负载

结果:

耗时115s ,插入速度平均3.4w/s

MySQL锁表状态

0af9ff1cafa0e320554489ec983ff124.png

mysql status

10进程一起执行

485d7a7fd7d2748de7fa43dc7c391894.png

10进程

耗时5‘10“ ,插入速度大概3.2w/s

MySQL锁表状态

c32a591f08f7a1de672e41d6f1ef7685.png

MySQL status

最后:

可见,插入速度并没有网上说的那么高,随着进程数增多,锁冲突逐渐增加,插入效率下降。

通过存储过程批量进行插入 ,插入速度应该会更高,但在实际高并发应用中使用并不多!

抛开业务,单纯测这个好像没什么意义,一定要结合业务复杂度,性能需求来做测试,做优化。

通过分布式、拆表提高并发量。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值