mysql电商场景基准测试_mysql 基准测试

基准测试：不关心业务

模拟比当前系统更高的负载，以找到系统扩展瓶颈增加数据量并发，观察qps tps变化 找到性能最佳时刻的并发。测试不同的硬件，软件版本，和操作系统配置对数据库性能的影响。

怎样进行基准测试

一.对整个系统进行基准测试

从系统入口进行测试(如网站web前端)

优点：能够测试整个系统的性能 包括web服务器 缓存 数据库。

缺点：测试设计复杂 消耗时间长

二.单独对mysql进行基准测试

优点：操作简单 耗时短 适合针对某个具体问题进行测试

缺点：无法全面了解整个系统的性能基线

mysql基准测试常见指标

1.单位时间内所处理的事务数(TPS)

2.单位时间内处理的查询数(QPS)

3.响应时间(平均响应时间，最小响应时间，最大响应时间，各时间所占百分百)

4.并发量：同时处理的查询请求数量

正在工作中的并发的操作数或同时工作的数量

基准测试步骤

1.明确测试范围(系统还是单独mysql)

2.使用什么数据(生产环境的实际数据(使用生产环境数据库备份)，如果只想知道某个参数变化带来的影响(使用软件生成测试需要的的数据和sql))

3.计划和设计基准测试

数据收集脚本(收集cpu使用率，IO，网络流量，状态和计数器信息)

类似下面的收集脚本

.sh收集脚本

INTERVAL=5

PREFIX=/home/imooc/benchmarks/$INTERVAL-sec-status

RUNFILE=/home/imooc/benchmarks/running

echo "1" > $RUNFILE

MYSQL=/usr/local/mysql/bin/mysql

$MYSQL -e "show global variables" >> mysql-variables

while test -e $RUNFILE; do

file=$(date +%F_%I)

sleep=$(date +%s.%N | awk '{print 5 - ($1 % 5)}')

sleep $sleep

ts="$(date +"TS %s.%N %F %T")"

loadavg="$(uptime)"

echo "$ts $loadavg" >> $PREFIX-${file}-status

$MYSQL -e "show global status" >> $PREFIX-${file}-status &

echo "$ts $loadavg" >> $PREFIX-${file}-innodbstatus

$MYSQL -e "show engine innodb status" >> $PREFIX-${file}-innodbstatus &

echo "$ts $loadavg" >> $PREFIX-${file}-processlist

$MYSQL -e "show full processlist\G" >> $PREFIX-${file}-processlist &

echo $ts

done

echo Exiting because $RUNFILE does not exists

运行基准测试

保存分析基准测试结果(可编写.sh分析脚本)

一些值得注意的问题

1.使用生产环境的数据时只使用了部分数据(应该选择数据库的全部备份)

2.在多用户的场景中，只做单用户的测试(对于多用户推荐使用多线程并发测试)

3.在单服务器上测试分布式应用(使用相同的架构测试)

4.反复执行同一个查询(容易缓存命中)

常见基准测试

系统整体测试(AB,http_load)

mysql基准测试工具

1.mysqlslap (mysql5.1后自带的工具)

特点

可以模拟服务器负载，并输出相关统计信息

可以指定或自动生成查询语句

常用参数

--auto-generate-sql (用于指定使用系统自带生成sql脚本和相关数据测试还是自己指定)

--auto-generate-sql-add-autoincrement(在生成的表中增加自增id)用innodb中，最好使用自增id做主键

--auto-generate-sql-load-type (指定测试中使用的查询类型：默的类型认为混合

)

--auto-generate-sql-write-number (指定初始化数据时生成的数据量)

--concurrcy (指定并发线程的数量)可以通过这个测试多并发，以使用逗号分隔不同数目的并发量

--engine (指定测试表的存储引擎，可以使用逗号分隔多个存储引擎，测试完一个存储引擎后，删除表再测试下一个)(不能喝--no-drop一起用)

--no-drop 指定不清理测试数据

--iterations 指定测试运行次数，每次运行一次测试会重新生成测试数据，所以不能和no-drop一起用

–number-of-queries 指定每个线程执行的查询数

–debug-info(指定输出额外的内存和cpu统计信息)

--number-int-cols指定测试表中包含int类型列的数量

--number-char-cols 指定测试表中包含vachar类型列的数量

--create-schema指定了用于执行测试的数据库的名字

--query 用于指定自定义sql的脚本--only-print 并不会运行测试脚本 而是把生成的脚本打印出来