mysql基准测试

mysql基准测试

一、基准测试：
1.直接、简单、易于比较，用于评估服务器的处理能力。
2.不关心业务逻辑，所使用的查询和业务的真实性可以和业务环境没关系。

二、压力测试

1.对真实的业务数据进行测试，获得真实系统所承受的压力。
2.针对不同主题，所使用的数据和查询也是真实用到的。

三、基准测试的目的
1.建立mysql服务器的性能基准线（确定当前mysql服务器运行情况）。
2.模拟比当前系统更高的负载，以找出系统的扩展瓶颈。
3.测试不同的硬件、软件和操作系统配置。
4.证明新的硬件设备是否配置正确

四、如何进行基准测试
1.对整个系统进行基准测试。
优点：
1.能够测试整个系统的性能，包括web服务缓存、数据库等。
2.能反应出系统中各个组件接口间的性能问题体现真实性能状况发。
缺点：
1.测试设计复杂，消耗时间长。

2.单独对mysql进行基准测试
优点：
1.测试简单，所需要时间短
缺点：
2.无法全面了解整个系统的性能基线

五、mysql基准测试的常见指标
1.单位时间所处理的事务数（TPS）
2.单位时间所处理的查询数（QPS）
3.响应时间
4.并发量：同时处理的查询请求的数量

六、计划和设计基准测试
1.对整个系统还是某一个组件（mysql）
2.使用什么样的数据(生产数据)
3.准备基准测试及数据收集脚本
cpu使用率、IO、网络流量、状态与技术器信息等。（get_test_info.sh）
4.运行基准测试
5.保存及分析基准测试结果（analyze.sh）

七、基准测试中容易忽略的问题
1.使用生产环境数据时只使用了部分数据（使用数据库备份全部数据）
2.在多用户场景中，只做单用户的测试
3.在单服务器上测试分布式应用
4.反复执行同一查询（容易缓存命中，无法反应真实性能）

八、基准测试工具之mysqlslap

下载及安装
mysql服务器自带的基准测试工具，随mysql一起安装。

特点
1.可以模拟服务器负载，并输出相关统计信息。
2.可以指定也可以自动生成查询语句。

常用参数说明
--auto-generate-sql 由系统自动生成sql脚本进行测试
--auto-generate-sql-add-autoincrement 在生成的表中增加自增ID
--auto-generate-sql-load-type 指定测试中使用的查询类型
--auto-generate-sql-write-number 指定初始化数据时生成的数据量
--concurrency 指定并发线程的数量
--engine 指定要测试表的存储引擎，可以用逗号分隔多个储存引擎
--no-drop 指定不清理测试数据
--iterations 指定测试运行的次数
--number-of-queries 指定每个一个线程执行的查询数量
--debug-info 指定输出额外的内存及cpu统计信息
--number-char-cols 指定测试表中包含的varchar类型的数量
--create-schema 指定了用于执行测试的数据库的名字
--query 用于指定自定义sql的脚本
--only-print 并不运行测试脚本，而是把生成的脚本打印出来

使用实例
1.mysqlslap --help 可查看参数
2.# mysqlslap --concurrency=1,50,100,200 --iterations=3 number-int-cols=5 number-char-cols=5 --auto-generate-sql --auto-generate-sql-add-autoincrement --engine=myisam,innodb --number-of-queries=10 --create-schema=sbtest --only-print > 1.sql

九、基准测试工具之sysbench （常用）

--test 用于指定所要执行的测试类型，支持以下参数

fileio文件系统I/O性能测试
cpu cpu性能测试
memory 内存性能测试
oltp测试要指定具体的lua脚本
lua脚本位于sysbench-0.5/sysbench/tests/db

常用参数
--mysql-db 用于指定执行基准测试的数据库名
--mysql-table-engine 用于指定所使用的储存引擎
--oltp-tables-count执行测试的表的数量
--oltp-table-size 指定每个表中的数据行数
--num-threads指定测试的并发线程数量
--max-time指定最大的测试时间
--report-interval指定间隔多长时间输出一次统计信息
--mysql-user 指定执行测试的mysql用户
--mysql-password指定执行测试的mysql用户的密码
prepare 用于准备测试数据
run 用于实际进行测试
cleanup 用于清理测试数据

使用实例

sysbench --test=cpu --cpu-max-prime=10000 run  #测试cpu性能
sysbench --test=fileio --file-total-size=1G prepare  #准备测试文件
sysbench --test=fileio --num-threads=8 --init-rng=on --file-total-size=1G 
--file-test-mode=rndrw --report-interval=1   #测试fileio性能

sysbench数据库测试

1.生成测试数据
sysbench --test=./oltp.lua --mysql-table-engine=innodb --oltp-table-size=10000--mysql-db=imooc --mysql-user=yuyu --mysql-password=1234 --oltp-tables-count=10
--mysql-socket=/data/mysql.sock prepare

2.收集系统状态脚本
bash ./get_test_info.sh &

3.进行测试
sysbench --test=./oltp.lua --mysql-table-engine=innodb --oltp-table-size=10000--mysql-db=imooc --mysql-user=yuyu --mysql-password=1234 --oltp-tables-count=10
--mysql-socket=/data/mysql.sock run