Sysbench压力测试基准测试用例

最新推荐文章于 2024-07-17 08:00:00 发布

cdrcsy

最新推荐文章于 2024-07-17 08:00:00 发布

阅读量5.8k

点赞数

分类专栏： MySQL压力测试文章标签： sysbench mysql 压力测试 OLTP压测

本文链接：https://blog.csdn.net/cdrcsy/article/details/73277591

版权

本文介绍了Sysbench作为压力测试工具在MySQL中的使用，包括CPU、磁盘IO、内存和线程性能测试。通过示例展示了如何安装、配置和执行各种测试，如OLTP基准测试，以及如何分析测试结果。此外，还对比了不同MySQL版本的性能，并提供了实际的IO测试和数据库性能测试案例。

摘要由CSDN通过智能技术生成

Sysbench测试的种类非常多，测试的目的也非常多，
比如：
1、CPU运算性能
2、磁盘IO性能
3、调度程序性能
4、内存分配及传输速度
5、POSIX线程性能
6、数据库性能(OLTP基准测试)
目前sysbench主要支持 mysql,drizzle,pgsql,oracle 等几种数据库。

我这里主要的目的就两个

(1)测试MySQL的极限IO

(2)对比不同版本MySQL，不同参数, 不同硬件，不同系统对MySQL的性能影响

为什么选择sysbench？

因为MySQL官方的测试就是用sysbench哦
尽量选择最新版本的sysbench哦，大于0.4版本的sysbench有实时显示功能

如何下载sysbench

http://github.com/akopytov/sysbench

文档在哪里

http://github.com/akopytov/sysbench

如何安装

————–需要的软件包————–
automake
libtool

—————-安装步骤—————-
cd sysbench-1.0;
./autogen.sh;
./configure –with-mysql-includes=/usr/local/mysql/include –with-mysql-libs=/usr/local/mysql/lib/;
make;
make install;

过程中可能会遇到的故障
sysbench: error while loading shared libraries: libmysqlclient.so.20: cannot open shared object file: No such file or directory
解决方案
export LD_LIBRARY_PATH=/usr/local/mysql/lib/;

问题2：
sysbench 1.1.0 (using bundled LuaJIT 2.1.0-beta2)

Creating table ‘sbtest1’…
Unknown database driver:
Creating table ‘sbtest2’…
Unknown database driver:
Creating table ‘sbtest3’…

解决办法，–db-driver=
使用参数。

测试是否安装成功
shell> sysbench –version
sysbench 1.0

————–查看帮助文档————–

– 查看总体帮助文档

sysbench –help

– 查测试cpu的帮助文档

sysbench –test=cpu help

– 查看IO测试的帮助文档

sysbench –test=fileio help

– 查看测试内存的帮助文档

sysbench –test=memory help

– 查看测试线程的帮助文档

sysbench –test=threads help

————–测试的步骤————–
prepare –生成测试需要的数据
run –进行性能测试
cleanup –清除测试数据

————–全局参数————–

sysbench

–一般选项(重要的)
–threads=N –指定测试使用多少线程数,默认为1
–max-requests –请求的最大数目。默认为10000，0代表不限制
–time=N 　　–最大执行时间，单位为秒。默认是0,不限制
–report-interval –指定每多少秒在屏幕上输出一次结果
STRING 　–指定脚本路径。
fileio
cpu
memory
threads
mutex
–日志选项
–verbosity=N –日志级别,默认为3,5=debug,0=只包含重要信息

绍常用的选项

选项描述默认值
—num-threads 多少个线程 1
—max-requests 多少个请求，0意味着无限制 1000
—max-time 测试多长时间，0意味着无限制 0
—test 测试什么模块必须要求
—report-interval 阶段性的汇报测试统计信息
—test=fileio 模块的选项

—file-test-mode 参数如下：

seqwr
sequential write 顺序写
seqrewr
sequential rewrite 顺序重写
seqrd
sequential read 顺序读
rndrd
random read 随机读
rndwr
random write 随机写
rndrw
combined random read/write 混合随机读写

test option for fileio
选项描述默认值
—file-num 创建文件的数量 128
—file-block-size IO操作的大小 16k
—file-total-size 所有文件的总大小 2G
—file-test-mode seqwr，seqrewr, seqrd, rndrd, rndwr, rndwr(上面已经介绍) 必须
—file-io-mode i/O 模式，sync, async, fastmmap, slowmmap sync
—file-extra-flags 以额外的标记（O_SYNC，O_DSYNC，O_DIRECT）打开 -
—file-fsync-freq 多少请求后使用fsync 100
—file-fsync-all 每次写IO都必须fsync no
—file-fsync-mode 用什么样的模式来同步文件fsync, fdatasync (see above) fsync
—file-rw-ratio 随机读写请求的比例

举例：

$sysbench –num-threads=16 –test=fileio –file-total-size=3G –file-test-mode=rndrw prepare$ sysbench –num-threads=16 –test=fileio –file-total-size=3G –file-test-mode=rndrw run
$ sysbench –num-threads=16 –test=fileio –file-total-size=3G –file-test-mode=rndrw cleanup

OLTP-MySQL

此模式用于测试真实数据库性能。在prepare阶段创建表，sbtest默认

CREATE TABLE sbtest (
id int(10) unsigned NOT NULL auto_increment,
k int(10) unsigned NOT NULL default ‘0’,
c char(120) NOT NULL default ”,
pad char(60) NOT NULL default ”,
PRIMARY KEY (id),
KEY k (k));

在run阶段执行模式情况：

simple模式
SELECT c FROM sbtest WHERE id=N

Point queries
SELECT c FROM sbtest WHERE id=N

Range queries:
SELECT c FROM sbtest WHERE id BETWEEN N AND M

Range SUM() queries
SELECT SUM(K) FROM sbtest WHERE id BETWEEN N and M

Range ORDER BY queries
SELECT c FROM sbtest WHERE id between N and M ORDER BY c

Range DISTINCT queries
SELECT DISTINCT c FROM sbtest WHERE id BETWEEN N and M ORDER BY c

UPDATEs on index column
UPDATE sbtest SET k=k+1 WHERE id=N

UPDATEs on non-index column:
UPDATE sbtest SET c=N WHERE id=M

DELETE queries
DELETE FROM sbtest WHERE id=N

INSERT queries
INSERT INTO sbtest VALUES (…)

oltp test模式通用参数
选项描述默认值
—oltp-table-name 表的名字 sbtest
—oltp-table-size 表的行数 10000
—oltp-tables-count 表的个数 1
—oltp-dist-type 热点数据分布{uniform(均匀分布),Gaussian(高斯分布),special(空间分布)}。默认是special
—oltp-dist-pct special：热点数据产生的比例 1
—oltp-dist-res special：热点数据的访问频率 75
—oltp-test-mode simple，complex（以上介绍） complex
—oltp-read-only 只有select 请求 off
—oltp-skip-trx 不用事务 off
—oltp-point-selects 一个事务中简单select查询数量 10
—oltp-simple-ranges 一个事务中简单range查询的数量 1
—oltp-sum-ranges sum range的数量 1
—oltp-order=ranges order range的数量 1

mysql test 参数
–mysql-host=[LIST,…] MySQL server host [localhost]
–mysql-port=[LIST,…] MySQL server port [3306]
–mysql-socket=[LIST,…] MySQL socket
–mysql-user=STRING MySQL user [sbtest]
–mysql-password=STRING MySQL password []
–mysql-db=STRING MySQL database name [sbtest]
–mysql-table-engine=STRING storage engine to use for the test table {myisam,innodb,bdb,heap,ndbcluster,federated} [innodb]
–mysql-engine-trx=STRING whether storage engine used is transactional or not {yes,no,auto} [auto]
–mysql-ssl=[on|off] use SSL connections, if available in the client library [off]
–mysql-ssl-cipher=STRING use specific cipher for SSL connections []
–mysql-compression=[on|off] use compression, if available in the client library [off]
–myisam-max-rows=N max-rows parameter for MyISAM tables [1000000]
–mysql-debug=[on|off] dump all client library calls [off]
–mysql-ignore-errors=[LIST,…]list of errors to ignore, or “all” [1213,1020,1205]
–mysql-dry-run=[on|off] Dry run, pretent that all MySQL client API calls are successful without executing them [off]
以上0.4版本的语法介绍完毕。

接下来是大于0.4版本的新语法，尤其是—test=oltp模块
用—test=xx.lua (完整路径来传递)来代替

FileIO实战

磁盘：S3610 * 6 raid10, 内存128G
测试出相关场景下的极限IOPS

随机读写（3:2 oltp场景）

sysbench –num-threads=16 –report-interval=3 –max-requests=0 –max-time=300 –test=fileio –file-num=200 –file-total-size=200G –file-test-mode=rndrw –file-block-size=16384 –file-extra-flags=direct run
fileio_oltp_32

enter description here

随机读写（5：1 oltp场景）

sysbench –num-threads=16 –report-interval=3 –max-requests=0 –max-time=300 –test=fileio –file-num=200 –file-total-size=200G –file-test-mode=rndrw –file-block-size=16384 –file-extra-flags=direct –file-rw-ratio=5 run
fileio_oltp_51

enter description here

随机写

sysbench –num-threads=16 –report-interval=3 –max-requests=0 –max-time=300 –test=fileio –file-num=200 –file-total-size=200G –file-test-mode=rndwr –file-block-size=16384 –file-extra-flags=direct run
fileio_rndwr

enter description here

随机读

sysbench –num-threads=16 –report-interval=3 –max-requests=0 –max-time=300 –test=fileio –file-num=200 –file-total-size=200G –file-test-mode=rndrd –file-block-size=16384 –file-extra-flags=direct run
fileio_rndrd

enter description here

MySQL5.6 vs MySQL5.7 测试

磁盘：S3610 * 6 raid10, 内存128G

Point select

产生数据
sysbench –num-threads=128 –report-interval=3 –max-requests=0 –max-time=300 –test=/root/sysbench-1.0/sysbench/tests/db/select.lua –mysql-table-engine=innodb –oltp-table-size=50000000 –mysql-user=sysbench –mysql-password=sysbench –oltp-tables-count=2 –mysql-host=xx –mysql-port=3306 prepare
执行
sysbench –num-threads=128 –report-interval=3 –max-requests=0 –max-time=300 –test=/root/sysbench-1.0/sysbench/tests/db/select.lua –mysql-table-engine=innodb –oltp-table-size=50000000 –mysql-user=sysbench –mysql-password=sysbench –oltp-tables-count=2 –mysql-host=xx –mysql-port=3306 run
select_sysbench

enter description here

Point oltp

产生数据
sysbench –num-threads=128 –report-interval=3 –max-requests=0 –max-time=300 –test=/root/sysbench-1.0/sysbench/tests/db/oltp.lua –mysql-table-engine=innodb –oltp-table-size=50000000 –mysql-user=sysbench –mysql-password=sysbench –oltp-tables-count=2 –mysql-host=xx –mysql-port=3306 prepare
执行
sysbench –num-threads=128 –report-interval=3 –max-requests=0 –max-time=300 –test=/root/sysbench-1.0/sysbench/tests/db/oltp.lua –mysql-table-engine=innodb –oltp-table-size=50000000 –mysql-user=sysbench –mysql-password=sysbench –oltp-tables-count=2 –mysql-host=xx –mysql-port=3306 run
oltp_sysbench

enter description here