数据库优化-基准测试（五）

基准测试工具：DBT2

DBT2是一个OLTP事务性能测试工具。它模拟一个批发供应商，多个职员访问数据库，更新客户信息和检查库存。
DBT2是一个TPC’s TPC-C基准测试规范的不错的实现，它是MySQL的最流行的基准测试工具之一，但它的文档很缺乏。

DBT2：安装Perl模块

DBT2需要的Perl模块：

Statistics::Descriptive
Test::Parser
Test::Reporter

安装Perl模块的方法：

$ sudo cpan Statistics::Descriptive
$ sudo cpan Test::Parser
$ sudo cpan Test::Reporter

注意：如果这些包丢失，它不会返回任何编译错误。

DBT2：下载和编译

下载地址:
http://sourceforge.net/projects/osdldbt/files/dbt2/

$ wget http://downloads.sourceforge.net/project/osdldbt/dbt2/0.40/dbt2-0.40.tar.gz
$ tar -zxf dbt2-0.40.tar.gz
$ cd dbt2-0.40
$ ./configure –with-mysql[=/usr/local/mysql]
$ make

注意：如果你不通过包管理器（RPM、DEB）安装MySQL或它的变种，你可以指定一个–MySQL路径。
例如：在/usr/local/mysql中解开MySQL的tar包。

DBT2：运行测试

DBT2的测试包括下列几个阶段：

• 生成数据
• 加载数据
• 运行基准测试

1. 生成数据

通过datagen生成测试使用的数据。
使用方法：

datagen -w # [-c #] [-i #] [-o #] [-s #] [-n #] [-d <str>]
-w # : 仓库表（warehouse）基数
-c # : 客户表（customer）基数，默认3000
-i # : 商品表（item）基数，默认100000
-o # : 订单表（order）基数，默认3000
-n # : 新订单表（new-order）基数，默认900
-d <path> : 数据文件的输出路径
--sapdb : SAP DB的数据格式
--pgsql : PostgreSQL的数据格式
--mysql : MySQL的数据格式

例如：

$ mkdir /tmp/dbt2-w10
$ datagen -w 10 -d /tmp/dbt2-w10 –mysql

2. 加载数据

使用build_db.sh加载数据。
选项:

-d <database name>
-f <path to dataset files>
-g (generate data files)
-s <database socket>
-h <database host>
-u <database user>
-p <database password> *
-e <storage engine: [MYISAM|INNODB]. (default INNODB)>
-l <to use LOCAL keyword while loading dataset> *
-v <verbose>
-w <scale factor>

例子：

build_db.sh -w 3 -d dbt2 -f /tmp/dbt2-w3 -s /var/run/mysqld/mysqld.sock -h localhost -u root -p password -e INNODB -v –l

使用中的问题：

(1) 文档说使用scripts/mysql/mysql_load_db.sh，但这个脚本不存在。
取而代之，使用script/mysql/build_db.sh。
(2) 不加载文件。
在build_db.sh中使用
< while getopts "d:h:f:gs:e:m:u:p:vlw:"选项替换
> while getopts "d:h:f:gs:e:m:u:p:vw:"选项。
数据库密码不是通过-p参数而是通过-x接收。

3. 运行数据

使用run_workload.sh运行测试。
用法:

run_workload.sh -c <number of database connections> -d
<duration of test> -w <number of warehouses>

其它选项:

-d <database name. (default dbt2)> *
-h <database host name. (default localhost)> *
-l <database port number>
-o <enable oprofile data collection>
-s <delay of starting of new threads in milliseconds>
-n <no thinking or keying time (default no)>
-u <database user>
-x <database password>
-z <comments for the test>

使用中的问题：

(1) 文档说使用scripts/run_mysql.sh，但这个脚本不存在！
取而代之使用scripts/run_workload.sh。
(2) 选项:
-h 不是指定数据库的主机名，而是会打印帮助！使用-H代替
-d 不是数据库名称，而是测试持续的秒数
运行会失败，除非运行下面的命令：
$ export USE_PGPOOL=0
(3) 在脚本中Socket /tmp/mysql.sock是硬编码的。如果你的服务器的socket在不同位置，可以简单地创建一个symlink /tmp/mysql.sock 到你的socket位置 , 例如：
$ ln -s /var/run/mysqld/mysqld.sock /tmp/mysql.sock

例子:

./run_workload.sh -c 10 -d 900 -n -w 10 -s 60 -u root -x password

基准测试工具：tpcc-mysql

tpcc-mysql是一个OLTP事务性能测试工具,由Percona开发的基准测试工具。它生成TPC-C工作负载。

tpcc-mysql软件的获得

launchpad位置：
https://code.launchpad.net/~perconadev/perconatools/tpcc-mysql
获得分支：

$ bzr branch lp:~percona-dev/perconatools/tpcc-mysql

编译：

$ cd tpcc-mysql/src
$ make
$ cd ..

tpcc-mysql的测试

1. 准备数据库

mysqladmin create tpcc10
mysql tpcc10 < create_table.sql
mysql tpcc10 < add_fkey_idx.sql

2. 加载数据

./tpcc_load localhost tpcc10 root pass 10
选项:
- hostname
- dbname
- dbuser
- dbpass
- number of warehouses

3. 开始测试

tpcc_start -h localhost -d tpcc10 -u root -p pass
-w 10 -c 32 -r 10 -l 600
选项:
-h : hostname
-d : dbname
-u : dbuser
-p : password
-w : warehouses
-c : connections
-r : rampup (warmup time)
-l : benchmark duration
在 README里的不正确用法: tpcc_start localhost tpcc1000 root "" 1000 32 10 10800

4. 测试结果