使用 LOAD DATA LOCAL INFILE，sysbench 导数速度提升30%

Python微信订餐小程序课程视频

https://edu.csdn.net/course/detail/36074

Python实战量化交易理财系统

https://edu.csdn.net/course/detail/35475
最近给 sysbench 提了一个 feature（https://github.com/akopytov/sysbench/pull/450），支持通过 LOAD DATA LOCAL INFILE 命令导入压测数据。

下面我们来具体看看这个 feature 的使用方法和实现细节。

下载安装

下载支持 LOAD DATA LOCAL INFILE 命令的 sysbench 分支。

# yum -y install make automake libtool pkgconfig libaio-devel openssl-devel mysql-devel 
# cd /usr/src/
# git clone https://github.com/slowtech/sysbench.git --branch feature-load-data
# cd sysbench/
# ./autogen.sh
# ./configure
# make -j
# make install

安装完成后，压测脚本默认会安装在 /usr/local/share/sysbench 目录下。

我们看看该目录的内容。

# ls /usr/local/share/sysbench/
bulk\_insert.lua oltp\_delete.lua oltp\_point\_select.lua oltp\_read\_write.lua oltp\_update\_non\_index.lua select\_random\_points.lua tests
oltp\_common.lua oltp\_insert.lua oltp\_read\_only.lua oltp\_update\_index.lua oltp\_write\_only.lua select\_random\_ranges.lua

除了oltp_common.lua是个公共模块，其它每个lua脚本都对应一个测试场景。

使用方法

使用方法和 master 分支基本一致，主要是在 prepare 阶段新增了两个参数。

下面，我们看看 sysbench 压测 MySQL 的四个标准步骤：

1. prepare

生成压测数据。

sysbench oltp\_read\_write --mysql-host=10.0.20.4 --mysql-port=3306 --mysql-user=root --mysql-password=123456 --mysql-db=sbtest --tables=10 --table-size=1000000 --threads=10 --fast --csv-dir=/data/sysbench prepare

其中，

• –tables ：表的数量，默认是1。
• –table-size ：单表的大小，默认是10000。
• –threads ：并发线程数，默认是1。注意，导入时，单表只能使用一个线程。
• oltp_read_write：脚本名。对应的是/usr/local/share/sysbench/oltp_read_write.lua。

这里也可指定脚本的绝对路径。

除此之外，这里还指定了新增的两个参数：

• –fast：通过 LOAD DATA LOCAL INFILE 命令导入数据。不指定，则默认是使用 INSERT 命令导入数据。
• –csv-dir：CSV 文件的存储路径。不指定，则默认是 /tmp。

如果使用的是 MySQL 8.0，在操作之前，需将 local_infile