TCMalloc 对MYSQL 性能优化的分析

最新推荐文章于 2024-03-07 17:32:22 发布

chen19870707

最新推荐文章于 2024-03-07 17:32:22 发布

阅读量6.5w

点赞数 2

分类专栏： Server - Tcmalloc TCMalloc原理和使用文章标签： MYSQL 性能优化测试 TCMALLOC

本文链接：https://blog.csdn.net/chen19870707/article/details/40302911

版权

TCMalloc原理和使用同时被 2 个专栏收录

5 篇文章 10 订阅

订阅专栏

Server - Tcmalloc

4 篇文章 0 订阅

订阅专栏

TCMalloc 对MYSQL 性能优化的分析

Author：Echo Chen（陈斌）
Email：chenb19870707@gmail.com
Blog：Blog.csdn.net/chen19870707

Date：October 10th, 2014

虽然经过研究发现TCMalloc不适合我们现有的游戏框架，但意外收获发现TCMalloc可以大幅度提高MYSQL 性能及内存占用，这里给出配置及测试的结果：

一、配置

关于TCMalloc的安装，在《Google perftools 安装手记(TCMalloc)》一文中已经详细给出，下面给出将TCMalloc配置到MYSQL的步骤：

1.修改MySQL启动脚本（依据MySQL安装位置）：

vi /usr/local/mysql/bin/mysqld_safe

在# executing mysqld_safe的下一行，添加：

export LD_PRELOAD=/usr/local/lib/libtcmalloc.so

保存退出，并重启MySQL

2.依据lsof验证命令查看TCMalloc是否起效：

# lsof |grep -i libtcmalloc.so

如果发现以下信息，说明tcmalloc已经起效：

mysqld  13961   mysql  mem    REG  253,0  1948990     196421/usr/local/lib/libtcmalloc.so.4.1.2

二、性能测试工具sysbench

sysbench是一个开源的、模块化的、跨平台的多线程性能测试工具，可以用来进行CPU、内存、磁盘I/O、线程、数据库的性能测试。目前支持的数据库有MySQL、Oracle和PostgreSQL。以下操作都将以支持MySQL数据库为例进行。sourceforge已挂，下载地址：http://download.csdn.net/detail/chen19870707/8060033，安装步骤如下：

tar zxf sysbench-0.4.10.tar.gz 
cd sysbench-0.4.10
./configure && make && make install 
strip /usr/local/bin/sysbench

选项说明参考：http://www.cnblogs.com/zhoujinyi/archive/2013/04/19/3029134.html

三、性能分析：

数据准备：

sysbench --test=oltp --mysql-table-engine=innodb --oltp-table-size=10000 --max-requests=10000 --num-threads=16 --mysql-host=127.0.0.1 --mysql-port=3306 --mysql-user=root --mysql-password=root --mysql-db=test --mysql-socket=/tmp/mysql.sock prepare

性能测试：

sysbench --test=oltp --mysql-table-engine=innodb --oltp-table-size=10000 --max-requests=10000 --num-threads=16 --mysql-host=127.0.0.1  --mysql-port=3306 --mysql-user=root --mysql-password=root --mysql-db=test --mysql-socket=/tmp/mysql.sock run >> report.txt

数据清理：

/usr/local/bin/sysbench --test=oltp --mysql-table-engine=innodb --oltp-table-size=10000 --max-requests=10000 --num-threads=16 --mysql-host=127.0.01  --mysql-port=3306 --mysql-user=root --mysql-password=root --mysql-db=test --mysql-socket=/tmp/mysql.sock cleanup

参数说明:

--oltp-table-size=N         测试表的记录数。默认是10000 --max-requests=N           limit for total number of requests [10000] #请求的最大数目。默认为10000，0代表不限制。
--max-requests=N           limit for total number of requests [10000] #请求的最大数目。默认为10000，0代表不限制。
--num-threads=N            number of threads to use [1] #创建测试线程的数目。默认为1.
--mysql-host=[LIST,...]       MySQL server host [localhost]
--mysql-port=N                MySQL server port [3306]
--mysql-password=STRING       MySQL password []
--mysql-db=STRING             MySQL database name [sbtest]
--mysql-socket=STRING         MySQL socket

测试结果:

未使用TCMalloc

OLTP test statistics:
    queries performed:
        read:                            140112
        write:                           50019
        other:                           20008
        total:                           210139
    transactions:                        10000 (756.11 per sec.)
    deadlocks:                           8      (0.60 per sec.)
    read/write requests:                 190131 (14376.02 per sec.)
    other operations:                    20008 (1512.83 per sec.)

Test execution summary:
    total time:                          13.2256s
    total number of events:              10000
    total time taken by event execution: 211.4342
    per-request statistics:
         min:                                  2.96ms
         avg:                                 21.14ms
         max:                                423.52ms
         approx. 95 percentile:     56.25ms

使用TCMalloc

OLTP test statistics:
    queries performed:
        read:                            140084
        write:                           50017
        other:                           20006
        total:                           210107
    transactions:                        10000 (862.83 per sec.)
    deadlocks:                           6      (0.52 per sec.)
    read/write requests:                 190101 (16402.39 per sec.)
    other operations:                    20006 (1726.17 per sec.)

Test execution summary:
    total time:                          11.5898s
    total number of events:              10000
    total time taken by event execution: 185.2397
    per-request statistics:
         min:                                  2.81ms
         avg:                                 18.52ms
         max:                                430.03ms
         approx. 95 percentile:              36.49ms

可以看到使用TCMalloc性能明显优于未使用,这里主要原因是mysql是多线程小内存分配,TCMalloc由于每个线程均有线程缓冲区,所以对这样的小对象分配无竞争,效率非常好，可以看到TCMalloc对MYSQL优化效果不错，建议使用。

Echo Chen：Blog.csdn.net/chen19870707