利用TCMalloc替换Nginx和Redis默认glibc库的malloc内存分配

最新推荐文章于 2024-04-08 13:23:51 发布
最新推荐文章于 2024-04-08 13:23:51 发布
阅读量5.1k 收藏
点赞数
分类专栏： C语言 Linux/Unix Redis Nginx
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/unix21/article/details/12119059
版权
本文介绍了如何使用TCMalloc替换Nginx和Redis的默认内存分配器，以提高服务器在高并发场景下的性能。详细步骤包括安装libunwind和google-perftools，编译配置Nginx，修改配置文件，创建线程目录，启动Nginx，验证运行状态，以及安装Redis并启用TCMalloc。通过这些操作，可以优化内存管理，降低系统负载。
摘要由CSDN通过智能技术生成

TCMalloc的全称为Thread-Caching Malloc，是谷歌开发的开源工具google-perftools中的一个成员。与标准的glibc库的Malloc相比，TCMalloc库在内存分配效率和速度上要高很多，这在很大程度上提高了服务器在高并发情况下的性能，从而降低了系统的负载。

1.安装libunwind库
 可以从http://download.savannah.gnu.org/releases/libunwind下载相应的libunwind版本
#wget http://ftp.twaren.net/Unix/NonGNU//libunwind/libunwind-1.1.tar.gz
#tar zxvf libunwind-1.1.tar.gz
#cd libunwind-1.1
#CFLAGS=-fPIC ./configure 
#make CFLAGS=-fPIC 
#make CFLAGS=-fPIC install

 

2.安装google-perftools
#wget http://gperftools

最低0.47元/天 解锁文章
unix21
关注
专栏目录
开源内存池tcmalloc,jemalloc对比
thinker
06-02 7206
内存优化总结tcmalloc与jemalloc-转载 AlexNoBug ​ 大连理工大学 计算机科学技术硕士在读 20 人赞同了该文章 概述 需求 系统的物理内存是有限的，而对内存的需求是变化的, 程序的动态性越强，内存管理就越重要，选择合适的内存管理算法会带来明显的性能提升。 比如nginx， 它在每个连接accept后会malloc一块内存，作为整个连接生命周期内的内存池。 当HTTP请求到达的时候，又会malloc一块当前请求阶段的内存池, 因此对malloc的分配速度有一定的..
Nginx 优化实战
yonggeit的博客
03-31 1201
Nginx优化 nginx介绍 Nginx是俄罗斯人编写的十分轻量级的HTTP服务器,Nginx，它的发音为“engineX”，是一个高性能的HTTP和反向代理服务器，同时也是一个IMAP/POP3/SMTP代理服务器．Nginx是由俄罗斯人IgorSysoev为俄罗斯访问量第二的Rambler.ru站点开发. Nginx以事件驱动（epoll）的方式编写，所以有非常好的性能，同...
Kioskcached（2） 之 使用tcmalloc 替换 ptmalloc
杨博东的博客
03-10 1232
前言我在 Kioskcached（1）之 Memcached & Redis & Kioskcached 性能测试对比 中找到的一个问题是 malloc，对于一个内存型数据库，很容易理解，当数据量不断增大的过程中，我们势必需要大量的malloc内存，但是如果malloc不给力，性能就会受到影响。glibc中使用ptmalloc作为默认的内存分配器，但是还有一些性能更好的第三方工具，例如 TCMa
在应用程序中替换Linux中Glibc的malloc的四种方法
热门推荐
镇关西拳打鲁智深
12-03 2万+
打算优化系统的内存分配，接管glibc提供的内存管理，但是整个工程的代码量很大，使用malloc、realloc、calloc和free的地方到处都是，如果自己写好的接口需要重命名所有的调用，先不说工作量，部分没有权限查看代码的.a文件就搞不定了。所以需要替换掉系统的malloc，保证原有调用的名称不变。经过尝试，共有四种方法可以替换，各有优缺点吧。方案1 使用环境变量LD_PRELOAD         环境变量LD_PRELOAD指定程序运行时优先加载的动态连接库，这个动态链接库中的符
tcmalloc为什么快，如何替换系统malloc
hk78787878的专栏
02-13 1083
使用了thread cache，小块的内存分配都可以从cache中分配。多线程分配内存的情况下，可以减少锁竞争。 tcmalloc官方文档见： https://gperftools.github.io/gperftools/tcmalloc.html tcmalloc可以替换大多数系统、不同编译器环境下的内存分配函数（malloc/free/new/delete),针对不同的编译器和操作系统，...
tcmalloc库两种用法的符号替换原理
bobbypollo的专栏
04-12 2141
利用LD_PRELOAD来加载tcmalloc库在编译时显式链接tcmalloc库试验试验1：不链接tcmalloc试验2：仅显式链接tcmalloc试验3：显式链接libc和tcmalloc，libc在前试验4：显式链接libc和tcmalloc，tcmalloc在前结论利用LD_PRELOAD来加载tcmalloc库那么用户调用malloc肯定是走到tcmalloc中；在编译时显式链接tcma...
使用tcmalloc替换系统的malloc
08-03 856
今天对服务器进行压测，模拟的请求量到4万次/分的时候，进程的CPU占用就已经达到400%了（也就是把四个核都占到100%）。其实模拟的请求数据都是单一的，不会因为BUG的原因导致CPU过高。怀疑是代码里的STL用得过多，加之ttserver和memcached大量的读操作——大量的小内存分配可...
Jemalloc优化MySQL和Nginx
09-02
而在Nginx中，通过在编译时添加`--with-ld-opt="-ljemalloc"`参数，可以启用jemalloc替换默认的内存分配器，以提升Nginx的性能。 对于MySQL和MariaDB，jemalloc的使用方法有两种。一种是在编译时通过`cmake`添加`-...
Redis安装与源码调试
编程的本质是数学问题
07-27 1万+
官网下载：http://redis.io/download 1.安装Redis # wget http://redis.googlecode.com/files/redis-2.6.14.tar.gz # tar xzf redis-2.6.14.tar.gz # cd redis-2.6.14 # make make命令执行完成后，会在src目录下生成5个可执行文件，分别是redis
linux tcmalloc,内存管理TCMalloc 安装和使用
weixin_30844577的博客
05-26 870
TCMalloc(Thread-Caching Malloc)与标准glibc库的malloc实现一样的功能，但是TCMalloc在效率和速度效率都比标准malloc高很多。TCMalloc是google-perftools工具中的一个(gperftools四个工具分别是：TCMalloc、heap-checker、heap-profiler和cpu-profiler)，这个工具是开源的，以源码形...
c++内存分配器
最新发布
xiaofeilongyu的博客
04-08 1098
c++内存分配器相关说明
在应用程序中替换Linux中Glibc的malloc的四种方法 .
09-07 2070
打算优化系统的内存分配，接管glibc提供的内存管理，但是整个工程的代码量很大，使用malloc、realloc、calloc和free的地方到处都是，如果自己写好的接口需要重命名所有的调用，先不说工作量，部分没有权限查看代码的.a文件就搞不定了。所以需要替换掉系统的malloc
【性能】tcmalloc 使用和原理
bandaoyu的note
09-16 1万+
安装 安装bazel tcmalloc项目的的管理是用bazel，所以先安装bazel： 在线安装：yum install bazel，如果不行考虑下面的 cd/etc/yum.repos.d/ wget https://copr.fedorainfracloud.org/coprs/vbatts/bazel/repo/epel-7/vbatts-bazel-epel-7.repo yum install bazel 如果还是不行，考虑离线安装。手动从github下载预编译bazel二进制.
c/c++ 之tcmalloc pprof分析解决内存泄漏和内存暴涨问题
weixin_44834554的博客
12-21 4153
内存泄漏问题定位
tcmalloc——为高并发场景而生的内存分配器
李晨毅的博客
08-28 2万+
（Ps：全篇读完后再回头来看一下封面图） 0.前言 在我们写业务代码的过程中，业务代码与系统内核间的两层内存池往往容易被忽略，尤其是其中的C库内存池。 当代码申请内存时，首先会到达应用层内存池，如果应用层内存池有足够的可用内存，就会直接返回给业务代码，否则，它会向更底层的 C 库内存池申请内存。 PTmalloc, TCMalloc和JEMalloc都属于C库内存池。几乎所有程序都在使用 C 库内存池分配出的内存，比如java使用ptmalloc,golang使用tcmalloc等等。C 库内存池影响着系.
linux中内存泄漏的检测（二）定制化的malloc/free
幸福在路上
01-21 5547
《linux中内存泄漏的检测（一）最简单的方法》介绍了最简单的内存泄漏检测方法，这种方法虽然简单，却有很多现实的问题，导致它不能用于实际的生产中。直接使用这种方法肯定是不现实的，因为：（1）把整个工程里所有调用malloc/free的地方都改成my_malloc/my_free，代码改动很大。（2）通常动态库和静态库的代码是没有权限修改的。今天就来解决这个问题，动态地决定让程序使用自己的还是系统的内
揭示glibc内存分配器的工作原理与潜在攻击面
本文将深入探讨glibc内存分配器（glibc malloc）的工作原理和特性，glibc是Linux系统广泛使用的C语言标准库的一部分，它负责动态内存管理。作者sploitF-U-N对内存分配这一主题有着长期的兴趣，特别是关于内存如何从...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值