海量数据处理
wangbin579
TCPCopy作者,MySQL内核顶级专家,书籍<<The Art of Problem-Solving in Software Engineering:How to Make MySQL Better>>作者
展开
-
计算密集型的应用一定要关注小内存
曾经开发计算密集型程序的时候,用内存泄漏工具检测程序无内存泄漏问题,但程序运行的时候内存还是越来越多,当时一开始不明白怎么回事,后来经过大量实验 和探索,发现是小内存在作怪,原来应用程序与os之间还存在着对内存的中间管理,也就是glibc fastbins,大致解释如下: 一般的情况是, 程序在运行时会经常需要分配和释放一些较小的内存空间. 当 allocator 合并了相邻的几个小的 chunk 之后, 也许马上就会有另一个小块内存的请求,这样 allocator 又需要从原创 2011-04-16 14:48:00 · 1749 阅读 · 0 评论 -
中等规模海量数据处理实例分析
只需要一台普通服务器计算近60亿pv数据,ppt下载地址: http://download.csdn.net/detail/wangbin579/3196955原创 2011-10-10 10:36:45 · 1028 阅读 · 0 评论