mysql服务器内存耗尽,并占用大量swap

文章来源http://blog.sina.com.cn/s/blog_4e46604d01016sp0.html

1)服务器配置:

cpu:{Intel(R) Xeon(R) CPU X5650 @ 2.67GHz*16

mem:32

2)mysql innodb:

innodb_buffer_pool_size = 22G

2.#free -g
[root@mysql11 ~]# free -g
total used free shared buffers cached
Mem: 31 31 0 0 0 5
-/+ buffers/cache: 25 5
Swap: 3 2 1

3、[root@mysql11 ~]# vmstat -a -S M 4
procs -----------memory---------- ---swap-- -----io---- --system-- -----cpu------
r b swpd free inact active si so bi bo in cs us sy id wa st
1 0 2320 93 2411 29248 0 0 12 77 0 1 3 2 95 0 0
1 0 2320 92 2412 29248 0 0 44 2522 22313 40230 7 4 90 0 0
4 0 2320 92 2413 29248 0 0 320 2528 25147 47254 9 5 86 0 0

4、用top看

USER NI RES SHR VIRT PID S %MEM TIME+ PR %CPU SWAP CODE DATA COMMAND 
mysql 0 25g 5852 28.4g 14463 S 80.1 48948:37 15 286.2 3.2g 8352 28g mysqld

5、总结:

从top命令可看出:

1)mysql进程 ,总共需要的内存为28G(DATA 40g),

2)mysql进程,被 置换的虚拟内存大小为3.2g(SWAP 3.2g)

3)mysql进程,程序码占用内存大小为 8352(kb)

4)mysql进程,非程序码占用内存大小为 26g

综上所述,Linux服务器操作系统本身cache掉的内存大小约为5G左右。

6.业务运行环境:MySQL数据量为98G,会频繁进行大批量的数据导入,数据读取。相当于一个小型的数据仓库。

MySQL如何避免使用swap

Linux有很多很好的内存、IO调度机制,但是并不会适用于所有场景。对于DBA来说Linux比较让人头疼的一个地方是,它不会因为MySQL很重要就避免将分配给MySQL的地址空间映射到swap上。对于频繁进行读写操作的系统而言,数据看似在内存而实际上在磁盘是非常糟糕的,响应时间的增长很可能直接拖垮整个系统。这篇blog主要讲讲我们作为DBA,怎样尽量避免MySQL惨遭swap的毒手。

首先我们要了解点基础的东西,比如说为什么会产生swap。假设我们的物理内存是16G,swap是4G。如果MySQL本身已经占用了12G物理内存,而同时其他程序或者系统模块又需要6G内存,这时候操作系统就可能把MySQL所拥有的一部分地址空间映射到swap上去。

cp一个大文件,或用mysqldump导出一个很大的数据库的时候,文件系统往往会向Linux申请大量的内存作为cache,一不小心就会导致L使用swap。这个情景比较常见,以下是最简单的三个调整方法:

1、/proc/sys/vm/swappiness的内容改成0(临时),/etc/sysctl.conf上添加vm.swappiness=0(永久)

这个参数决定了Linux是倾向于使用swap,还是倾向于释放文件系统cache。在内存紧张的情况下,数值越低越倾向于释放文件系统cache。

当然,这个参数只能减少使用swap的概率,并不能避免Linux使用swap。

2、修改MySQL的配置参数innodb_flush_method,开启O_DIRECT模式。

这种情况下,InnoDB的buffer pool会直接绕过文件系统cache来访问磁盘,但是redo log依旧会使用文件系统cache。值得注意的是,Redo log是覆写模式的,即使使用了文件系统的cache,也不会占用太多。

3、添加MySQL的配置参数memlock

这个参数会强迫mysqld进程的地址空间一直被锁定在物理内存上,对于os来说是非常霸道的一个要求。必须要用root帐号来启动MySQL才能生效。

还有一个比较复杂的方法,指定MySQL使用大页内存(Large Page)。Linux上的大页内存是不会被换出物理内存的,和memlock有异曲同工之妙。具体的配置方法可以参考:http://harrison-fisk.blogspot.com/2009/01/enabling-innodb-large-pages- on-linux.html

 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值