服务器内存只有16G,对一个100G的表全表扫描,内存会爆吗?
不会,因为 Mysql 是边读边发的。
select * from tableName;
例如上面的SQL,假设 tableName 表数据量是100G。那么执行该 SQL 的流程如下:
-
获取一行,保存的 net_buffer 中,这块内存大小是有参数 net_buffer_length 定义的,默认是16K;
-
重复获取行,直至 net_buffer 写满,调用网络接口发出去;
-
如果发送成功,则清空 net_buffer,重复获取数据放入 net_buffer;
-
如果发送函数返回 EAGAIN 或 WSAEWOULDBLOCK,就表示本地网络栈(socket send buffer)写满了,进入等待。直到网络栈重新可写,再继续发送。
由上面流程图可知:
-
一个查询在发送过程中,占用的MySQL内部的内存最大就是net_buffer_length这么大,是 边读边发 的,并不会达到200G;
-
socket send buffer 也不可能达到200G(默认定义/proc/sys/net/core/wmem_default),如果socket send buffer被写满,就会暂停读数据的流程。