Laravel大量数据库查询导致php进程内存耗尽

在处理大量用户数据时,Laravel命令行工具遇到内存耗尽问题,原因是php进程内存限制和Query Logging功能。通过临时提高内存限制至1G并非长久之计。解决方法是定位到内存暴涨的DB查找语句,并根据Laravel官方文档禁用Query Logging,使用DB::connection()->disableQueryLog()来避免内存过度消耗,从而成功解决问题。

最近做了一个Laravel命令行工具来处理大量用户数据。奇怪的是,每次处理到十多万条数据的时候就报如下内存耗尽错误:

PHP Fatal error:  Allowed memory size of 134217728 bytes exhausted (tried to allocate 72 bytes) in [....] 

出现该错误的原因是php.ini中默认设置php进程最大可以使用128M内存,一旦超过就会导致新分配内存失败。

可以使用以下语句将限制临时提高到1G内存:

ini_set('memory_limit', '1024M');

但这种方法毕竟是权宜之计,如果未来数据量指数级增加还是会出问题,所以必须找到内存暴涨的根源。

经过百般查找,把问题定位到了一个不起眼的DB查找语句:

...

$item = DB::table('表名')->where('user_id', $user_id)->where......

...

在Laravel官方文档找到以下说明:

Query Logging

By default, Laravel keeps a log in memory of a

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值