php嵌套循环太慢,foreach 嵌套循环 性能优化的问题

(有很多结构一样的产品表,表名不一样)先是一个循环产品表 查询每个产品表按条件筛选出来的产品。

然后再把得获取的产品循环一条一条的插入新建的一个表中。

刚开始的时候我用的两个foreach实现这个功能了,但是数据量太大了,一次执行的结果就是内存不够用,直接 504 Gateway Time-out 错误。数据库中只插入了1800多条数据,剩余的数据就没有插入了。

现在就是想寻求一种思路,怎么解决数据量太大,而内存不够用的问题?最好能给个demo。

回复内容:

(有很多结构一样的产品表,表名不一样)先是一个循环产品表 查询每个产品表按条件筛选出来的产品。

然后再把得获取的产品循环一条一条的插入新建的一个表中。

刚开始的时候我用的两个foreach实现这个功能了,但是数据量太大了,一次执行的结果就是内存不够用,直接 504 Gateway Time-out 错误。数据库中只插入了1800多条数据,剩余的数据就没有插入了。

现在就是想寻求一种思路,怎么解决数据量太大,而内存不够用的问题?最好能给个demo。

php-cgi 不适合干这种事情(执行时间限制等等)。

这种大量数据的操作放到线下去执行吧。比如用 php 命令去调用对应的 php 脚本。

还有就是分批操作:把大任务拆分成几个小任务,分批去执行。

密集的数据查询、更新类操作,应该放到数据库的存储过程中实现。

如果实时性要求较高,只能做异步处理了,自动创建一个后台任务执行,执行完成后执行回调操作。

php foreach的时候会把每个值复制一次。foreach ($tbs as $tb) {

$rows = $tb->getRows();

foreach ($rows as $row) {

insert($row);

}

}

上述代码中,第一层循环中,每次循环都会把$tbs中的一项复制出来,放在$tb里,当$tb里字段过多,就挂了。

建议你用for试试,直接用 $tbs + 下标的形式操作

这种形式适合使用命令行操作。命令行是没有超时时间的

有个东西叫做迭代器

本文原创发布php中文网,转载请注明出处,感谢您的尊重!

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值