ThinkPHP5 读取文件并入库过程中的内存超出错误

最新推荐文章于 2023-04-02 18:25:13 发布
最新推荐文章于 2023-04-02 18:25:13 发布
阅读量835 收藏
点赞数
分类专栏： 程序开发经验 文章标签： Thinkphp php
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u011546137/article/details/88117130
版权

在使用thinkphp5 编写读取目录文件并入库程序的过程中，因为读取文件都在40w以上，造成php内存超出上限的错误
1、可能因为insertAll 每次写入数据限制过多或过少，大概1w左右最佳
2、可能因为thinkphp存储日志机制占用了内存，直接将thinkphp/library/think/Log.php 里的 record改为下图
在这里插入图片描述

隔壁王大爷996
关注
专栏目录
ThinkPHP5结合command定时任务扩展内存溢出问题
weixin_43967933的博客
04-10 1672
使用命令行进入项目文件,不是进入到public目录下 执行php think emailSend之后出现以下错误信息 而且我的command目录是在app/admin/controller目录下的 当然admin模块已经有个config.php配置了.出现内存溢出的问题是因为框架调试模式设置的是debug=true的情况下，因为Log::recorde()方法是先存储在内存...
记一次线上 thinkphp3.2 初始化内存溢出问题
demo
06-03 3321
PHP Fatal error: Allowed memory size of 33554432 bytes exhausted (tried to allocate 72 bytes) in ThinkPHP/Common/functions.php on line ThinkPHP3.2 框架生成 runtime 文件会调用 token_get_all 方法去清除配置文件空格，tp5.0 与 tp3.2 的问题重现 和通过Xdebug对比性能分析，可视化webGrind
ThinkPHP框架在linux服务器nginx环境下跑出现溢出缓存问题解决方法
任聪聪的博客
04-28 1439
问题描述：:( Allowed memory size of 1916796928 bytes exhausted (tried to allocate 3086655745 bytes)错误位置FILE: /data/xxx/ThinkPHP/Common/functions.php 　LINE: 370问题解决： 这个问题貌似不是php函数preg_replace_callback的bug。我
tp5.1 layui 数据太多造成列表读取错误(内存溢出)
php菜鸟技术天地
10-14 895
原来错误写法： $list=Db::name('log')->field('id,title,content,username,time,controller')->where($where)->order($od)->limit($limit)->page($page)->select(); $list2=Db::name('log')->fie...
thinkphp-脚本运行时间越长，占用内存越多直至超内存-解决
mysteryflower的专栏
07-09 1664
ThinkPHP一个进程执行的过程中， 运行到某个切面时会触发记录日志(调用Log.class.php中的record方法)， 在记录系统日志的时，ThinkPHP先是给所有日志信息记录在内存里（Log.class.php 中的$Log变量数组），最后一次性写入文件，这样做的目的主要是减少open file的次数，提高写Log的效率。当系统日志信息积累过多时，进程占用的内存空间就会越来越大了。 修改record方法，定期100条批量保存一次日志到磁盘，同时释放Log ...
通过thinkphp5+PHPOffice读取word文件写入到html文件
04-28
接下来，我们需要创建一个ThinkPHP5的控制器来处理读取Word文件并写入HTML的过程。在控制器中，可以使用PHPWord提供的API来读取.docx文件，然后将其内容转换成HTML格式。以下是一个简单的示例代码： ```php ...
ThinkPHP5文件管理平台
05-26
《ThinkPHP5构建的文件管理平台详解》 在IT行业中，高效、有序的文件管理是提升工作效率的关键。ThinkPHP5，作为一个成熟的PHP框架，结合Layui前端组件库，为开发者提供了一种强大的构建文件管理平台的方式。本文将...
TP5(thinkPHP5框架)实现显示错误信息及行号功能的方法
10-16
在ThinkPHP5中，可以通过修改'display_errors'配置项来控制错误的详细级别。这个配置项的默认值可能是false，将其设置为true可以显示更详细的错误信息和错误发生的行号。 具体设置方法如下： ```php 'display_...
Thinkphp5框架实现图片、音频和视频文件的上传功能详解
10-16
本篇文章将深入讲解如何在Thinkphp5中实现图片、音频和视频文件的上传。 1. **文件上传原理** 文件上传的基本原理是通过HTTP协议中的POST请求将文件内容以二进制流的形式发送到服务器。在HTML表单中，通过`...
ThinkPHP5 自定义配置页面（静态文件）
10-12
根据给定的链接，我们将参考《ThinkPHP5自定义配置页面（静态文件）》这篇文章，该文详细介绍了如何在ThinkPHP5中创建自定义的404错误页面。首先，我们要知道在ThinkPHP5中，错误处理是通过`app\exception\Handle....
php查询mysql大量数据造成内存不足的解决方法
12-19
本文实例分析了php查询mysql大量数据造成内存不足的解决方法。分享给大家供大家参考。具体分析如下： 一、问题 使用php查询mysql大数据量的时候，程序尚未执行完毕，跳出警告： Fatal error:  Allowed memory size of 100663296 bytes exhausted (tried to allocate 103 bytes) 错误提示：php所分配到的100M内存被占用完毕。 二、解决方法： 最简单的解决办法是：在执行文件的头部增加： ini_set('memory_limit','256M'); 把内存增加到256M或者更多，可以增大php所使
ThinkPHP提示错误Fatal error: Allowed memory size的解决方法
10-24
主要介绍了ThinkPHP提示错误Fatal error: Allowed memory size的解决方法,分析了该错误的原因与具体的解决方法,具有一定参考借鉴价值,需要的朋友可以参考下
ThinkPHP3.2 内存不足，导致服务器挂机
a159169179的博客
12-24 439
最近项目中，运行tp项目的apache服务器更加频繁的死机，今天查阅了下资料，说这个内存不足导致的。 形成原因：thinkphp在进程执行过程中，会触发记录日志（log.class.php的record的方法），在记录系统日志时，thinkphp先是给所有日志信息记录在内存里（log.class.php中的$Log变量数组），最后一次性写入文件，这样做的目的主要是减少open file...
thinkphp5 php读取超大的excel文件数据的方案
weixin_41965172的博客
02-22 1273
thinkphp5PHP读取超大的excel文件数据的方案 public function convert($size) { $unit = array('b', 'kb', 'mb', 'gb', 'tb', 'pb'); return @round($size / pow(1024, ($i = floor(log($size, 1024)))), 2) . ' ' . ...
tp5 mysql大数据_求大神指点如何用thinkphp5.1 处理大量mysql数据
weixin_42397024的博客
02-11 829
我这里有个需求,本地数据库(一个):一个表user_local,远程数据库(共两个库,五个表,)所有信息通过uid关联一个数据库(user_data_a)中只有一个表user_basic,为所有用户的基本信息,另一个数据库(user_data_b)中其它四个表分为两类,一类(其中两个表,user_profile_active和user_profile_not_active)用来存放用户档案,一个表...
内存溢出捕捉，及处理
weixin_42270087的博客
01-21 1030
项目场景：在原有的基础上追加excel数据 描述：分批导进数据，从而减少内存的消耗 问题描述： 提示：导出数据还是会出现内存溢出 原因分析： 提示：这里填写问题的分析： 例如：Handler 发送消息有两种方式，分别是 Handler.obtainMessage()和 Handler.sendMessage()，其中 obtainMessage 方式当数据量过大时，由于 MessageQuene 大小也有限，所以当 message 处理不及时时，会造成先传的数据被覆盖，进而导致数据丢失。 解决方
thinkphp6处理大数据入库问题及解决办法
最新发布
gudada010的博客
04-02 753
开发工程中需要将老系统的数据先处理再加入新系统中，thinkphp6中的 insertAll（）方法对超过一定量数据导入数据库会报错，具体原因未知。（数据规模10000条人员信息数据）
thinkphp5.1 踩过的坑 insert、insertAll
liyiliang123的博客
09-27 8923
今天在存数据的时候踩到了一个关于 insert 和 insertAll的坑，因为insertAll因为也可以保存一条数据，索性就都用insertAll 来保存 这里注意 insert 在格式上是一维数组的data格式，但是insertAll 需要二维数组的data格式！！！ ...
tp5批量添加问题汇总
cheers_bin的博客
01-18 1604
tp5提供的批量添加的方法：insertAll 下面说一下可能遇到的问题， 1：字段长度超出：String data,right truncated:1406 Data too long for column ‘content’ at row 1 解决方法：直接修改字段长度就可以，比如原来text,把类型改为longtext 2.某条数据缺少字段：Cardinality violation: 1222 The used SELECT statements have a different number of
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值