ThinkPHP5 读取文件并入库过程中的内存超出错误

最新推荐文章于 2023-04-02 18:25:13 发布
最新推荐文章于 2023-04-02 18:25:13 发布
阅读量790 收藏
点赞数
分类专栏： 程序开发经验 文章标签： Thinkphp php
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u011546137/article/details/88117130
版权

在使用thinkphp5 编写读取目录文件并入库程序的过程中，因为读取文件都在40w以上，造成php内存超出上限的错误
1、可能因为insertAll 每次写入数据限制过多或过少，大概1w左右最佳
2、可能因为thinkphp存储日志机制占用了内存，直接将thinkphp/library/think/Log.php 里的 record改为下图
在这里插入图片描述

隔壁王大爷996
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
thinkphp表单上传文件并将文件路径保存到数据库中
10-21
主要介绍了thinkphp表单上传文件并将文件路径保存到数据库中的相关资料,需要的朋友可以参考下
ThinkPHP5文件管理平台
05-26
文件资料分类上传，可以直接拖拽上传和管理，快速查找
linux 内存泄漏检查工具
hongtaya的博客
10-30 370
在c++中，所有由new和malloc分配的堆内存都要由配对的delete和free来进行释放，当在类中动态分配的内存就应该将释放函数写入类的析构函数中，如果没有用智能指针的情况下，我们常常会遗漏对内存的释放。在linux的调试工具中，valgrind工具可以用来检查程序中内存的泄露。 下载安装指令如下： sudo apt-get install valgrind 使用格式如下： valgri...
tp 框架的insertAll 解读
行走天下
11-25 2768
有这样一个表 CREATE TABLE IF NOT EXISTS `user_info` ( `id` int(11) NOT NULL AUTO_INCREMENT COMMENT '自增主键', `name` varchar(255) NOT NULL default '' COMMENT '姓名', `age` int(11) NOT NULL default '0' COMME...
thinkphp6处理大数据入库问题及解决办法
gudada010的博客
04-02 604
开发工程中需要将老系统的数据先处理再加入新系统中，thinkphp6中的 insertAll（）方法对超过一定量数据导入数据库会报错，具体原因未知。（数据规模10000条人员信息数据）
thinkphp5 php读取超大的excel文件数据的方案
weixin_41965172的博客
02-22 1233
thinkphp5PHP读取超大的excel文件数据的方案 public function convert($size) { $unit = array('b', 'kb', 'mb', 'gb', 'tb', 'pb'); return @round($size / pow(1024, ($i = floor(log($size, 1024)))), 2) . ' ' . ...
tp5 mysql大数据_求大神指点如何用thinkphp5.1 处理大量mysql数据
weixin_42397024的博客
02-11 802
我这里有个需求,本地数据库(一个):一个表user_local,远程数据库(共两个库,五个表,)所有信息通过uid关联一个数据库(user_data_a)中只有一个表user_basic,为所有用户的基本信息,另一个数据库(user_data_b)中其它四个表分为两类,一类(其中两个表,user_profile_active和user_profile_not_active)用来存放用户档案,一个表...
thinkphp导入excel遇到Fatal error: Allowed memory size of 1073741824 bytes exhausted
qq_35220984的博客
09-20 2509
记录一下使用thinkphp开发excel导入功能时碰到的一个小BUG。
tp5.1 layui 数据太多造成列表读取错误(内存溢出)
php菜鸟技术天地
10-14 870
原来错误写法： $list=Db::name('log')->field('id,title,content,username,time,controller')->where($where)->order($od)->limit($limit)->page($page)->select(); $list2=Db::name('log')->fie...
通过thinkphp5+PHPOffice读取word文件写入到html文件
04-28
先安装thinkphp5服务器环境 安装composer，执行命令：composer require phpoffice/phpword 如果没有配置域名直接访问localhost，就可以看到效果
php查询mysql大量数据造成内存不足的解决方法
12-19
本文实例分析了php查询mysql大量数据造成内存不足的解决方法。分享给大家供大家参考。具体分析如下： 一、问题 使用php查询mysql大数据量的时候，程序尚未执行完毕，跳出警告： Fatal error:  Allowed memory size of 100663296 bytes exhausted (tried to allocate 103 bytes) 错误提示：php所分配到的100M内存被占用完毕。 二、解决方法： 最简单的解决办法是：在执行文件的头部增加： ini_set('memory_limit','256M'); 把内存增加到256M或者更多，可以增大php所使
Thinkphp5框架实现图片、音频和视频文件的上传功能详解
10-16
主要介绍了Thinkphp5框架实现图片、音频和视频文件的上传功能,结合实例形式分析了thinkPHP5文件上传的原理、操作步骤、实现方法及相关注意事项,需要的朋友可以参考下
TP5(thinkPHP5框架)实现显示错误信息及行号功能的方法
10-16
主要介绍了TP5(thinkPHP5框架)实现显示错误信息及行号功能的方法,结合实例形式分析了thinkPHP5显示错误信息及行号的相关配置文件与设置修改方法,需要的朋友可以参考下
ThinkPHP 5 日志管理
weixin_45083630的博客
12-07 499
ThinkPHP 5 日志管理 在配置文件中如/application/config.php 'log' => [ // 日志记录方式，内置 file socket 支持扩展 'type' => 'File', // 'type' => 'test', //关闭日志，如果是这个配置的话...
内存溢出捕捉，及处理
weixin_42270087的博客
01-21 967
项目场景：在原有的基础上追加excel数据 描述：分批导进数据，从而减少内存的消耗 问题描述： 提示：导出数据还是会出现内存溢出 原因分析： 提示：这里填写问题的分析： 例如：Handler 发送消息有两种方式，分别是 Handler.obtainMessage()和 Handler.sendMessage()，其中 obtainMessage 方式当数据量过大时，由于 MessageQuene 大小也有限，所以当 message 处理不及时时，会造成先传的数据被覆盖，进而导致数据丢失。 解决方
记一次线上 thinkphp3.2 初始化内存溢出问题
demo
06-03 3289
PHP Fatal error: Allowed memory size of 33554432 bytes exhausted (tried to allocate 72 bytes) in ThinkPHP/Common/functions.php on line ThinkPHP3.2 框架生成 runtime 文件会调用 token_get_all 方法去清除配置文件空格，tp5.0 与 tp3.2 的问题重现 和通过Xdebug对比性能分析，可视化webGrind
ThinkPHP3.2 内存不足，导致服务器挂机
a159169179的博客
12-24 417
最近项目中，运行tp项目的apache服务器更加频繁的死机，今天查阅了下资料，说这个内存不足导致的。 形成原因：thinkphp在进程执行过程中，会触发记录日志（log.class.php的record的方法），在记录系统日志时，thinkphp先是给所有日志信息记录在内存里（log.class.php中的$Log变量数组），最后一次性写入文件，这样做的目的主要是减少open file...
ThinkPHP框架在linux服务器nginx环境下跑出现溢出缓存问题解决方法
任聪聪的博客
04-28 1412
问题描述：:( Allowed memory size of 1916796928 bytes exhausted (tried to allocate 3086655745 bytes)错误位置FILE: /data/xxx/ThinkPHP/Common/functions.php 　LINE: 370问题解决： 这个问题貌似不是php函数preg_replace_callback的bug。我
android手机应用源码Imsdroid语音视频通话源码.rar
最新发布
05-20
android手机应用源码Imsdroid语音视频通话源码.rar
thinkphp5 database.php 配置文件中return中 配置多个数据库
05-25
在ThinkPHP5的database.php配置文件中，可以配置多个数据库连接。具体实现方式如下： 1. 在config目录下创建一个database.php文件，用于存储数据库连接信息。 2. 在database.php文件中使用return返回一个数组，数组中包含多个数据库连接信息。 示例代码如下： ```php <?php return [ // 默认数据库连接信息 'default' => [ // 数据库类型 'type' => 'mysql', // 服务器地址 'hostname' => 'localhost', // 数据库名 'database' => 'test', // 数据库用户名 'username' => 'root', // 数据库密码 'password' => '', // 数据库连接端口 'hostport' => '', // 数据库连接参数 'params' => [], // 数据库编码默认采用utf8 'charset' => 'utf8', // 数据库表前缀 'prefix' => '', ], // 第二个数据库连接信息 'db2' => [ // 数据库类型 'type' => 'mysql', // 服务器地址 'hostname' => 'localhost', // 数据库名 'database' => 'test2', // 数据库用户名 'username' => 'root', // 数据库密码 'password' => '', // 数据库连接端口 'hostport' => '', // 数据库连接参数 'params' => [], // 数据库编码默认采用utf8 'charset' => 'utf8', // 数据库表前缀 'prefix' => '', ], ]; ``` 3. 在数据库操作时，可以指定使用哪个数据库连接。例如： ```php <?php // 使用默认数据库连接 Db::name('user')->where('status',1)->select(); // 使用db2数据库连接 Db::connect('db2')->name('user')->where('status',1)->select(); ``` 以上就是在ThinkPHP5中配置多个数据库连接的方法。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值