碰到诡异问题，求助大能解答，关于表单提交大文件无限数据提交问题

最新推荐文章于 2021-07-20 21:41:33 发布
最新推荐文章于 2021-07-20 21:41:33 发布
阅读量1.2k 收藏
点赞数
分类专栏： 服务端语言
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lhb_blog/article/details/37689341
版权
服务器环境
php环境

出现情况：上传30M文件的时候 本地数据一直在提交，观察服务器io 也一直有下载流量。但是就没有个结束，php输出 $_FILES，也不会执行到这行代码，比如我提交30M文件表单提交，但是流量估计超过好几百M也不会停止，反正不人为停止脚步，就是不断在数据交互。请问有大哥碰到这情况吗？是否哪些php配置没配置对




大文件上传问题已解决 以我测试上传32M文件大小为例

php 运行方式 FPM-FCGI

php.ini 

upload_max_filesize = 64M//上传文件最大限制

post_max_size = 100M //POST方法提交最大限制 最好大于上面

max_execution_time = 300//脚本超时时间
max_input_time = 300
memory_limit = 200M //如果不够大。会导致内存溢出500错误

nginx.conf

client_max_body_size 100m; //根据文件大小自己调整提交空间


以上解决方案。自己查百度摸索出来分享下，有哪位大能能对大文件上传有比较系统的配置优化方案希望能指点一二，谢谢！！

lihaiboas1
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
websocket传输数据大小限制_websocket 发送字符串数据上限是多少
weixin_39883286的博客
12-22 6525
匿名用户1级2017-06-07 回答网上很多关于websocket发送数据大于大于0xFFFF(65535)的处理都是一句话“暂不处理”！！！！！所以特写此文。int WSSession::safeSendFrame(uint8_t *buffer, size_t bufferSize, enum wsFrameType frameType){// 发数据到浏览器需要封装一个websocket的...
mysql主从复制，数据量大， 高并发时，出现数据不一致
jaryle的专栏
06-27 8987
mysql5.7的并行复制就可以解决数据延迟的问题。 MySQL 5.7并行复制时代 众所周知，MySQL的复制延迟是一直被诟病的问题之一，然而在Inside君之前的两篇博客中（1，2）中都已经提到了MySQL 5.7版本已经支持“真正”的并行复制功能，官方称为为enhanced multi-threaded slave（简称MTS），因此复制延迟问题已经得到了极大的改
表单上传附件报错（所选的文件太大，会导致表单超出所允许的资源数量，请选择其它文件。）...
weixin_30498921的博客
04-18 208
使用管理中心为 InfoPath Forms Services 配置身份验证和数据连接设置 确认执行此过程的用户帐户是 SharePoint 组“Farm Administrators”的成员。 在管理中心网站的“快速启动”上，单击“一般应用程序设置”。 在“一般应用程序设置”页上的“InfoPath Forms Services”部分，单击“配置 InfoPath ...
rsync+sersync服务配置
运维那些事儿
04-06 1815
第1章 rsync 1.1 rsync是什么 rsync是一款开源的，快速的、多功能的、可实现全量及增量的本地或远程数据同步备份的优秀工具同步备份的优秀工具 1.2 rsync的特性如下：  支持拷贝特殊文件如链接文件，设备等  可以有排除指定文件或目录同步的功能，相当于打包命令tar的排除功能。  可以做到保持原文件或目录等权限，时间，软硬链接，属主，属组等所有属性均不改变 –p  可实...
大量数据时,表单提交数据丢失的解决办法 (php服务器)
qq_40662918的博客
09-26 512
情景: 一个form表单提交时, 有大量的表单字段值, 往后台传送后. 后台取到的字段, 总是不完整. 原因是php配置环境, 有一个默认值max_input_vars. 这个值默认不打开时是1000. 要把前面分号去掉, 赋值5000 找到php.ini文件, 找到max_input_vars, 修改为以下. 然后重启服务器. 成功! ; How many GET/POST/COOK...
针对大表单数据提交的优化方案
ikownyou的博客
11-24 1600
在项目中为了帮客户统一上传服务，我们做了1w商家对3w车型的对应表单设计,但是在表单提交过程中后台总是接受不到数据、针对 大表达提交可选以下两种方式配合使用解决大表单提交后台接不到数据的问题。 1.通过使用JSON.stringify(对象)将对象或者数组进行序列化 2.修改tomcat链接参数配置主要是maxPostSize 和 maxSavePostSize两个参数作怪；当这两个参数为0时
mysql主从同步面试题_运维派 企业面试题1 监控MySQL主从同步是否异常
weixin_35815036的博客
01-20 212
企业面试题1：(生产实战案例)：监控MySQL主从同步是否异常，如果异常，则发送短信或者邮件给管理员。提示：如果没主从同步环境,可以用下面文本放到文件里读取来模拟：阶段1：开发一个守护进程脚本每30秒实现检测一次。阶段2：如果同步出现如下错误号(1158,1159,1008,1007,1062)，则跳过错误。阶段3：请使用数组技术实现上述脚本(获取主从判断及错误号部分)#假设文件为/log/tes...
空间管理员（一）AFS文件目录系统索引节点vfs_inode结构
weixin_53295593的博客
07-20 1338
空间管理员（一）AFS文件目录系统索引节点vfs_inode结构 提示：写完文章后，目录可以自动生成，如何生成可参考右边的帮助文档 文章目录空间管理员（一）AFS文件目录系统索引节点vfs_inode结构前言一、VFS（Virtual File System）虚拟文件系统二、VFS反映设备文件的索引节点对象由dev_inode结构体表示、256字节。总结 前言 现实界： 无数相互作用而运动着的物体，其形态在时空中不断创生与消亡，而构成物体之最小物质单位是不生不灭的、永恒运动的、相互作用的元子（纯阳
Fragment中关于Simpleadapter的 无指针问题 nullpoint 以及runnable问题
Aggressive_man的博客
09-03 457
本人也是初学者 android3.0之后好多东西都新的，比如那个Tabactivity已经不能用 Fragmentactivity 也没法用activity继承，这几天我想做一个在activity上做两个Fragment，遇到simpleadapter问题，无指针问题，好多大能说过这个问题，因为我加了个线程runnable，在runnable中使用了adapter报错
js判断文件大小以及阻止form表单提交
qq_41993755的博客
05-11 679
https://blog.csdn.net/u014236259/article/details/52885591js是看到别人博客写的，直接复制下来的，然后修修补补，虽然很多没用，但是也比自己写方便为什么需要这个，服务器是Nginx的，Nginx限制了上传文件的大小，最开始报413的错误，要求用代码解决，不改Nginx配置文件window.check = function () { v...
表单提交数据量过大导致数据丢失的问题
GQ2010的专栏
09-10 5309
今天遇到一个问题，通过POST方式提交数据量过大，在后台接收不到数据，POST没有数据限制，查看代码发现确实是POST提交，问题出在哪里了呢？ 通过查看资料,发现tomcat默认传输最大的数据限制为2M,最后的解决办法是设大tomcat的conf下的server.xml中8080Connector的maxPostSize的值.(设为0是取消POST的大小限制) 打开tomcat目录下的conf
表单内容太大导致后台获取不了解决
liyanghao809433131的博客
01-05 3321
通过POST方式提交数据量过大，在后台接收不到数据，POST没有数据限制，查看代码发现确实是POST提交，问题出在哪里了呢？ 通过查看资料,发现tomcat默认传输最大的数据限制为2M,最后的解决办法是设大tomcat的conf下的server.xml中8080Connector的maxPostSize的值.(设为0是取消POST的大小限制) 打开tomcat目录下的conf目录，修改serv
php form表单提交数量限制问题
wanganji5252的博客
10-14 2285
在写上传form 多表单post提交时 出现了失败的问题 1.首先确认表单正确，发现前段的复选框数量是够的但是传到后台就被部分截断，这时候应该就是后台接受的问题 2.两种情况：第一种是对表单提交数据的大小有限制，此处由于全是字符串故表单数据很小，所以不是此原因。 第二种就是PHP后台接受表单的变量数有限制，发现php默认最多接受1000个表单变量。 解决方法...
关于表单提交参数过长的问题
weixin_39809397的博客
07-16 1653
More than the maximum number of request parameters (GET plus POST) for a single request ([10,000]) were detected. Any parameters beyond this limit have been ignored. To change this limit, set the max...
java 多线程千万级数据导出
最新发布
12-03
以下是Java多线程千万级数据导出的示例代码： ```java import java.io.File; import java.util.ArrayList; import java.util.List; import java.util.concurrent.CountDownLatch; import java.util.concurrent.ExecutorService; import java.util.concurrent.Executors; import com.alibaba.excel.ExcelWriter; import com.alibaba.excel.metadata.Sheet; import com.alibaba.excel.support.ExcelTypeEnum; public class ExcelExportUtil { /** * 导出Excel * * @param dataList 数据列表 * @param sheetName sheet名称 * @param filePath 文件路径 * @param fileName 文件名 * @param sheetSize 每个sheet中数据的行数 */ public static void exportExcel(List<List<Object>> dataList, String sheetName, String filePath, String fileName, int sheetSize) { // 创建线程池 ExecutorService executorService = Executors.newFixedThreadPool(10); // 创建ExcelWriter ExcelWriter excelWriter = new ExcelWriter(new File(filePath + fileName), ExcelTypeEnum.XLSX); // 计算需要创建的sheet数量 int sheetCount = dataList.size() % sheetSize == 0 ? dataList.size() / sheetSize : dataList.size() / sheetSize + 1; // 创建计数器 CountDownLatch countDownLatch = new CountDownLatch(sheetCount); // 创建sheet for (int i = 0; i < sheetCount; i++) { // 计算每个sheet中数据的起始位置和结束位置 int startIndex = i * sheetSize; int endIndex = Math.min(startIndex + sheetSize, dataList.size()); // 创建sheet Sheet sheet = new Sheet(i + 1, 0); sheet.setSheetName(sheetName + (i + 1)); // 创建数据列表 List<List<Object>> sheetDataList = new ArrayList<>(); for (int j = startIndex; j < endIndex; j++) { sheetDataList.add(dataList.get(j)); } // 将sheet数据提交到线程池中进行处理 executorService.submit(new ExcelExportTask(excelWriter, sheet, sheetDataList, countDownLatch)); } try { // 等待所有线程处理完成 countDownLatch.await(); } catch (InterruptedException e) { e.printStackTrace(); } finally { // 关闭ExcelWriter和线程池 excelWriter.finish(); executorService.shutdown(); } } } ``` 其中，ExcelExportTask是一个实现了Runnable接口的任务类，用于将数据写入Excel中。具体代码如下： ```java import java.util.List; import java.util.concurrent.CountDownLatch; import com.alibaba.excel.ExcelWriter; import com.alibaba.excel.metadata.Sheet; public class ExcelExportTask implements Runnable { private ExcelWriter excelWriter; private Sheet sheet; private List<List<Object>> dataList; private CountDownLatch countDownLatch; public ExcelExportTask(ExcelWriter excelWriter, Sheet sheet, List<List<Object>> dataList, CountDownLatch countDownLatch) { this.excelWriter = excelWriter; this.sheet = sheet; this.dataList = dataList; this.countDownLatch = countDownLatch; } @Override public void run() { try { // 写入数据 excelWriter.write0(dataList, sheet); } finally { // 计数器减1 countDownLatch.countDown(); } } } ``` 使用示例： ```java import java.util.ArrayList; import java.util.List; public class ExcelExportTest { public static void main(String[] args) { // 模拟数据 List<List<Object>> dataList = new ArrayList<>(); for (int i = 0; i < 10000000; i++) { List<Object> row = new ArrayList<>(); row.add("数据" + i); dataList.add(row); } // 导出Excel ExcelExportUtil.exportExcel(dataList, "Sheet1", "D:/", "data.xlsx", 1000000); } } ```
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值