HTTP error 404.3 & HTTP error 502.3

目前正在做datawarehouse项目。需要将erp 原始DB中的数据通过http请求发送到service端(service负责insert data to postgres DB),有的客户数据达数百万条,一次同步一条数据会让performance变得特别慢。 可能需要几星期完成初始化。 最终解决方案是每次同步10,000条数据。service端对一万条数据进行多线程处理。

然而,erp 中一万条数据转化成jsonObject达50M。IIS 默认能接受的最大文件上传大小约30M。一开始并不知晓这个限制,直到数据无法完成初始化, 每次上传一万条数据只有几千条成功同步。后来捕捉返回的object发现是http404.3 错。网上很多这种错误的解决办法。即:IIS site下的web.cong文件增加如下结点:

<system.webServer>
    <security>
      <requestFiltering>
        <requestLimits maxAllowedContentLength="100000000" />
      </requestFiltering>

    </security>

</system.webServer>


完美解决。本地 debug运行。一万条数据同步成功。


然而当publish project到iis site对应的directory再进行测试。同步失败。返回error HTTP 502.3 -  Bad Gateway。大约是一万条数据同步时间太久,timeout,同步中断,返回error。

百度上并没找到直接解决办法。转战google。官方文档有解释web.config下aspnetcore结点 有个属性 requestTimeout:Specifies the duration for which the ASP.NET Core Module waits for a response from the process listening on %ASPNETCORE_PORT%.   其实打开iis site.到你的网址下的配置编辑器里(configuration editor)。找到如下部分。可以看到默认requesttimeout是两分钟。 00:02:00。


返回web.config。增加requestTimelimit 属性。时间分别是 小时 分钟 秒。


  解决。同步又可以顺利进行了。

附config文件官方文档:

https://docs.microsoft.com/en-us/aspnet/core/host-and-deploy/aspnet-core-module?view=aspnetcore-2.1

  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值