HttpWebRequest请求超时的错误

最新推荐文章于 2023-04-28 13:55:27 发布
最新推荐文章于 2023-04-28 13:55:27 发布
阅读量7.6k 收藏 2
点赞数 1
文章标签： redirect 多线程

转帖地址：http://www.cnblogs.com/robot/archive/2009/06/10/1500085.html

 

从网上抓取点数据,其间要创建两个HttpWebRequest,第一个请求发送成功后,将服务端返回的Cookie记录下来给第二个 HttpWebRequest使用.代码敲完了就执行吧,但请求到20次左右,总是会出现"请求超时"的错误,找了N久也没找到问题在哪里.

        开始,我以为是服务端限制了请求数量,于是,找了些代理IP,每个HttpWebRequest分配一个WebProxy,但是问题依然存在,于是我把 Timeout属性改到5000ms,然后再Catch,在Catch中再设置一个失败的标识,Catch完后如果发现标识为失败,则继续发送请求,直到 请求成功为止,执行了N长时间,还是在20次左右卡住了,程序一直在不停的try,catch,仍然没有往下继续的意思.

        没办法,网上搜了一下,没找到对应的数据,后来在园子里一个朋友不太相关的文章 中找到了答案,一看,似乎以前就碰到过这个问题,唉,记性不好了,还是记下来吧,免得下次碰到又满世界的去找.

        其实没有什么大问题,问题就是我第一个HttpWebRequest在GetResponse之后,忘记将取得的WebResponse.Close掉.原来这个Close还负责释放资源啊...

        改改代码,加了一行代码,将WebResponse.Close掉后,一切恢复正常.

        (单线程的情况下,关闭掉WebResponse就可以了,多线程的情况下似乎要设置一下WebRequest.ServicePoint.ConnectionLimit属性)

       顺便记一下:HttpWebRequest有个AllowAutoRedirect,可以设置是否允许服务端Redirect,默认为true,特殊情况下需要设置为false.

CCTV_HU
关注
  • 1
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
为啥HttpWebRequest 操作超时,但实际上服务器已经返回了数据?
liuji0517的博客
06-18 2653
System.Net.WebException:“操作超时”。 我是用了netcore写了一个服务。 [Route("api/[controller]")] publicclassValuesController:Controller { [HttpGet] publicIEnumerable<string>Get() { List<string>ss...
C# httpwebrequest访问HTTPS错误处理方法
08-31
下面小编就为大家带来一篇C# httpwebrequest访问HTTPS错误处理方法。小编觉得挺不错的，现在就分享给大家，也给大家做个参考。一起跟随小编过来看看吧
C#基于HttpWebRequest实现发送HTTP请求的方法分析
08-26
主要介绍了C#基于HttpWebRequest实现发送HTTP请求的方法,结合实例形式分析了C#使用HttpWebRequest类与System.IO类实现发送HTTP请求相关操作技巧与注意事项,需要的朋友可以参考下
C# HttpWebRequest请求超时解决办法
江湖数据
08-16 6611
request.GetResponse();超时问题的解决，和HttpWebRequest多线程性能问题，请求超时的错误， 解决办法 1.将http的request的keepAlive设置为false //如果不是必须的要keepalive的，那么就要设置KeepAlive为false： 2.修改System.Net.ServicePointManager.DefaultConnectionLimit = 50; //这个值默认是2，根据自己的情况修改 3.释放资源（比如HttpWebReques对象和H
RPC 的超时设置，一不小心就是线上事故！
没有伞的孩子必须努力奔跑！—小林
04-30 462
上面这张监控图，对于服务端的研发同学来说再熟悉不过了。在日常的系统维护中，『服务超时』应该属于监控报警最多的一类问题。 尤其在微服务架构下，一次请求可能要经过一条很长的链路，跨多个服务调用后才能返回结果。当服务超时发生时，研发同学往往要抽丝剥茧般去分析自身系统的性能以及依赖服务的性能，这也是为什么服务超时相对于服务出错和服务调用量异常更难调查的原因。 这篇文章将通过一个真实的线...
HTTP 408 错误 – 请求超时 (Request timeout)
热门推荐
xanxng的专栏
10-17 9万+
介绍 您的 Web 服务器认为，在 1 ）建立客户端（如您的浏览器或我们的 CheckUpDown 机器人） 和服务器之间 IP 连接（套解字 - socket ）， 和 2 ）通过该套解字收到数据，之间的时间间隔太长， 所以服务器放弃该连接。 套接字连接实际上已失效 - 您的 Web 服务器已就对该特定套接字连接发出 ' 超时 ' 信号。客户端的请求必须及时重复。 HTTP 循环中的
微信支付服务器请求超时,微信支付退款接口请求超时是咋回事？
weixin_42501035的博客
08-09 559
2021-08-09 09:52:28.569 ERROR HttpService: System.Net.WebException: 操作超时在 System.Net.HttpWebRequest.GetRequestStream(TransportContext& context)在 System.Net.HttpWebRequest.GetRequestStream()在 WxPay...
httpwebrequest超时时间timeout设置无效_那些年踩过的MySQL wait_timeout参数的坑
weixin_39710003的博客
11-26 634
MySQL wait_timeout参数修改问题，可能经常会有DBA遇到过，下面就试验一下并看看会有什么现象。wait_timeout分为global级及session级别，如未进行配置，默认值为28800，即8小时。session级（session关键字可省略） global级此处省略对global级 与 session级参数...
http请求超时的时间控制
ly18740207851的博客
04-28 1872
先在application.yml文件中添加：比如自定义60秒，注意驼峰命名变量。不自定义配置的话，yml文件里直接把变量值删掉就可，yml里的变量名不能删。http请求第三方时间过长，时间自定义控制。在代码中使用：我写在业务层，你随意。
模拟请求HttpWebRequest
05-29
模拟请求，基于HttpWebRequest封装好的一个类，自动记下和发送Cookie,你只管调用方法就行了，很实用
HttpWebRequest的常见错误使用TcpClient可避免
10-27
有时使用HttpWebRequest对象会出现错误有三种服务器提交了协议冲突/基础连接已经关闭:连接被意外关闭/无法发送具有此谓词类型的内容正文,感兴趣的朋友可以参考下本
.net core并发请求发送HttpWebRequest的坑解决
10-17
主要给大家介绍了关于.net core并发请求发送HttpWebRequest的坑的相关资料，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面来一起看看吧
Linux操作系统相关习题集
04-25
Linux操作系统相关习题集，包含常用名、Linux系统基础知识等
基于java的-30-「计算机毕业设计」基于net的湖南特产销售网站-源码.zip
04-25
提供的源码资源涵盖了Java应用等多个领域，每个领域都包含了丰富的实例和项目。这些源码都是基于各自平台的最新技术和标准编写，确保了在对应环境下能够无缝运行。同时，源码中配备了详细的注释和文档，帮助用户快速理解代码结构和实现逻辑。 适用人群： 适合毕业设计、课程设计作业。这些源码资源特别适合大学生群体。无论你是计算机相关专业的学生，还是对其他领域编程感兴趣的学生，这些资源都能为你提供宝贵的学习和实践机会。通过学习和运行这些源码，你可以掌握各平台开发的基础知识，提升编程能力和项目实战经验。 使用场景及目标： 在学习阶段，你可以利用这些源码资源进行课程实践、课外项目或毕业设计。通过分析和运行源码，你将深入了解各平台开发的技术细节和最佳实践，逐步培养起自己的项目开发和问题解决能力。此外，在求职或创业过程中，具备跨平台开发能力的大学生将更具竞争力。 其他说明： 为了确保源码资源的可运行性和易用性，特别注意了以下几点：首先，每份源码都提供了详细的运行环境和依赖说明，确保用户能够轻松搭建起开发环境；其次，源码中的注释和文档都非常完善，方便用户快速上手和理解代码；最后，我会定期更新这些源码资源，以适应各平台技术的最新发展和市场需求。 所有源码均经过严格测试，可以直接运行，可以放心下载使用。有任何使用问题欢迎随时与博主沟通，第一时间进行解答！
JVM+Java程序运行过程内存分配图解
04-25
1、JVM 内存分配图解的 Visio 工程图。 2、直接下载使用、可自行调整和修改
IOC智慧运营中心平台整体解决方案qy.pptx
04-25
IOC智慧运营中心平台整体解决方案qy.pptx
node-v12.22.8-x86.msi
最新发布
04-25
Node.js，简称Node，是一个开源且跨平台的JavaScript运行时环境，它允许在浏览器外运行JavaScript代码。Node.js于2009年由Ryan Dahl创立，旨在创建高性能的Web服务器和网络应用程序。它基于Google Chrome的V8 JavaScript引擎，可以在Windows、Linux、Unix、Mac OS X等操作系统上运行。 Node.js的特点之一是事件驱动和非阻塞I/O模型，这使得它非常适合处理大量并发连接，从而在构建实时应用程序如在线游戏、聊天应用以及实时通讯服务时表现卓越。此外，Node.js使用了模块化的架构，通过npm（Node package manager，Node包管理器）,社区成员可以共享和复用代码，极大地促进了Node.js生态系统的发展和扩张。 Node.js不仅用于服务器端开发。随着技术的发展，它也被用于构建工具链、开发桌面应用程序、物联网设备等。Node.js能够处理文件系统、操作数据库、处理网络请求等，因此，开发者可以用JavaScript编写全栈应用程序，这一点大大提高了开发效率和便捷性。 在实践中，许多大型企业和组织已经采用Node.js作为其Web应用程序的开发平台，如Netflix、PayPal和Walmart等。它们利用Node.js提高了应用性能，简化了开发流程，并且能更快地响应市场需求。
httpwebrequest请求正文
06-28
### 回答1： HttpWebRequest是一个.NET Framework中的类，用于向Web服务器发送HTTP请求。请求正文是指在HTTP请求中发送的数据，通常是POST请求中的表单数据或JSON数据等。可以使用HttpWebRequest的GetRequestStream方法获取请求正文流，然后将数据写入流中发送到服务器。在接收服务器响应时，可以使用HttpWebRequest的GetResponse方法获取响应流，然后从流中读取响应正文。 ### 回答2： HttpWebRequest请求是通过发送HTTP协议包的形式与WebServer进行通信，用于向Web服务器发送请求并获取响应。请求正文是HttpWebRequest请求中的一部分，负责传递与请求相关的数据。对于一些Web应用场景，经常需要使用请求正文来进行数据的传输，例如上传文件、提交表单数据等。 请求正文的构造主要有两种方式：表单方式和流方式。表单方式主要用于发送数据量较小的请求，可以直接通过HttpWebRequest的GetRequestStream()方法获取请求流，然后将表单数据转换为字节数组写入请求流中即可。在请求表单中我们经常使用键值对的形式传递数据。 每个请求必须有一个有效的Content-Length头，它指定请求body的字节数(除了multipart/form-data，你也可以这样expression，因为它有multipart的请求边界). 所以在表单中必须要指定Content-Length. 因为Web服务器会根据Content-Length来判断请求是否已经完整接收到，并在已接收到完整请求之后才会开始处理请求，并返回相应的响应数据，否则请求将被认为是不完整的并被拒绝。 流方式则主要用于发送数据量较大的请求，例如文件上传和下载。在流方式的请求中，需要获取HttpWebRequest的GetRequestStream()方法返回的请求流，然后将上传文件的字节流写入请求流中，实际上这个操作也是以字节数组的形式将数据写入请求流中，只不过字节数组的内容从表单数据转换为文件字节流。 总之，请求正文在HttpWebRequest请求中起着至关重要的作用，负责传输数据和携带相关的参数信息，我们在进行HttpWebRequest开发时，可以根据具体的应用场景选择合适的构造方式进行请求数据的传输。同时，我们也需要注意请求的完整性和正确性，保证请求正文中的数据与实际需要传输的数据保持一致。 ### 回答3： HttpWebRequest请求正文是指在发送HTTP请求时，需要发送的数据内容。通常，发送HTTP请求的时候，需要向服务器发送一些数据，比如表单数据、XML数据、JSON数据等等。这些数据需要封装在请求的正文中发送。 在使用HttpWebRequest发送POST请求时，需要将请求的数据存储在请求的正文中。HttpWebRequest提供了多种方法来设置请求的正文，包括设置请求正文的内容类型、设置字符编码、设置数据流等。下面是常用方法的介绍： 1.设置请求正文的内容类型 使用HttpWebRequest的ContentType属性来设置请求正文的内容类型，常见的内容类型包括application/x-www-form-urlencoded、application/json、text/xml等。 2.设置字符编码 发送POST请求时，需要将请求正文的数据编码成字节数组。使用Encoding类来进行字符编码。 3.设置请求正文数据流 使用HttpWebRequest的GetRequestStream方法获取请求正文对应的数据流，通过读写数据流来设置请求正文。 综上所述，请求正文是HTTP请求中必不可少的一部分，HttpWebRequest提供了多种方法来设置请求正文，以满足不同的需求。在使用HttpWebRequest发送HTTP请求时，需要了解如何设置请求正文，以确保请求能够成功发送和处理。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值