网络协议
文章平均质量分 93
江湖一码农
这个作者很懒,什么都没留下…
展开
-
[纸上谈兵]Web服务器机制
目录通信协议Http协议HTTPS协议套接字协议服务器模型本文从通信协议、套接字通信(Socket)、Web服务模型三个方面了解Web服务器机制web服务器就是指类tomcat服务器通信协议Http协议http是请求/响应模型, 一个浏览器的http请求/响应的流程大概可以用以下4步表示1、客户端浏览器先与服务端通过三次握手建立连接2、连接建立后,客户端浏览器组装请求报文,发送一个请求到服务器3、服务端接收到请求后,进行处理,将响应结果发送给客户端浏览器4、客原创 2020-08-09 19:02:48 · 315 阅读 · 0 评论 -
[纸上谈兵] http头部字段Transfer-Encoding
一个月没写,自己定的目标没有实现,不想写太水的内容。但这一篇可能又是水我在排查httpclient问题时,发现了这个请求头,但不知道是做什么用的,于是百度一下一、Transfer-Encoding: chunkedTransfer-Encoding头字段可以用在请求头或响应头中。该头字段有两个值chunked和identity作用:Transfer-Encoding值为chunked时,代表要把请...原创 2018-06-27 14:16:54 · 6368 阅读 · 0 评论 -
[实战]http client 无限等待返回结果
一、业务问题公司内部有一个爬虫系统,定时抓取部分网站数据存入我们数据库,进行后续约业务逻辑处理。业务反馈有时有些网址的数据没有抓取.二、相关背景软件系统: 采用httpclient 4.5.3 + webmagic实现,定时作务触发后,从数据库分页取出需要处理的数据,新建一个线程,通过httpclient获取数据进行后续处理。爬虫在访问目标网站时,使用了免费代理,代理稳定型较差...原创 2018-05-23 23:35:21 · 6717 阅读 · 2 评论