2016年08月_chenchenlin0811

12月 08月 07月 06月 05月 04月 03月

转载 HTTP协议详解

一、概念协议是指计算机通信网络中两台计算机之间进行通信所必须共同遵守的规定或规则，超文本传输协议(HTTP)是一种通信协议，它允许将超文本标记语言(HTML)文档从Web服务器传送到客户端的浏览器。 HTTP协议，即超文本传输协议(Hypertext transfer protocol)。是一种详细规定了浏览器和万维网(WWW = World Wide Web)服务器之间互相通信的规则，通过

2016-08-31 19:56:47 571

转载 wireshark抓包图解 TCP三次握手/四次挥手详解

一. TCP/IP协议族 TCP/IP是一个协议族，通常分不同层次进行开发，每个层次负责不同的通信功能。包含以下四个层次： 1. 链路层，也称作数据链路层或者网络接口层，通常包括操作系统中的设备驱动程序和计算机中对应的网络接口卡。它们一起处理与电缆（或其他任何传输媒介）的物理接口细节。 2. 网络层，也称作互联网层，处理分组在网络中的活动，例如分组

2016-08-30 17:48:10 546

转载 Wireshark理解TCP乱序重组和HTTP解析渲染

TCP数据传输过程 TCP乱序重组原理 HTTP解析渲染 TCP乱序重组 TCP具有乱序重组的功能。（1）TCP具有缓冲区（2）TCP报文具有序列号所以，对于你说的问题，一种常见的处理方式是：TCP会先将报文段3缓存下来，当报文段2到达时，再根据序列号进行拼接。 2 当然缓冲区也有满的时候，这时接收端会直接丢弃报文，不做任何其他处理；发送方的定时器发现迟迟收不到接

2016-08-30 10:35:46 5411

转载 Heritrix配置

Heritrix功能概要 Heritrix做为一个爬虫框架，它抽像并实现了一组爬虫的基础组件，不同类型的使用者可以替换不同的组件来实现期望的功能，如最大利用带去镜像站点、集中搜索特定主题、对已爬过的网页持续更新等，甚至可以加入不同的协议。 1．Heritrix的主要组件概括的说，herittrix有三大组件： 范围组件（Scope）：范围组件是一组DecideRule对

2016-08-18 16:25:16 371

转载 Heritrix配置及扩展

Heritrix功能概要 Heritrix做为一个爬虫框架，它抽像并实现了一组爬虫的基础组件，不同类型的使用者可以替换不同的组件来实现期望的功能，如最大利用带去镜像站点、集中搜索特定主题、对已爬过的网页持续更新等，甚至可以加入不同的协议。 1．Heritrix的主要组件概括的说，herittrix有三大组件： 范围组件（Scope）：范围组件是一组DecideRule对

2016-08-18 16:23:53 668