不懂Web基本原理怎么能学好爬虫。（ 二、Web服务器工作原理）（爬虫、反爬虫、服务器、客户端、网络协议 ）

前言

爬虫的主要目的是获取Web网站中的内容。想要爬虫获取数据，就需要了解HTML从文档变成内容丰富的页面所要经历的每个阶段。例如网络请求、资源匹配、数据传输和页面渲染。要想学好爬虫，我们需要先了解web网站的构成和页面渲染过程的相关知识。

---

二、Web服务器工作原理

Web服务器概念较为广泛，我们最常说的Web服务器指的是网站服务器，它是建立在Internet之上并且驻留在某种计算机上的程序。Web服务器可以向Web客户端(如浏览器)提供文档或其他服务，只要是遵循HTTP协议而设计的网络应用程序都可以是Web客户端。

Web服务器和HTTP服务器可以说是同一个东西，当然非得细分的话，HTTP服务器是建立在HTTP协议之上的提供文档浏览的服务器，更多的是提供静态的文件。而Web服务器涵盖了HTTP服务器(这一点可以自行百度百科), Web服务器不仅能够存储信息，还能在用户通过Web浏览器提供的信息的基础上运行脚本和程序。

Web服务器 约等于 HTTP服务器 + 其他服务

目前所熟知的Web服务器有很多，其最主流的是 Apache, Nginx, IIS

各大Web服务器的实现细节都不同，是为了某种情形而设计开发的。但是它们的基础工作原理是相同的，这也是本次基础篇所讲解的内容。

1、Web服务器工作原理图解

首先我们暂时不考虑HTTP协议的各种请求方式，将一次Web服务的工作流程过一遍，我们假设以浏览器作为客户端