【Python爬虫系列】浅尝一下爬虫40例实战教程+源代码【基础+进阶】

前言

哈喽！哈喽！我是栗子同学~

小编从最初的Python入门安装开始到现在更新了90多篇文章啦。

但是新手系列更新完之后——后续的爬虫系列更不动，大家也知道这个机制，很多内容不能发

滴！很多小伙伴儿想学习爬虫的，这次先浅浅的给大家安排一些之前小编浅尝的小项目。

爬虫系列——准备安排一波哈👇之后能过的话再慢慢给大家一个内容一个内容的更新！

（爬虫系列文章已经开始再微信公众号开始写啦 喜欢的文末可以关注下哦！）

正文

一、爬虫的基本原理 

所谓爬虫就是一个自动化数据采集工具，你只要告诉它要采集哪些数据，丢给它一个 URL，就

能自动地抓取数据了其背后的基本原理就是爬虫程序向目标服务器发起 HTTP 请求，然后目标

服务器返回响应结果，爬虫客户端收到响应并从中提取数据，再进行数据清洗、数据存储作。 

 二、爬虫的基本流程 

爬虫的基本流程其实就是一个 HTTP 请求的过程，以浏览器访问一个网址为例，从用户输入 

URL 开始，客户端通过 DNS 解析查询到目标服务器的 IP 地址，然后与之建立 TCP 连接，连

接成功后，浏览器构造一个 HTTP 请求发送给