include的博客

原创 Python写爬虫只需三步

文章目录一：爬虫基本原理 一：爬虫基本原理 爬虫就是获取网页并提取和保存信息的自动化程序 如果把互联网比喻为一张大网，那么每个网页就是这张大网的一个节点，网页与网页之间的链接就相当于节点之间的连线，爬虫每到一个节点就获取他的信息，然后通过连线爬到另一个节点，这样整个网的所有节点的数据就都可以被爬取下来了。 爬虫的自动化的操作流程： 发送HTTP请求获取网页源码 从返回的网页的源码种提取信息 把提...