qq_38831367的博客

当你觉得爬虫很难的时候，可能确实是你想多了，零基础只需五行代码即可编写一个爬虫程序！ 写爬虫时基本是接下来的几大步骤：1、发送请求request到服务器，服务器响应response浏览器2、python3中requests(处理请求)，导包：import requests（用pip install requests直接安装）3、requests.get(url,headers)自定...

当你看了上一节中只能爬取一章的小说，而且还有许多不需要的字符时，是不是很不过瘾呢！这一节将一步一步分析，如何用30行不到的代码将小说章节全部爬下来，并且分章节保存进txt文件。 分析网址http://www.biqugew.com/book/9/4446.html这是小说第一章的网址，你可能发现不了什么特别的，http://www.biqugew.com/book/9/44...

图片和文字其实只有几个小地方是不同的，浏览器上每张图片都是通过一个url定位到的，且它是二进制文件。所以爬取过程和文字有一点点不同，，也就一点点。 这次爬取的网址是http://www.xiaohuar.com/2014.html。打开是不是发现里面有许多校花图片呢，没错，这次就是从爬取这些校花的图片并保存到自己磁盘中。 一、找规律首先，你需要找到一张图片的url，怎么找呢？打...