python爬虫成功案例
爬虫爬取成功的案例
清风未明月
这个作者很懒,什么都没留下…
展开
-
python3 爬取图片并分页保存在文件夹中
目标 https://www.veer.com/search-image/fengjing/中的图片 过程分析 网页分析 这次爬取的比较简单,要爬取的内容很容易就找到了。 换页 点击下一页,看到网址变成https://www.veer.com/search-image/fengjing/?page=2了;很明显,page变了,换页利用这一点就可以实现。 图片内容 爬取图片链接读取内容: picture_content = requests.get(i).content..原创 2020-11-24 09:07:38 · 776 阅读 · 0 评论 -
python3 小说爬取案例
目标 爬取网站: https://m.xxqb5200.com 具体书籍: /book_42837/15882282.html 要点分析 页面分析 正文匹配片段 爬取网页 res = requests.get(url, headers=header) # 爬取网页 web = res.text # 获得网页文本格式 找到标题、正文和下一页链接对应的代码片段进行匹配即可。 正则匹配方法 (.*?) 匹配除了空格和换行之外的字符 ([\s\S]*?)原创 2020-11-24 08:15:14 · 338 阅读 · 0 评论