爬虫
分享python爬虫实战案例
Ronnyz
这个作者很懒,什么都没留下…
展开
-
爬虫(四)下载视频
1.相关网址和库参考文章:视频下载,那些事儿!网址http://www.jisudhw.com/需要用到的库requests、beautifulsoup、ffmpy32.代码实现import osimport requestsimport ffmpy3from bs4 import BeautifulSoupfrom multiprocessing.dummy import Pool as ThreadPoolclass VideoSpider(object): de原创 2020-07-03 00:00:20 · 1176 阅读 · 0 评论 -
爬虫(三)下载漫画
1.相关网址和库参考文章:漫画下载,动态加载、反爬虫这都不叫事!网址https://www.dmzj.com/需要用到的库requests、beautifulsoup、tqdm2.代码实现import requestsimport refrom bs4 import BeautifulSoupfrom contextlib import closingfrom tqdm import tqdmimport osimport timeclass MangaSpider(ob原创 2020-06-29 22:17:11 · 4114 阅读 · 1 评论 -
爬虫(二) 下载小说
1. 相关网址和库参考文章:Python3 网络爬虫(二):下载小说的正确姿势网址https://www.xsbiquge.com需要用到的库request、beautifulsoup4、tqdm2.代码实现import requestsfrom bs4 import BeautifulSoupfrom tqdm import tqdmclass NovelSpider(object): def __init__(self): self.server =原创 2020-06-24 21:48:17 · 359 阅读 · 1 评论 -
爬虫(一) 获取免费电子书信息
1. 相关网址和库网址http://www.allitebooks.org/需要用到的库requests、beautifulsoup42. 代码实现import requestsfrom lxml import etreefrom bs4 import BeautifulSoupimport jsonimport csvclass BookSpider(object): def __init__(self): self.base_url = 'http:原创 2020-06-24 21:29:40 · 770 阅读 · 0 评论