- 博客(4)
- 收藏
- 关注
RSS订阅原创 爬取Bilbili小视频
首先打开这个小视频地址，别问为什么，问就是我只找到了这个小视频的接口…然后点击排行榜，先弹出的新页面按下F12接下来需要找每个视频的链接了###这个很明显，一下就找到了，既然找到了第一， 那么打开那些小三角，自然能找到其他的。随着页面下拉，注意不断更新的XHR包，会发现next_offset参数以10为单位递增。那么现在，可以开始写代码了！import requestsimpo...
2019-11-14 10:18:49
232
1
原创 触发知乎验证码的破解方案
先上代码import requestsimport base64import tesserocrfrom PIL import Imageimport jsonimport randomfrom faker import Fakerclass Tess(object): def __init__(self): self.fz = Faker('zh.CN...
2019-10-22 21:45:17
1457
原创 抓取所有话题对应的问题
先上代码import requestsimport jsonfrom faker import Fakerfrom pymongo import MongoClientimport refrom threading import Thread# 这里是上一篇博客保存的所有的话题def get_mongo(): con = MongoClient('localhost')...
2019-10-22 21:36:31
183
原创 爬取知乎话题广场
不登录爬取知乎中一个话题的所有问题和所有回答分享一套不需要登录就可以爬取知乎上的问题以及回答的爬虫方案。需要的模块faker 生成虚拟的user-agentrequests 请求数据json 格式化json数据并读取re 正则表达式提取数据pip install faker首先分析网页进入知乎话题广场，跳过知乎登录页面https://www.zhihu.com/topics...
2019-09-27 13:36:26
1829
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人