![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
python
轻风远扬
这个作者很懒,什么都没留下…
展开
-
爬取Bilbili小视频
首先打开这个小视频地址,别问为什么,问就是我只找到了这个小视频的接口… 然后点击排行榜,先弹出的新页面按下F12 接下来需要找每个视频的链接了 ###这个很明显,一下就找到了,既然找到了第一, 那么打开那些小三角,自然能找到其他的。 随着页面下拉,注意不断更新的XHR包,会发现next_offset参数以10为单位递增。 那么现在,可以开始写代码了! import requests impo...原创 2019-11-14 10:18:49 · 235 阅读 · 1 评论 -
触发知乎验证码的破解方案
先上代码 import requests import base64 import tesserocr from PIL import Image import json import random from faker import Faker class Tess(object): def __init__(self): self.fz = Faker('zh.CN...原创 2019-10-22 21:45:17 · 1472 阅读 · 0 评论 -
抓取所有话题对应的问题
先上代码 import requests import json from faker import Faker from pymongo import MongoClient import re from threading import Thread # 这里是上一篇博客保存的所有的话题 def get_mongo(): con = MongoClient('localhost')...原创 2019-10-22 21:36:31 · 183 阅读 · 0 评论 -
爬取知乎话题广场
不登录爬取知乎中一个话题的所有问题和所有回答 分享一套不需要登录就可以爬取知乎上的问题以及回答的爬虫方案。 需要的模块 faker 生成虚拟的user-agent requests 请求数据 json 格式化json数据并读取 re 正则表达式提取数据 pip install faker 首先分析网页 进入知乎话题广场,跳过知乎登录页面https://www.zhihu.com/topics...原创 2019-09-27 13:36:26 · 1835 阅读 · 0 评论