- 博客(4)
- 收藏
- 关注
RSS订阅原创 爬取Bilbili小视频
首先打开这个小视频地址，别问为什么，问就是我只找到了这个小视频的接口… 然后点击排行榜，先弹出的新页面按下F12 接下来需要找每个视频的链接了 ###这个很明显，一下就找到了，既然找到了第一， 那么打开那些小三角，自然能找到其他的。 随着页面下拉，注意不断更新的XHR包，会发现next_offset参数以10为单位递增。 那么现在，可以开始写代码了！ import requests impo...
2019-11-14 10:18:49
410
1
原创 触发知乎验证码的破解方案
先上代码 import requests import base64 import tesserocr from PIL import Image import json import random from faker import Faker class Tess(object): def __init__(self): self.fz = Faker('zh.CN...
2019-10-22 21:45:17
1915
原创 抓取所有话题对应的问题
先上代码 import requests import json from faker import Faker from pymongo import MongoClient import re from threading import Thread # 这里是上一篇博客保存的所有的话题 def get_mongo(): con = MongoClient('localhost')...
2019-10-22 21:36:31
249
原创 爬取知乎话题广场
不登录爬取知乎中一个话题的所有问题和所有回答 分享一套不需要登录就可以爬取知乎上的问题以及回答的爬虫方案。 需要的模块 faker 生成虚拟的user-agent requests 请求数据 json 格式化json数据并读取 re 正则表达式提取数据 pip install faker 首先分析网页 进入知乎话题广场，跳过知乎登录页面https://www.zhihu.com/topics...
2019-09-27 13:36:26
2460
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人