![](https://img-blog.csdnimg.cn/a1b86066869a4a6eb960efc1396cbd3d.jpeg?x-oss-process=image/resize,m_fixed,h_224,w_224)
爬虫那些事
文章平均质量分 63
这是我写爬虫过程中总结很多的项目和技巧
小梁说代码
北京大学博士在读 | 阿里云专家博主 | 爬虫领域分享 | 保研分享 | 用最优质的内容带来最舒适的阅读体验。欢迎一起交流!(线上线下均可)
展开
-
b站如何一次性把up主全部取消关注,让自己去学习
刚打开b站准备学习,看到了动态上面一个小红点。忍不住点开进去,然后说 “看完这个就学习”。最后花了几个小时才停下来。于是痛定思痛,取消所有up主的关注,这样就不会推送消息了。但是一个个点击取消关注太慢了,还要进up主页,点取消关注,再点关注才行。老子要一次性全部取消。1.首先要进入动态,获取所有关注up主的uid。找到了请求接口然后写出get请求即可。(先不考虑cookies,之后会提到)headers = { 'authority': 'api.vc.bilibili.com',原创 2021-12-06 21:25:46 · 7304 阅读 · 0 评论 -
爬虫利用多线程快速爬取数据
爬虫利用多线程来爬取数据原创 2023-01-14 15:18:44 · 1059 阅读 · 0 评论 -
Python爬虫系列,项目经验,常用技巧总结
这是我在写爬虫的过程中,持续总结的项目以及技巧原创 2023-01-07 20:40:05 · 288 阅读 · 0 评论 -
爬取微信公众号发布的所有文章(包括阅读数,在看数,点赞数)
这次写爬虫。我爬取了某个微信公众号的全部文章的文章链接 url文章标题 title发布时间 update_time封面链接 cover阅读数 read_num在看数 like_num若想直接拿代码来用,可以直接跳到最后。首先要找到所有文章链接地址一般来说,网上是搜不到某个公众号的全部文章的。但是我们利用 微信公众号平台 就能够一次性找到。要用到它,肯定需要先注册登录一个微信公众号。当我们来到后台界面。1,首先进入图文素材2,创建新的图文...原创 2021-09-09 19:50:52 · 20832 阅读 · 39 评论 -
selenium利用cookies实现自动登录
最近在学习写python的自动化脚本,但是发现测试工具打开之后的网页是没有用户自己打开浏览器时记录的cookie,简单来说也就是打开的网站不会自己登录,所以想要简单的实现下如何用cookie来登录总的来说分两步。原创 2023-01-01 17:01:15 · 3170 阅读 · 1 评论 -
PyInstall的安装,使用,以及最后打包成一个exe文件
PyInstall的安装,使用,以及最后打包成一个exe文件原创 2022-02-19 19:14:21 · 2648 阅读 · 0 评论 -
Python操作excel写入读取数据,简单实用
往往写爬虫的时候,有些需求是需要直接将数据存入excel文档,获取读取出来并处理的,所以如何用python操作excel将会非常方便我们将数据可视化。原创 2023-01-04 20:50:11 · 2842 阅读 · 0 评论