微信公众号爬虫

最新推荐文章于 2024-07-01 11:14:51 发布

Heidinbug

最新推荐文章于 2024-07-01 11:14:51 发布

阅读量503

点赞数

分类专栏：爬虫

版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文链接：https://blog.csdn.net/sinat_41264944/article/details/83860462

版权

爬虫专栏收录该内容

2 篇文章 0 订阅

订阅专栏

需要爬取某个公众号的阅读量、评论量和点赞量。不得不说微信的反爬挺让人头疼的。不过细心抓包还是能找到规律的。但是大规模爬公众号我目前还没想出来，仅仅针对某个公众号爬取。

过程中遇到一个问题。我是用python爬取的，用的requests==2.19.5。但是请求的时候老是报错：HTTPSConnectionPool(host=‘mp.weixin.qq.com’, port=443): Max retries exceeded with url：…

一开始我以为是headers或者cookies设置错误，抓了半天包无果。最后偶然发现说这种错误可能是requests库造成的。升级一下requests，果然就好了！

关注

0
点赞
踩
1

收藏

觉得还不错? 一键收藏
0
评论
微信公众号爬虫

需要爬取某个公众号的阅读量、评论量和点赞量。不得不说微信的反爬挺让人头疼的。不过细心抓包还是能找到规律的。但是大规模爬公众号我目前还没想出来，仅仅针对某个公众号爬取。过程中遇到一个问题。我是用python爬取的，用的requests==2.19.5。但是请求的时候老是报错：HTTPSConnectionPool(host=‘mp.weixin.qq.com’, port=443): Max re...
复制链接

扫一扫

专栏目录

博客等级

码龄7年

7
原创

5
点赞

15
收藏

2
粉丝

关注

私信

热门文章

分类专栏

Tips 3篇
日常 1篇
爬虫 2篇
leetcode 2篇
OS
python 1篇

最新评论

python 变量作用域问题（经典坑）
weixin_45421358: 最后一段代码，把x=i放进func():，即可运行 [code=python]flist=[] for i in range(5): def func(x= i): return x flist.append(func) for f in flist: print(f())[/code]
python 变量作用域问题（经典坑）
是皮卡丘嗎: 作者，你好，flist = [lambda :i for i in range(5)] for f in flist(): print(f()) for循环里的flist不需要加（）
python 变量作用域问题（经典坑）
zswzsw123456 回复 r_uoise: 我运行的结果也是4, 顺便请问一下, 为什么for循环到i=4时才会调用func啊
python 变量作用域问题（经典坑）
r_uoise: 你好，看了你的文章，最后一段代码那里似乎不是这样的？运行起来结果不是0，flist列表还是[4,4,4,4,4]。最后一段里面依然是调用func时才运行才有x=i只是x引用外部变量而已，调用i时候i的值依然是4啊。所以我想大概单纯的在函数里面添加x=i并不等价于lambda x=i:i ？
python 变量作用域问题（经典坑）
Heidinbug 回复王海钦: My fault. I have revised: fun() receives no parameters. The trick is that when define func(), set a local argument receiving i in for loop, and make func() return local argument x instead of i (Excuse me for using English becasue I have not installed Chinese in Ubuntu yet)

最新文章

目录

评论

被折叠的条评论为什么被折叠?

到【灌水乐园】发言

查看更多评论

添加红包

成就一亿技术人!

hope_wisdom

发出的红包

实付元

使用余额支付

点击重新获取

扫码支付

钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。