![](https://img-blog.csdnimg.cn/20201014180756926.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
python
wqztmx4
这个作者很懒,什么都没留下…
展开
-
记录一次爬取知识星球的word文档
加入了知识星球,星主之前发了很多的word文档,如下图一个一个的下载太麻烦,弄个python统一爬下来。F12看下路径和请求头,如下用postman请求下接口,一切正常,能返回所有json信息。下一步是获取下拉到底部后,加载的更多信息。分析下请求,就是加了个end_time的参数,这个参数是当前页最后一篇文章的创建时间。如下图所以,只要拿到当前页的最后一篇文章的创建时间,然后再去请...原创 2020-04-15 09:44:45 · 2370 阅读 · 5 评论 -
python request 报 Connection aborted.', ConnectionResetError(10054, '远程主机强迫关闭了一个现有的连接。
用python 的request模块,爬一个网站,隐私所在,所以把get方法内的地址去掉了,大家理解。因为我的爬虫方法写在一个循环内,执行大约240次后,就报错误:urllib3.exceptions.ProtocolError: ('Connection aborted.', ConnectionResetError(10054, '远程主机强迫关闭了一个现有的连接。', Non...原创 2019-07-10 17:10:15 · 47723 阅读 · 7 评论