- 博客(2)
- 资源 (4)
- 收藏
- 关注
RSS订阅原创 python 爬虫 缓存的应用 反爬机制
首先需要安装requests-cache模块 pip install requests-cache测试模块是否安装成功import requests_cacheversion = requests_cache.__version__print('版本号为：'version)输出结果：版本号为：0.5.2在使用Requests-Cache模块实现请求缓存时，只需要调用install_cache()函数即可，其语法如下：requests_cache.install_cache(cache_na
2020-12-01 09:31:26
423
原创 python 爬虫 检测代理ip是否有效
import requestsimport pandasfrom lxml import etreeip_table=pandas.read_excel('ip.xlsx')ip = ip_table['ip']headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/86.0.4240.198 Safari/53
2020-12-01 09:00:03
564
一个非常实用的初学者python爬虫案例项目
这是我自己在学习python爬虫之后完成的一个项目，其中遇到过问题，但是都是耐心的一个个去解决了，欢迎想学习python爬虫的朋友一起探讨一起进步
2020-11-13
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人