weixin_43163542的博客

原创 一个初学者的爬虫总结

1. 爬虫流程？ 准备url列表 发起请求、获得响应 提取数据，提取url放入url列表 保存数据 聚焦爬虫的流程 注意：提取的数据以url对应的响应为准，浏览器element只能作为参考 2. requests的使用 pip install requests 2.1 基本使用 resp = request.get(url,headers,params) resp = request.p...