xpath 爬虫错误求指教

最新推荐文章于 2024-04-09 19:36:54 发布

孙可宁

最新推荐文章于 2024-04-09 19:36:54 发布

阅读量414

点赞数

分类专栏： xpath 文章标签： python http

本文链接：https://blog.csdn.net/weixin_46613397/article/details/106962841

版权

博主在进行XPath爬虫时遇到错误，报错显示无法找到第二段URL。已附带报错截图。尽管在网上搜索无果，现求助社区寻求解决方案。

摘要由CSDN通过智能技术生成

标题 xpath 爬虫错误求指教

import parsel
#1、获取数据源，headers参数
base_url = "https://www.umei.cc/gaoxiaotupian/"
headers = {
   'user-agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/83.0.4103.106 Safari/537.36 Edg/83.0.478.54'}
#2、发送请求--requests 模拟浏览器发送请求，获取响应数据
response = requests.get(base_url,</