python爬虫xpath匹配出现错误IndexError: list index out of range

错误现场


python在写爬虫的时候,出现如下错误:

IndexError: list index out of range

原因:爬虫在做xpath时候匹配到空值如图:


导致爬去数据的时候出错如下图:

解决办法:

采用python三目运算过滤空值情况,三目运算规则:

 为真时的结果 if 判断条件 else 为假时的结果(注意,没有冒号)

 例如:

x = x+1 if x%2==1 else x    #当x为奇数的时候x就加一,否则 就x
接下来

解决上述爬虫问题:

报错位置

item['positionType'] = r[0]

修改为

r = each.xpath('./td[2]/text()').extract()
item['positionType'] = r[0] if r else None
至此问题解决!


评论 3
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值