爬取淘宝评论时出现list index out of range问题

最新推荐文章于 2024-07-17 21:10:04 发布
最新推荐文章于 2024-07-17 21:10:04 发布
阅读量2.7k 收藏 1
点赞数
分类专栏： Python 文章标签： python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/virusll/article/details/80011530
版权
在使用Python爬取淘宝商品评论时遇到`list index out of range`错误，原因是当某页评论少于20条时，仍按20条遍历导致。解决方案是在遍历到最后一条评论时使用`break`跳出循环，避免列表越界。
摘要由CSDN通过智能技术生成

list index out of range  列表越界

Traceback (most recent call last):
  File "G:/workSpace/Python/TB_Crawler/Crawler_train.py", line 71, in <module>
    print(getCommentsList(ItemURL2))
  File "G:/workSpace/Python/TB_Crawler/Crawler_train.py", line 46, in getCommentsList
    comment = getComment(newURL, i)['content']
  File "G:/workSpace/Python/TB_Crawler/Crawler_train.py", line 27, in getComment
    comment = jd['comments'][num]

IndexError: list index out of range


提示错误在getComment方法的comment = jd['comments'][num]中

因为淘宝评论每一页最多20条评论，所以爬取评论时对每页的20条评论进行遍历。当某页评论小于20条时，num仍然是从0到20遍历，所以就会出现列表越界的问题。

解决办法：当遍历到最后一条评论时break，跳出循环。

# 获取商品id
def
最低0.47元/天 解锁文章
半壁灯
关注
专栏目录
Python出现 IndexError: list index out of range
qwezk0307的博客
08-30 1568
此时会报错，可以看出并没法进入到print(“hello world!”)没有打印出hello world!#Python出现 IndexError: list index out of range。但是还会继续执行剩下的次数，如果不想执行就在出错后加个break跳出循环。发现结果可以继续跑了，打印了hello world!##出错代码例子运行结果。现在我们在代码上加上。##break添加后。...
list index out of range
qq_44801344的博客
08-14 5914
报错：list index out of range
【Python 已解决】列表索引超出范围–Python 中的IndexError: list index out of range 错误
最新发布
qq_34419312的博客
07-17 4591
【Python 已解决】列表索引超出范围–Python 中的IndexError: list index out of range 错误
list index out of range
u010565244的专栏
02-15 1828
题目是： Two words are a “reverse pair” if each is the reverse of the other. Write a program that finds all the reverse pairs in the word list.  代码： #!/usr/bin/python #encoding=utf-8 import datetime
List index out of range
w_python的博客
11-08 384
@[TOC](List index out of range ) 运行代码后，为什么会这样呢？ 欢迎使用Markdown编辑器 你好！ 这是你第一次使用 Markdown编辑器 所展示的欢迎页。如果你想学习如何使用Markdown编辑器, 可以仔细阅读这篇文章，了解一下Markdown的基本语法知识。 新的改变 我们对Markdown编辑器进行了一些功能拓展与语法支持，除了标准的Markdown编...
python爬虫优化以及过程中的IndexError: list index out of range处理方法
qsmy520的博客
03-31 4039
最近在优化爬虫过程中的出现了IndexError: list index out of range。 看图，这是什么原因呢？ 先print下you数组的长度。 结果不出所料，当传入数组为空或者超出时就会出现这种问题。我这里给了两种解决方案，第一种直接将有空白的地方删除。 接下来就要用到比bs4更方便的pyquery,这是一个类似于jquery库的python库。 from pyquery im...
批量爬取报错list index out of range发现根本原因不是正则语法错误，而是同一个网页可能存在多套css样式，每次请求得到的response是随机一套，这才导致正则语法匹配不上
m0_65865781的博客
05-26 1203
批量爬取报错list index out of range发现根本原因不是正则语法错误。一个网页可能有好几套css，每次通过requests请求得到的都是其中随机的一套，所以只用一套正则有时就会取不到数据，从而产生空列表，进而报错list index out of range
scrapy爬虫提示 list index out of range
weixin_45233045的博客
09-19 372
#导入模块 from bs4 import BeautifulSoup#数据获取网页解析 import re #正则表达式文字匹配 import urllib.request,urllib.error#制定url获取指定数据 import xlwt#进行excel操作 import sqlite3#数据库包 def main(): baseurl = "https://movie.douban.com/top250?start=0" datalist = getData(baseurl).
爬取网页信息IndexError: list index out of range
09-23
当爬取网页信息时，如果出现"IndexError: list index out of range"错误，可能是由于没有找到对应的标签或者选择的元素超出了列表的范围所致。解决这个问题的方法是使用try-except语句来捕获异常，并在出错时添加...
scrapy运行问题：IndexError: list index out of range
热门推荐
System.out.println(“菜鸟的升级之路”）
03-30 11万+
正文： 错误类型分析： IndexError: list index out of range 情况一： list[index]中的index下标超出范围了，所以出现了访问越界； 情况二： list本身就是一个空的，没有一个元素，所以当访问到list[0]的时候，就会出现该错误。 错误实例分析： 错误语句： Item['job_maxpayment'] =...
Python每日一记52>>>IndexError: list index out of range
教练我想学编程
05-14 1338
不知道大家是否遇到了上面的问题，即IndexError: list index out of range 我在循环读取一个工作簿的工作表的时候就出现了这个问题 如下: 有8个sheet,，循环数字是1–8，每次读取最后一个的时候就报错了，这是什么原因呢 我们需要理解sheet_name参数，这个参数原则上如果传入的是数字，就是代表的工作表的位置（从0开始），因为我工作表的明明是数字，本以为能用...
使用pcb-tools解码Gerber文件报错IndexError: list index out of range
Kyrotex的博客
07-14 631
问题描述： 基于Github提供的示例代码编写： import gerber from gerber.render.cairo_backend import GerberCairoContext # Read gerber and Excellon files top_copper = gerber.read('Gerber.GBX') # nc_drill = gerber.read('example.txt') # Rendering context ctx = GerberCairoConte
python提示list index out of range_在python脚本上获取“IndexError:list index out-of-range”
weixin_39770165的博客
12-03 250
我有下面的程序，我发现，并试图编辑，使其工作。我在python2.7中使用Kbuntu。运行脚本时出现以下错误：rm: cannot remove ‘Devices_Config_Pull.xls’: No such file or directoryrm: cannot remove ‘Devices_Config_Pull.zip’: No such file or directoryTrac...
报list index out of range
不是老哥的博客
03-11 212
## 报list index out of range 今天写读一个文本文档，存储时报了无数个list index of range 解决方法 在报错的部分，加 try except try: sp = line.strip().split(':') attributes[sp[1]] = sp[0] except: continue ...
Python常见错误：IndexError: list index out of range
weixin_30735391的博客
10-27 852
用python写脚本查询字典时，在遍历字典时循环到某一项时老是报错 出现这种错误有两种情况： 第1种可能情况 list[index]index超出范围 第2种可能情况 list是空值就会出现 IndexError: list index out of range 第二种情况尤为难以排除错误 转载于:https://www.cnblogs.com/lieweidu/p/985938...
IndexError: list index out of range，错误原因及解决方法（QT、C++）
lj19990824的博客
03-02 1万+
原因：出现这种情况无外乎以下两方面： 1，下标超出范围， 2，list是空的，没有一个元素 第一种情况： 建议将list容器打印一下，把下标、数据、个数都打印出来，看看是不是你用错下标了，出现访问越界的情况。 第二种情况 看一下你在将数据保存到list的时候，是不是一个空的数据，看一下你的源文件（比如txt，xml，cfg，dat…) ...
【错误list index out of range】
weixin_43528746的博客
01-15 246
错误
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值