今天看python爬虫的视频,然后按照视频上的内容编写代码,运行时出现了
运行程序后的错误提示:
for tr in soup.find('tbody').children:
AttributeError: 'NoneType' object has no attribute 'children'
感谢博主:爱搬砖的小迷糊,的分享,让我很快找出了错误。
属性错误:‘NoneType’ 对象没有属性 ‘children’ ,这个错误提示告诉我们 ‘children’ 属性的对象 soup 是一个空类型,那就意味着soup = BeautifulSoup(html,‘html.parser’)中soup并没有得到解析出来的html页面,那就是说在调用getHTMLText(url)函数时这个函数并没有得到url链接对应的网页信息。所以错误可能出现在getHTMLText(url)函数中,然后仔细审查getHTMLText(url)函数中代码发现单词打错。
总之:这四个函数之间各有分工,但是又紧密相连,任何一个出现问题都可能导致其它函数报错,所以我们找错时不能只局限于报错的那一行代码
注意:找错时一定要用区域注释的方法来调试,找起来效率高很多。
调试过后能正确运行的代码:
import requests
import bs4
from bs4 import BeautifulSoup
def getHTMLText(url):
try:
r=requests.get(url,timeout=30)
r.raise_for_status()
r.encoding=r.apparent_enc