今天看python爬虫的视频,然后按照视频上的内容编写代码,运行时出现了AttributeError: 'NoneType' object has no attribute 'children'错误提示,看了好久代码也没发现错误,百度了网上有个博主发布了一条博客,发现他也是一样的错误,看了他的博客,然后再看我的代码,发现我们都是同一个单词写错了,代码如下:
# 爬取由上海交通大学开发的最好大学网 http://www.zuihaodaxue.cn/
# 中国大学排名网页 http://www.zuihaodaxue.cn/zuihaodaxuepaiming2018.html
import requests
from bs4 import BeautifulSoup
import bs4
def getHTMLText(url):
try:
r = requests.get(url,timeoout=30)
r.raise_for_status()
r.encoding = r.apparent_encoding
return r.text
except:
return ""
def fillUnivList(ulist,html):
soup = BeautifulSoup(html,'html.parser')
for tr in soup.find('tbody').children:
if isinstance(tr,bs4.element.Tag):
tds = tr('td')
ulist.append([tds[0].string,tds[1].string,tds[2].