Python爬虫代码基本框架

Python爬虫代码基本框架

框架如下：

def getHTMLtext(url):
    try:
        r = requests.get(url, timeout=30)
        r.raise_for_status() #如果状态不是200，引发HTTPError异常
        r.encoding = r.apparent_encoding
        return r.text
    except:
        return "产生异常"