python爬虫(beginning)之requests&异常 1

在最开始——一个通用requests的框架

import requests

def getHtmlText(url):
    try:
        r = requests.get(url,timeout = 30)
        
        #如果状态不是200，引发HTTPError异常
        r.raise_for_status() 
        r.encoding = r.apparent_encoding
        return r.text
    except:
        return "产生异常"
if __name__ == "__main__":
    url = "http://ww.baidu.com"
    print(getHtmlText(url))

begin -install resests

$ pip install resuests

import requests

在这里插入图片描述

response对象中常见属性

![在这里插入图片描述](https://img-blog.csdnimg.cn/2020021619453

请求的基本流程

理解 response编码 方式

import requests
r = requests.get("http://www.baidu.com")
r.status_code
print(r.text)
print(r.encoding)
print(r.apparent_encoding)
r.encoding = r.apparent_encoding
print(r.text)

#理解requests 异常

一个包含通用代码框架的异常

import requests

def getHtmlText(url):
    try:
        r = requests.get(url,timeout = 30)
        
        #如果状态不是200，引发HTTPError异常
        r.raise_for_status() 
        r.encoding = r.apparent_encoding
        return r.text
    except:
        return "产生异常"
if __name__ == "__main__":
    url = "http://ww.baidu.com"
    print(getHtmlText(url))