requests库（1）

#requests的相关入门
import requests
r=requests.get("http://www.baidu.com")#抓取网络主页，r是返回的对象response
r.status_code#状态码，如果是200抓取成功，是http返回的状态，404表示失败
r.encoding='utf-8'
#转化为utf-8，是从http header 中猜测的响应内容编码方式
r.text #就可以抓取到所有的网页文本，是字符串形式的网页内容
r.apparent_encoding#内容中分析出来的响应内容编码方式
r.content#响应内容二进制形式


#关于requests库的异常
requests.connectionError#网络连接错误，如DNS查询失败拒绝连接
requests.HTTPError#http错误异常
requests.URLRequired #url缺失异常

#判断是否存在异常的方法
r.raise_for_status()
#判断response是否是200，否则返回的是httperror



#重点判断网页是否爬取成功的通用代码框架
import requests
def getHTMLTText(ur1):
	try:
		r=requests.get(ur1,timeout=30)
		r.raise_for_status()
		r.encoding=r.apparent_encoding
		return r.text
	excepy:
		return "产生异常"
if_name_=="_main_"
	ur1="http://www.baidu.com"
	print(getHTMLTText(ur1))




#http协议(超文本传输协议)请求与相应的无状态模式，第一层请求与第二次请求无关联，应用层协议，一般运用url作为网络资源标识，是通过http协议存取资源的Internet路径，一个URL对应一个数据资源
'''
url格式http：//host[:port][path]
host是合格的Internet主机域名或ip
port端口号
path资源路径'''

		

r=requests.head('http://httpbin.org/get')
r.headers#这样就得到了头部信息header，或者称之为概要信息

payload={'key1':'value1','key2':'value2'}
r=requests.post('http://httpbin.org/post',data=payload)
#这样就加了一个新的数据在url中

r=requests.request('GET',url,**kwargs)#请求功能，支持一个基础请求
#例子1字典或者字节序列作为参数增加到url中params
kv={'key1':'value1','key2':'value2'}
r=requests.request('GET','http://python123.io/ws',params=kv)
print(r.ul1)

r=requests.request(method,url,**kwargs)
body='主体内容'
r=requests.request('POST','http://python123.io/ws',data=body)
#储存到url的对应位置内存作为数据来存储

kv={'key1':'value1'}
r=requests.request('POST','http://python123.io/ws',json=kv)
#json格式的数据，将键值对赋值到服务器jason上

#headers字段，http的头字段
hd={'user-agent':'chrome/10'}
r=requests.request{'POST','http://python123.io/ws',headers=hd}