python爬虫的urlib知识梳理

1:urlib.request.urlopen 发送请求     get          

                  post

网络超时 timeout=0.1

网络请求   模拟一个浏览器所发送的网络请求

创建request

 request  头信息   ➕host/IP ➕验证 ➕请求方式

cookice    客户返回响应数据所留下来的标记

代理ip     Urlib.request.proxyhander

字典类型

异常处理     code    reason hearders

拆分URL

urlpase

urlsplit

组合url 

urlunpase

urlunsplit

连接url   parse.urljoin

url编码

urlencode

quote

解码unquote

url参数的转化 parse-qs

parse-qsl