requests库学习总结

Response对象中的五个属性:

  r.status_code------------------HTTP请求的返回状态,200表示连接成功
  r.text---------------------------url对应的页面内容
  r.apparent_encoding----------从内容中分析出响应内容的编码方式
  r.encoding--------------------从header中猜测响应的内容编码方式
  r.content----------------------响应内容的二进制形式

网络爬取通用框架:

  def GetHTML(url):
       try:
              r=requests.get(url,timeout=30)
              r.raise_for_status()
              r.encoding=r.apparent_encoding
              return r.text
      except:
              return "异常"
  if __name__=="__main__":
      url=""
      print(GetHTML(url))

在这里插入图片描述

get(url, **kwargs(可略))方法举例:

import requests
r =requests.get(url) #抓取网页,创建requests对象
print(r.status_code) #检查状态码(200)

**kwargs部分常用参数介绍:

  1. .params:值为字典或字节序列,作为参数增加到url中
  2. data:值为字典、字节序列或文件对象,作为request的内容
  3. json:值为JSON格式的数据,作为Requests的内容
  4. headers:值为字典,HTTP定制头
    -------------前四个为基础--------------------------------
  5. files:值为字典类型,传输文件
  6. timeout:设定超时时间,秒为单位
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值