爬虫的Request库的安装和使用

本文介绍了requests库的安装、导入及基本使用,包括get和post请求方式,响应内容的处理,如二进制和JSON格式,以及如何设置请求头、使用Session和Cookie。还涉及超时设置、错误处理和代理配置,是爬虫开发的重要参考资料。
摘要由CSDN通过智能技术生成

requests库

安装
pip install requests 
导入模块
 import requests

get请求方式

>>> r=requests.get('http://httpbin.org/post')
>>> print(r)
<Response [200]>

返回状态码为200,则请求正常。
如果想要看响应的内容,那么

>>> print(r.text)

post请求方式

我们一般向浏览器传递表单的时候采用的就是post请求。

>>> payload = {
   'key1': 'value1', 'key2': 'value2'}
>>> r = requests.post("http://httpbin.org/post", data=payload)
>>> print(r.text)
{
   
  "args": {
   }, 
  "data": "", 
  "files": {
   }, 
  "form": {
   
    "key1":
  • 1
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值