requests模块-response.text和response.content的区别

以请求百度为例,看看response.text和response.content有哪些不同:


  • response.content

import requests
response = requests.get("http://www.baidu.com")
response.content

>>>

可以看出输出的字符串类型为bytes。为了获取正确的字符串需要对response进行解码。

         

这样就正常了,这里不添加参数时默认使用的是“utf-8"的编码方式。当然也可以指定参数,response.content.decode("gbk")

  • response.text

可以看出text输出下有些问题:乱码。这是因为response.text在解码时会根据HTTP头部对响应的编码做出推测,推测文本的编码。通过response.encoding属性查看它推测出的编码类型。

      

推测成了”ISO-8859-1“,显然是推测错了。所以我们试试utf-8类型的编码:

这样就没有什么问题了。


总结:

这三种解码的方法应该能解决遇到的所有情况了

1、response.text和response.content的区别

  • response.text

          类型:str

          编码类型:根据HTTP头部对响应的编码做出推测,推测文本的编码

           修改编码方式:response.encoding="gbk"

  • response.content

           类型:bytes

           解码类型:没有指定

           修改编码方式:response.content.decode("utf-8")

2、requests中解决编解码的方法

  • response.content.decode()
  • response.content.decode("gbk")
  • response.text
  • 0
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
当然,我会为你解释每行代码的作用和功能: ```python # 导入需要的模块 import requests from bs4 import BeautifulSoup # 设置登录和获取数据的URL login_url = 'https://login.taobao.com/member/login.jhtml' qian_niu_url = 'https://qianliexian.taobao.com/?spm=a1z10.1-c-s.w5002-21491447486.2.5d6d4c5fKj9i5b' # 创建一个session session = requests.Session() # 发送get请求到登录页面,获取cookie和其他必要信息 session.get(login_url) # 设置登录需要的参数 username = 'your_username' password = 'your_password' login_data = { 'loginId': username, 'password2': password, 'appName': 'cnalichn', 'appEntrance': 'default', 'bizParams': '', 'styleType': 'auto', 'notLoadSsoView': 'false', 'notKeepLogin': 'true', 'isMobile': 'false', 'cssLink': 'https://g.alicdn.com/aliww/h5.openim.kit/1.0.28/css/kit.css,https://g.alicdn.com/aliww/h5.openim.kit/1.0.28/css/kit-theme.css,https://g.alicdn.com/aliww/h5.openim.kit/1.0.28/css/kit-login.css', 'notKeepUsername': 'true' } # 发送post请求进行登录 session.post(login_url, data=login_data) # 发送get请求到目标页面,获取数据 response = session.get(qian_niu_url) # 使用BeautifulSoup解析页面内容 soup = BeautifulSoup(response.content, 'html.parser') # 获取需要的数据 data = soup.find_all('div', class_='item-info') for item in data: title = item.find('a', class_='item-title').text.strip() price = item.find('span', class_='item-price').text.strip() # 打印数据 print(title, price) ``` 希望这些注释能够帮助你更好地理解这段代码。如果你还有任何疑问,请随时问我。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值