Scrapy.http.Request 与 requests.request 区别

Scrapy.http.Request 是处于 Scrapy 框架内的一个类对象,需要在 Scrapy 框架内使用。

requests.request 是独立的 requests 库的 api。

如果想要下载一个链接,获得 html 内容,用 requests.request 方法比较方便,返回一个 requests.models.Response 对象,html 内容在 response.text 中. 

例子:

from requests import request
import json

header = {
    "USER_AGENT": "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/77.0.3865.90 Safari/537.36",}

response = request(url="https://c0.3.cn/stock?skuId=46551113620&area=19_1601_3634_0&cat=9987,653,655",
                       headers=header, method="GET")
print(type(response))    # <class 'requests.models.Response'>
text = json.loads(response.text)
print(response.text)

response.text 是 Json 格式,所以要用 json.loads(),才能把 json 格式转为 python 识别的格式。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值