Python爬虫——scrapy_post请求

最新推荐文章于 2024-04-26 01:45:18 发布

错过人间飞鸿

最新推荐文章于 2024-04-26 01:45:18 发布

阅读量372

点赞数

分类专栏： Python爬虫文章标签： python 爬虫 scrapy

本文链接：https://blog.csdn.net/m0_63757342/article/details/132395238

版权

Python爬虫专栏收录该内容

35 篇文章 1 订阅

订阅专栏

import scrapy
import json


class TestpostSpider(scrapy.Spider):
    name = "testpost"
    allowed_domains = ["fanyi.baidu.com"]
    # start_urls = ["https://fanyi.baidu.com/sug"]
    #
    # def parse(self, response):
    #     pass


    def start_requests(self):
        url = 'https://fanyi.baidu.com/sug'

        data = {
            'kw': 'hello'
        }

        yield scrapy.FormRequest(url=url, formdata=data, callback=self.parse_second)


    def parse_second(self, response):
        content = response.text
        obj = json.loads(content)
        print(obj)