scrapy提交参数请求

scrapy提交参数请求

##代码如下:

import scrapy

class MySpider(scrapy.Spider):
    name = 'myspider'
    
    def start_requests(self):
        url = 'http://example.com/search'
        params = {'keyword': 'Scrapy', 'page': 1}  # 这些是你想添加的参数
        yield scrapy.Request(url=url, meta={'params': params}, callback=self.parse)

    def parse(self, response):
        params = response.meta.get('params')  # 在这里你可以访问到这些参数
        # 使用params变量进行后续操作