scrapy爬虫循环抓取同一个url，避免同一URL使爬虫关闭

主要方法是：

def param_main(self, response):
    all_item_css = response.css("div.item")
    # 各种操作...
    yield scrapy.Request(response.url, callback=self.param_main, dont_filter=True, meta={})

想要循环抓取同一URL，必须在yield scrapy.Request中，同时满足以下两点：

1. callback指向自己（类似于递归）
2. dont_filter=True

这时这个url才能是自己的url