scrapy爬虫中CrawlSpider和scrapy.Spider的区别
在Scrapy爬虫中,CrawlSpider和scrapy.Spider都是继承至scrapy的子。
用scrapy创建的方式
CrawlSpider:
scrapy genspider -t crawl 【名】 【域名】
scrapy.Spider
scrapy genspider crawl 【名】 【域名】
它们的区别在于
Spider创建的时候会生成parse函数
CrawlSpider创建的时候没有parse函数
生成时会自带Rules:
LinkExtractor为链接提取
原创
2020-05-19 12:47:45 ·
830 阅读 ·
0 评论