使用scrapy框架进行爬虫时,报出异常:NotImplementedError: Test1Spider.parse callback is not defined

这种错误类型今天第一次使用Scrapy框架,就出现了,找了很多博客中的解决方法,还是不能访问,改了一下execute.py文件的位置就ok了
如图:在这里插入图片描述
书上说这三个位置放置execute.py文件都可以,我把文件放在第二个目录下,就不会抛出异常错误了。


下面总结一下,出现这种错误的解决方法:
1、修改execute.py文件的位置
在这里插入图片描述

2、类继承scrapy父类CrawlSpider。

# class Test1Spider(scrapy.Spider):
from scrapy.spiders import CrawlSpider
class Test1Spider(CrawlSpider):
    # Spider的名称,需要该名称启动Scrapy
    name = 'FirstSpider'
    # 指定要抓取的Web资源的URL
    start_urls = {
        'https://www.jd.com'
    }

3、带有response参数的函数的函数名改为parse

    def parse(self,response):
        # 输出日志信息
        self.log('hello world')

最近正在学习《Python爬虫技术 深入原理、技术与开发》,点个赞呗~

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值