scrapy抓取豆瓣网细化抓取到的信息(2)

紧接上文内容(https://www.cnblogs.com/guanguan-com/p/13535351.html),来细化爬虫程序

3.制作爬虫

详细教程可以参考慕课网@大壮老师的课程https://www.imooc.com/video/17518

编写细致化的爬虫文件如下

注意代码之间的缩进规则,没有红波浪的下划线即没有错误,鼠标移动到红波浪的下划线位置会提示错误

然后我们到main.py中运行爬虫程序如下,即为成功

4.储存内容

(1)在cmd执行程序下输入scrapy crawl douban_spider -o test.json回车

(2)继续输入scrapy crawl douban_spider -o test.csv回车

(3)这样我们就把抓取到的数据导入到了一个test.csv表格中储存了,方便我们阅览信息

(4)在电脑C盘中查找test.csv可以看见

(5)选取一个复制到桌面方便下次查看

(6)双击打开表格,得到我们爬取到的豆瓣网详细信息,并且已经分类,便于查找

爬虫到这,也算是成功了

希望能帮到大家,问你们要一个赞,你们会给吗,谢谢大家
版权声明:本文版权归作者(@攻城狮小关)和CSDN共有,欢迎转载,但未经作者同意必须保留此段声明,且在文章页面明显位置给出原文连接,否则保留追究法律责任的权利。
大家写文都不容易,请尊重劳动成果~ 
交流加Q:1909561302
博客园地址https://www.cnblogs.com/guanguan-com/

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

攻城狮小关

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值