11_实用技巧1—多级页面的抓取技巧

这里写图片描述

需求分析:

  • 目标网站:天猫商城;
  • 抓取内容:
    • 天猫商城销量前60的商品的情况(商品价格、商品名称、商品URL)、店铺的情况(店铺名称、店铺URL、公司名称、公司地址)
  • 存储格式:excel表格

项目实施:

代码解读

  • Item编写
  • spider编写
  • setting设置

总结:

  • 要求掌握:怎样在spider的不同parse函数中传递数据
阅读更多
版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/u010155229/article/details/51556916
个人分类: scrapy
上一篇10 scrapy框架解读--深入理解爬虫原理
下一篇14_抓取过程中的常见问题2—cookie的处理
想对作者说点什么? 我来说一句

没有更多推荐了,返回首页

关闭
关闭