bitcarmanlee的博客

米厂的小码农,专注数据与算法,qq群:397173819

爬取豆瓣排名前100的电影

最近很多工作需要用到爬虫去爬取各种数据。本人也不是专业爬虫攻城狮,之前也没做过爬虫的相关工作。现在实际中遇到了要用,那就只好硬着头皮上吧。趁着周末稍微有点时间,网上找了找爬虫相关的资料与项目,然后参考其中某一个比较简单一些的,先上手实际搞一个练练手再说。1.爬虫的一般思路爬虫的基本想法就是以一个初...

2017-03-28 22:18:28

阅读数:2340

评论数:0

Scrapy ImportError: No module named items

1.问题描述在执行scrapy crawl命令爬取数据的时候,代码报了以下错误:ImportError: No module named items但显然我们代码里面是有items这个类的。那问题出现在哪里呢? 求助万能的stack overflow,发现正好有谈到这个问题。2.问题产生原因简单...

2017-03-25 23:22:34

阅读数:4688

评论数:1

提示
确定要删除当前文章?
取消 删除
关闭
关闭