一、安装
官网没办法下载,点击链接没反应,按了F12,好歹链接能点了,下载下来的直接是个安装包,也不是可安装文件。运行monogd也失败了。
一通搜,搜到这个链接里可以下载msi可安装文件:
https://www.mongodb.org/dl/win32/x86_64
二、启动mongodb 数据服务器
在c盘下新建一个data/db的文件夹,作为mongodb存储数据库的位置。
然后运行mongod.exe,成功
三、运行scrapy
报错:
AttributeError: 'list' object has no attribute 'iteritems'
解决:
在settings.py里修改:
ITEM_PIPELINES,原来是一个list,
ITEM_PIPELINES = ['stack.pipelines.MongoDBPipeline',]
将其修改为一个dict:
ITEM_PIPELINES = {'stack.pipelines.MongoDBPipeline':0}
继续报错:
File "D:\python\stack\stack\pipelines.py", line 16, in <module>
from scrapy.conf import settings
ModuleNotFoundError: No module named 'scrapy.conf'
解决:
这是由于scrapy版本的问题,最新的版本里没有这个用法。
需要修改成:
from scrapy.utils.project import get_project_settings
settings = get_project_settings()