最近打算尝试下Python爬虫的实现,环境搭建主要涉及到如下几部分:
1、Python & Pycharm,因为我本地已经安装了Python 3.6.* 和Pycharm 的社区版,所以忽略这步,另外,网上建议也可以直接安装Anaconda, 可以从清华的镜像下载 https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive/
2、MongoDB, 下载地址: http://dl.mongodb.org/dl/win32/x86_64 , 下载完成后, 直接点击安装,安装完成之后需要完成如下两步配置:
a) 新建data目录,在其下建立 db目录 & logs目录
b) logs目录下新建mongo.log 文件
c) 指定端口和服务名等
d) 以管理员权限运行cmd, 进入mongodb的bin目录,运行上面的命令:mongod --bind_ip 0.0.0.0 --logpath "E:\Program Files\MongoDB\Server\3.6\data\db\logs\mongo.log" --logappend --dbpath "E:\Program Files\MongoDB\Server\3.6\data\db" --port 27017 --serviceName "Mon