■win32api
说明:64位机上运行32位时所用到的包
安装方法:pip install win32api
■requests
说明:用于异步取得页面内容
安装方法:pip install requests
■scrapy_crawlera
说明:代理,一些网站因为会对IP进行封锁。
安装方法:pip install scrapy_crawlera
按下图在setting.py中进行配置
■pymongo
说明:mongoDB 插件
安装方式:pip install pymongo
■bson
说明:bson数据
安装方式:pip install bson