今天打算尝试自己写一个爬虫,需要用到scrapy框架,搜索许久,发现虽然有很多教你如何在Linux下搭建scrapy的教程,但教你在win平台下用vscode搭建scrapy的教程并不多。
作为浅尝爬虫+懒癌晚期来说,个人觉得在win平台下尝试写写爬虫应该是足够了吧。。。
本着这种想法,自己尝试了下在win10下搭建scrapy,发现过程并非一帆风顺。于是写下此文记录安装过程,以飨读者 (怕自己二次搭建时完全忘掉)。。。
当然如果有条件的话,还是用Linux会好一些,至于为什么好。。。也许是比较酷吧 。。逃
第一步
安装twisted
在百度搜索pypi或点击如下链接:
搜索twisted选择最新的那个并下载就可以了。
下载后解压缩,执行文件夹中的setup.py就可以了。
第二步
打开vscode,按快捷键 ctrl + ~ 切换至终端,并在终端中输入
pip install scrapy