scrapy安装

在Windows下安装scrapy是比较麻烦的,具体的安装步骤如下: 
1: pip install wheel 
2: pip install lxml 
3: pip install PyOpenssl 
4:安装microsoft visual c++ build tools,

下载地址:https://devblogs.microsoft.com/python/unable-to-find-vcvarsall-bat/
4: pip install twisted 
5: pip install pywin32 
6: pip install scrapy 

在命令行中输入scrapy,出现如下界面,则表示安装成功。 
 
在anaconda平台下的安装-推荐使用 
conda intall scrapy 
anconda平台会自动安装先关依赖库,特别方便。 
测试是否安装成功 
在命令行中,首先创建项目 
scrapy startproject hello 
进入项目目录 
cd hello 
生成爬虫 
scrapy genspider baidu www.baidu.com 
爬取百度 
scrapy crawl baidu

如果命令都可以正常运行,则证明安装成功。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值