![](https://img-blog.csdnimg.cn/20201014180756923.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
scrapy
HotIce0
小白
展开
-
scrapy库安装
如果是python2就用pip sudo pip3 install scrapy 显示安装成功后,通过运行scrapy version 显示版本,如果没显示,应该就是安装错误了。 $ scrapy version Scrapy 1.5.1原创 2018-09-02 01:30:00 · 434 阅读 · 0 评论 -
scrapy简单实践
创建项目 命令行切换到项目创建目录 运行命令scrapy startproject mysite 这样就创建好了一个scrapy项目 目录结构 : mysite pycache spiders(编写爬虫的地方) init.py init.py items.py(定义爬取的数据的数据结构) middlewares.py(request,spiders的中间件) pipelines...原创 2018-09-02 01:32:41 · 220 阅读 · 0 评论