- 博客(4)
- 收藏
- 关注
RSS订阅转载 centos7 scrapy安装
1.anaconda3安装wget https://repo.anaconda.com/archive/Anaconda3-2019.03-Linux-x86_64.sh安装报错，可能是源的问题直接在windows上下载anaconda3包，然后rz到centos上地址：https://www.anaconda.com/distribution/#downloa...
2019-06-03 20:38:00
86
转载 scrapy架构流程
1.爬虫spiders将请求通过引擎传递给调度器scheduler2.scheduler有个请求队列，在请求队列中拿出请求给下载器，downloader3.downloader从Internet的服务器端请求数据，下载下来4.下载下来的响应体交还给我们自己写的spiders，对响应体做相应的处理5.响应体处理后有两种情况，1）：如果是数据，交给pipeline管道，处...
2019-06-03 13:43:00
75
转载 scrapy安装问题
本人是用的anaconda3包管理工具，安装好之后默认是python3.7版本，在cmd中通过activate进入：在anaconda的base环境下，pip install scrapy 发现安装失败，原因是Twisted安装失败，需要单独下载Twisted，Scrapy的whl文件进行安装即可：网盘下载网址：链接：https://pan.baidu.com/s/1qadjhw...
2019-06-02 13:09:00
73
转载 html5一些特性
html5可以理解为html+css+js其目前可以解决：1.浏览器的兼容问题 2.统一web应用标准 3.解决文档结构定义不明确问题 4.解决web应用中的功能受限问题 5.是程序员编写的web应用更加独立html5的判断是<!DOCTYPE html>标签，此标签内不含其他任何元素，便是html5。html5新增特性：video,audio,canvas,新的...
2018-01-29 20:39:00
61
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人