该博客详细介绍了如何在已经安装了docker的环境中，通过JupyterLab和终端步骤安装Scrapy、Splash、Scrapy-Splash以及Scrapy-Redis。首先确保配置了国内镜像，然后逐个安装每个组件，包括启动和关闭Splash的流程。Scrapyrt作为轻量级Scrapyd的安装也进行了提及。
前题：安装docker并能使用
安装完在JSON文件中加入国内镜像，阿里云需要自己申请。
"registry-mirrors": [
"https://********.mirror.aliyuncs.com",
"https://registry.docker-cn.com",
"http://hub-mirror.c.163.com",
"https://docker.mirrors.ustc.edu.cn"
]
其他前题：
已为anaconda配置好PATH
Scrapy 安装
JupyterLab 输入
pip install scrapy
import scrapy
Splash 安装
终端中输入：
docker run -p 8050:8050 scrapinghub/splash
成功安装返回类似如下内容
Digest: sha256:b4173a88a9d11c424a4df4c8a41ce67ff6a6a3205bd093808966c12e0b06dacf
Status: Downloaded newer imag
最低0.47元/天 解锁文章
扫一扫
450
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
