什么是scrapy_splash
scrapy的一个组件
功能
scrapy-splash能够模拟浏览器
使用
安装
spash
1.安装docker
2.下载spash
3.运行镜像
1.前台运行
sudo docker run -p 8050:8050 scrapinghub/splash`
2.后台运行
sudo docker run -d -p 8050:8050 scrapinghub/splash
python模块 1.创建项目 2.创建爬虫 3.重写start_parse方法 4.将需要渲染的url创建成SplashRequest,请求