python和selenium grid实现分布式爬虫
python和selenium grid实现分布式爬虫selenium grid的分布式结构就是由一个hub节点和若干个node代理节点组成。Hub用来管理各个代理节点的注册信息和状态信息,并且接受远程客户端代码的请求调用,然后把请求的命令转发给代理节点来执行。Selenium Grid环境部署下载selenium-server-standalone jar包下载地址这里我选择下载的版本是selenium-server-standalone-3.9.1.jar在命令窗口进入selenium-s
原创
2022-03-10 16:50:10 ·
1837 阅读 ·
0 评论