爬虫之Splash对象属性

一 点睛 main()方法的第一个参数是splash,这个对象非常重要,它类似于Selenium中的WebDriver对象,我们可以调用它的一些属性和方法来控制加载过程。 二 agrs 1 点睛 该属性可以获取加载时配置的参数,比如URL,如果为GET请求,它还可以获取GET请求参数;如果...

2019-01-19 20:01:30

阅读数 44

评论数 0

爬虫之Splash基础篇

一 点睛 Splash是一个JavaScript渲染服务,是一个带有HTTP API的轻量级浏览器,同时它对接了Python中的Twisted和QT库。利用它,我们同样可以实现动态渲染页面的抓取。 二 功能介绍 利用Splash,我们可以实现如下功能: 异步方式处理多个网页渲染过程; ...

2019-01-19 17:15:22

阅读数 65

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭