python跳转到新页面、如何等待页面加载完_如何正确等待页面加载?

我使用ScrapyJS和Splash来模拟表单提交按钮的单击def start_requests(self):

script = """

function main(splash)

assert(splash:autoload("https://ajax.googleapis.com/ajax/libs/jquery/2.1.3/jquery.min.js"))

assert(splash:go(splash.args.url))

local js = [[

var $j = jQuery.noConflict();

$j('#USER').val('frankcastle');

$j('#password').val('punisher');

$j('.button-oblong-orange.button-orange a').click();

]]

assert(splash:runjs(js))

local resumeJs = [[

function main(splash) {

var $j = jQuery.noConflict();

$j(document).ready(function(){

splash.resume();

})

}

]]

assert(splash:wait_for_resume(resumeJs))

return {

html = splash:html()

}

end

"""

splash_meta = {'splash': {'endpoint': 'execute', 'args': {'wait': 0.5, 'lua_source': script}}}

for url in self.start_urls:

yield scrapy.Request(url, self.after_login, meta=splash_meta)

def after_login(self, response):

print response.body

return

在完成splash:runjs(js)之后,我求助于splash:wait(5)试图splash:wait_for_resume来得到结果。这可能并不总是有效的(网络延迟),那么还有更好的方法吗?在

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值