selenium设置超时时间

最新推荐文章于 2024-06-05 15:33:25 发布
最新推荐文章于 2024-06-05 15:33:25 发布
阅读量6.6k 收藏 4
点赞数 2
分类专栏： 爬虫技术
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/he_ranly/article/details/105584303
版权

利用selenium请求网页的时候，有时因为某种原因使得页面一直处于加载状态，使得源代码一直不能返回。这种情况可以全局设置driver的加载时间，超时后停止加载然后强制返回源代码。

driver = webdriver.Chrome()

初始化driver对象后，设置一下两个超时时间

driver.set_page_load_timeout(10)  #页面加载超时时间

driver.set_script_timeout(10)  #页面js加载超时时间

由于超时后selenium会报错，所以要添加异常处理

try:

    browser.get('http://www.amazon.com/dp/B001UPMC1Y')

except TimeoutException: # 报错后就强制停止加载 # 这里是js控制

    browser.execute_script('window.stop()')             

print(browser.page_source)

 
润年
关注
  • 2
    点赞
  • 踩
  • 4
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
专栏目录
selenium切换标签页解决get超时问题的完整代码
12-17
从 gif 直观地感受一下效果 我有大量 url 需要访问，但是有些 url 会超时 为了避免超时，设置driver.set_page_load_timeout(3)限时3秒，一旦超时就会产生 TimeoutException 而且超时后标签页就卡柱了，只能通过 driver.close()关闭 如果你只有一个标签页，关闭就直接退出了，还得重启 自然想到先保留一个备用的标签，原标签超时需要关闭的时候就切换过来，然后再关闭，并打开新标签，保证任何时候都有两个标签页可用！！ def visit(urls, timeout=3): driver.implicitly_wait(timeout)
selenium webdriver—超时设置
weixin_34293902的博客
12-30 2479
2019独角兽企业重金招聘Python工程师标准>>> ...
Selenium自动化测试入门：设置等待时间
最新发布
HUA6911的博客
06-05 768
time.sleep(3) 固定等待3秒driver.implicitly_wait(10) 隐性的等待，对应全局WebDriverWait( driver, timeout).until(‘有返回值的__call__()方法或函数’) 显性的等待，对应到元素。
Selenium自动化之设置超时
DansonC的博客
08-12 2037
#设置超时，比如访问国外网站超时后，进行下一步操作 driver.set_page_load_timeout(4) import unittest import time from selenium import webdriver from selenium.webdriver import ActionChains from selenium.common.exceptions import ...
Selenium设置页面超时时间-快速终止页面加载
测试-八戒
04-26 1867
​​​​​​​。
selenium：如何解决打开网页加载时间过长问题
qq_33480558的博客
07-29 9380
大佬们有没有遇到过一种情况，selenium打开网页后，即使页面已经加载出来可以操作了，但是浏览器地址栏旁边还是在转圈，后面的代码也一直无法往下执行。默认情况下，SeleniumWebDriver在加载页面时，根据正常的加载策略，就是把get地址的页面及所有静态资源都下载完（如css、图片、js等）。eager等待初始HTML文档完全加载和解析，并放弃css、图像和子框架的加载。normal（默认）所有内容加载完成，包括文件、css、js等。几种方案各有千秋，大佬们请根据实际情况自行选择最优方案。...
1114Selenium web自动化测试经验分享-设置网页超时加载时间set_page_load_timeout()
zyooooxie的博客
11-15 1万+
set_page_load_timeout()
【selenium】解决页面加载时间过长问题
Yocczy的博客
08-29 4343
使用selenium测试中发现，页面元素已经加载出来可以进行操作，但是浏览器地址栏旁边还是一直在转圈，后面的代码也一直无法往下执行。
Python selenium页面加载慢超时的解决方案
09-17
在上述代码中，`driver.set_page_load_timeout(5)` 设置了页面加载的超时时间，一旦超过5秒，浏览器会停止加载并抛出异常。然而，这种方法可能导致驱动器（driver）失效，无法进行后续操作。这是因为页面加载被强制...
Python Selenium 设置元素等待的三种方式
09-17
显式等待是更智能的等待方式，它可以指定等待条件，直到满足条件或达到最大超时时间。例如： ```python from selenium import webdriver from selenium.webdriver.support import expected_conditions as EC from ...
Selenium-Python中文手册
01-15
- **等待**: `WebDriverWait`类允许设置超时时间等待特定条件满足，如元素出现或消失。 - **元素交互**: `click()`、`submit()`等方法模拟用户交互行为。 - **CSS选择器与XPath**: 使用`find_elements_by_css_...
Selenium最全超时等待问题的处理方案
python之战
04-05 1万+
Selenium广泛应用于自动化测试和自动化业务开发，同时在网络爬虫中也有较多的应用，使用Selenium有两个核心的问题：第一个是如何在爬虫领域不被识别出来，另一个是在自动化领域如何解决超时加载的问题。 今天来总结一下处理Selenium在自动化业务中的超时加载，让程序不在奔溃，同时能准确的获取信息。 首先需要区分两种超时情况，一种是页面加载出现的超时，一种是获取页面元素的超时。 对于页面...
python网站打开慢_Python selenium页面加载慢超时的解决方案
weixin_35935712的博客
02-04 2300
开发环境：win10-64 python2.7.16 chrome77from selenium import webdriverdriver = webdriver.Chrome(executable_path='chromedriver.exe')driver.get('http://全部加载完成超级慢的网站')user = 'abc'pwd = '123driver.find_eleme...
解决 selenium 加载网页阻塞的问题
anguuan的博客
03-05 1万+
selenium 的 webdriver 对象有一个 get 方法，可以打开指定的 URL，但是它是阻塞的，除非整个网页都加载完，否则不会返回。这样有两个弊端：一、很多时候，我们不需要整个网页都加载出来。二、如果网页因某种原因卡住，我们的程序也会卡住。解决这个问题的方法，就是用 set_page_load_timeout 函数和 WebDriverWait。 set_page_load_time...
Selenium自动化测试网页加载太慢怎么办
HSS919的博客
04-24 979
遇到网页加载慢，selenium运行效率降低，可以通过修改页面加载策略提升自动化效率。 selenium加载很慢 通过URL导航到新页面时，默认情况下，Selenium将等待文档完全被加载才会执行下面的操作，此时网页的加载状态为 complete。这种状态可以在浏览器中通过document.readyState获取，当网页没有完全加载时，显示为interactive，加载完成后显示complete。页面加载完成后，再试图访问其他JavaScript 动态加载的内容。
手机User-Agent大全
热门推荐
he_ranly的博客
03-30 4万+
因为爬取app需要，整理了一些手机的ua。如下： 华为: Mozilla/5.0 (Linux; U; Android 8.1.0; zh-cn; BLA-AL00 Build/HUAWEIBLA-AL00) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/57.0.2987.132 MQQBrowser/8.9 Mobile...
selenium连接超时
04-20
Selenium是一个用于自动化浏览器操作的工具，它可以模拟用户在浏览器中的行为。连接超时是指在使用Selenium时，当尝试连接到一个网页或执行某个操作时，如果连接时间超过了预设的时间限制，就会抛出连接超时的异常。 在Selenium中，可以通过设置超时时间来控制连接超时。一般来说，可以通过以下两种方式来设置连接超时时间： 1. 使用implicitly_wait方法：这个方法会在查找元素时等待一段时间，如果在指定的时间内找到了元素，则会立即执行后续操作；如果超过了指定的时间仍未找到元素，则会抛出超时异常。示例代码如下： ```python from selenium import webdriver driver = webdriver.Chrome() driver.implicitly_wait(10) # 设置超时时间为10秒 driver.get("https://www.example.com") ``` 2. 使用WebDriverWait类：这个类可以用于等待某个条件成立后再执行后续操作。可以通过指定等待的最长时间和轮询的间隔时间来控制连接超时。示例代码如下： ```python from selenium import webdriver from selenium.webdriver.support.ui import WebDriverWait from selenium.webdriver.support import expected_conditions as EC from selenium.webdriver.common.by import By driver = webdriver.Chrome() wait = WebDriverWait(driver, 10) # 设置最长等待时间为10秒 driver.get("https://www.example.com") element = wait.until(EC.presence_of_element_located((By.ID, "element_id"))) ``` 以上是两种常用的设置连接超时的方法，你可以根据自己的需求选择适合的方式来处理连接超时问题。
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值