05-爬虫进阶_selenium（08 selenium的隐式等待和显式等待）

selenium的隐式等待和显式等待

页面等待:

现在的网越来越多采用了Ajax技术，这样程序便不能确定何时某个元素完全加载出来了。如果实际页面等待时间过长导致某个dom元素还没出来，但是你的代码直接使用了这个WebElement，那么就会抛出Nullpointer的异常。为了解决这个问题。所以Selenium提供了两种等待方式：一种是隐式等待、一种是显式等待。

1、隐式等待：调用driver.inplicitly_wait.那么在获取不可用的元素之前，会先等待10秒中的时间。示例代码如下：

from selenium import webdriver

driver_path = r"D:\application\chromedriver_win32\chromedriver.exe"
driver = webdriver.Chrome(executable_path = driver_path)
driver.get('https://www.douban.com/')

# 这里等待10秒，未获取元素，则抛出异常

driver.implicitly_wait(10)

driver.find_element_by_id("sdfjlasdjfsdfja;sdf;klsd")

2、显示等待：显示等待是表明某个条件成立后才执行获取元素的操作。也可以在等待的对候指定一个最大的时间，如果超过这个时间那么就抛出一个异常，显示等待应该使用selenium.webdriver.suport.excepted_conditions期望的条件和selenium.webdriver.support.ui.WebDriverWait配合完成。示例代码如下：

from selenium import webdriver
from selenium.webdriver.support.ui import WebDriverWait 
from selenium.webdriver.support import expected_conditions as EC
from selenium.webdriver.common.by import By

driver_path = r"D:\application\chromedriver_win32\chromedriver.exe"
driver = webdriver.Chrome(executable_path = driver_path)
driver.get('https://www.douban.com/')

# 此处ID是乱写的，等待10秒之后，就抛出异常
WebDriverWait(driver,10).until(
    EC.presence_of_element_located((By.ID,'sfasfsd'))
)

3、一些其她的等待条件：

• presence_of_element_located：某个元素已经加载毕了。
• presence_of_all_emement_located：网页中所有满足条件的元素都加载完毕了。
• element_to_be.cliable：某个元素是可以点击了.

更多条件请考：https://selenium-python-zh.readthedocs.io/en/latest/waits.html