最近抓取天猫商评论的时候遇到的问题
selenium.common.exceptions.ElementClickInterceptedException: Message:
Element <a class=""> is not clickable at point
(318.3000030517578,661.7999877929688) because another element <div
class=""> obscures it
报错的代码
pages = self.browser.find_element_by_link_text("下一页>>")
pages.click()
这是我使用selenium点击下一页的代码,刚开始没有报错,爬取几页之后显示了这个错误,意思是有其他的元素掩盖了需要点击的元素,但是我并没有在网页上找到第二个下一页的链接。
解决办法:
我在网上找到的两种方法
element = driver.find_element_by_css('div[class*="loadingWhiteBox"]')
driver.execute_script("arguments[0].click();", element)
element = driver.find_element_by_css('div[class*="loadingWhiteBox"]')
webdriver.ActionChains(driver).move_to_element(element ).click(element ).perform()
我使用了第一种方法,将代码改为下面这种
pages = self.browser.find_element_by_link_text("下一页>>")
self.browser.execute_script("arguments[0].click();", pages)
这种实际爬取中是没有问题的,不会在出现错误,但是第二种方法我没有尝试。