selenium 的使用详解

selenium 安装 chromedriver安装

selenium 安装 可使用pip安装 成功率还比较高

pip install selenium

chromedriver安装

1. 先查看浏览器的版本：在网址中输入chrome://version/
2. https://npm.taobao.org/mirrors/chromedriver/
   下载与自己浏览器版本匹配的包
   将下载好的包放在计算机目录中，并将这个exe添加到环境变量中
   再cmd中输入chromedriver

好了先来一段代码看看吧

# -*- coding: utf-8 -*-
from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.common.keys import Keys
from selenium.webdriver.support import expected_conditions as EC
from selenium.webdriver.support.wait import WebDriverWait

browser = webdriver.Chrome()
browser.get("https://www.baidu.com")
input = browser.find_element_by_id("kw")
input.send_keys("Python")
input.send_keys(Keys.ENTER)
wait = WebDriverWait(browser, 10)
wait.until(EC.presence_of_all_elements_located((By.ID, "content_left")))
print(browser.current_url)
print(browser.get_cookies())
print(browser.page_source)
browser.close()

这个就是在百度中搜索输入搜索Python

接下来将一步一步介绍一下selenium的具体用法

声明浏览器对象

from selenium import webdriver
#这个就是谷歌浏览器的对象
browser = webdriver.Chrome()
browser = webdriver.Firefox()
browser = webdriver.Edge()
browser = webdriver.PhantomJS()

访问页面

from selenium import webdriver

browser = webdriver.Chrome()
browser.get("https://www.baidu.com")
print(browser.page_source)
browser.close()

查找元素

from selenium import webdriver
from selenium.webdriver.common.by import By

browser = webdriver.Chrome()
browser.get("https://taobao.com")
input_first = browser.find_element_by_id('q')
input_sencond = browser.find_element_by_css_selector("#q")
print(input_first, input_sencond)
browser.close()

#这个是所有方法的整合
browser.find_element(By.ID, "q")

多个元素的查询 将element变为elements就好

返回的结果是所有选中内容组成的列表

元素交互操作

打开一个淘宝主页输入“屠龙刀”清除后输入“倚天剑”
------------------不知道，咱不知道他有没有，咱搜搜看看----------------------

from selenium import webdriver
from selenium.webdriver.common.by import By
import time

browser = webdriver.Chrome()
browser.get("https://taobao.com")
input = browser.find_element(By.ID, "q")
input.send_keys("屠龙刀")
time.sleep(1)
input.clear()
input.send_keys("倚天剑")
button = browser.find_element_by_class_name("btn-search")
button.click()

交互操作

将动作附加到链接中串行执行
接下来模拟一个拖拽的动作

from selenium import webdriver
from selenium.webdriver import ActionChains

browser = webdriver.Chrome()
url = ""
browser.get(url)
browser.switch_to.frame(("iframeResult"))
#被拖拽对象
source = browser.find_element_by_css_selector("")
#拖拽到的目标位置
target = browser.find_element_by_css_selector("")
actions = ActionChains(browser)
actions.drag_and_drop(source, target)
#执行动作
actions.perform()

执行JAVAScript

from selenium import webdriver

browser = webdriver.Chrome()
browser.get("https://www.zhihu.com/explore")
#下拉操作
browser.execute_script('window.scrollTo(0, document.body.scrollHeight)')
browser.execute_script('alter(To Botton')

爬虫匹配字段方法

from selenium import webdriver

browser = webdriver.Chrome()
browser.get("https://www.zhihu.com/explore")
ele = browser.find_element_by_css_selector()
ele.get_attribute("class")
#获取文本值
data = ele.text
#获取大小位置名称
data = ele.location
data = ele.tag_name
data = ele.size