文章目录
1.selenium
针对selenium3使用
安装第三方包
pip install selenium
驱动下载地址
Chrome浏览器驱动下载地址:
http://chromedriver.storage.googleapis.com/index.html
http://npm.taobao.org/mirrors/chromedriver/
Firfox浏览器驱动下载地址:
https://github.com/mozilla/geckodriver/releases
IE浏览器驱动下载地址:
http://docs.seleniumhq.org/download/
Edge浏览器驱动下载地址:
https://developer.microsoft.com/en-us/microsoft-edge/tools/webdriver/
简单示例:
#coding:utf-8
from selenium import webdriver
import time
t = webdriver.Chrome()
t.get("http://www.baidu.com")
print(t.title)
time.sleep(5)
# t.close() # 关闭当前窗口
t.quit() # 退出浏览器,清空临时文件
2.元素定位
2.1 id定位
ele = t.find_element_by_id("kw")
ele = t.find_element(by="id",value='kw')
2.2 tag name定位
ele = t.find_element_by_tag_name("input")
ele = t.find_element(by="tag name",value='input')
2.3 name定位
ele = t.find_element_by_name("wd")
ele = t.find_element(by="name",value='wd')
2.4 class name定位
ele = t.find_element_by_class_name("s_ipt")
ele = t.find_element(by="class name",value='s_ipt')
2.5 链接文本定位
ele = t.find_element_by_link_text("视频").click()
time.sleep(3)
t.switch_to.window(t.window_handles[1]) # 却换窗口句柄
print(t.title)
current_handle = t.current_window_handle
ele = t.find_element(by="link text",value='综艺').click()
2.6 部分链接文本定位
ele = t.find_element_by_partial_link_text("视频").click()
time.sleep(3)
t.switch_to.window(t.window_handles[1])
print(t.title)
current_handle = t.current_window_handle
ele = t.find_element(by="partial link text",value='综艺').click()
2.7 CSS定位
ele = t.find_element_by_css_selector("#kw")
ele = t.find_element(by="css selector",value='.s_ipt')
id定位:#id
class name定位:.className
tag定位:tagName
相对定位子孙:'tag1 tag2' 标签为tag1中的后代元素中标签为tag2的元素
相对定位子: 'tag1 tag2' 标签为tag1中的子代元素中标签为tag2的元素
属性定位:
精确定位: "input#kw[name='wd']" name属性为wd的元素
以什么开头:"input#kw[name^='wd']" name属性为wd开头的元素
以什么结尾:"input#kw[name$='wd']" name属性为wd结尾的元素
包含: "input#kw[name*='wd']" name属性包含wd的元素
伪类元素定位:
'div#div1 :first-child' 第1个子元素
'div#div1 :eth-child(2)' 第2个子元素
'div#div1 :last-child' 最后一个子元素
'input:focus' 当前获取焦点的input标签
'input:enabled' 可操作的input标签
'input:checked' 勾选状态的的input标签
'input:not([id])' 无id属性的input标签
兄弟元素定位:
'div>input+a' div子节点中邻居时input标签的a元素
'div>input+a+img' div子节点中哥哥节点是a和input标签的a元素
'div>input+*+img' div子节点中哥哥节点是a和中间隔着一个元素的a元素
'div>input~li' div子节点中input的所有li弟弟节点
与Xpath定位相比,css定位速度更快
2.8 xpath定位
ele = t.find_element_by_xpath("//input[@id='kw'][@name='wd']")
ele = t.find_element(by="xpath",value="//input[@id='kw'][@name='wd']")
绝对路径定位: "/html/body/div/input[@id='kw'][@name='wd']"
相对路径定位: "//input[@id='kw'][@name='wd']"
索引定位: “//input[@id='kw'][1]" 第二个id等于ks的input标签
属性定位: “//input[@id='kw']"·····id等于kw的input标签
模糊定位:
属性以..开头:"//input[@id='kw'][starts-with(@name,'wd')]"
属性包含 :"//input[@id='kw'][contains(@name,'wd')]"
xpath轴相对定位(Axes):
parent:找父级节点
例:"//img/parent::div" img对象的父级节点,父节点是div
"//input[@id='kw']/parent::*" input对象的父级节点,父节点是任意类型
child:找子节点
例:"//img/child::div" img对象的子节点,父节点是div
"//input[@id='kw']/child::*" input对象的子节点,子节点是任意类型
ancestor:找上级节点
例:"//span/ancestor::div" span标签的上级节点,标签是div
"//span/ancestor::*" span对象的上级节点,任意类型
descendant:找后代节点(子+孙)
例:"//span/descendant::div" span标签的后代元素,标签是div
"//span/descendant::*" span对象的后代元素,任意类型
following:找后面的节点(同级+父级弟弟节点+父级弟弟节点的子孙节点)
例:"//span/following::div" span标签后面的元素,标签是div
"//span/following::*" span对象所有后面的元素,任意类型
follow-sibling:找同级弟弟节点
例:"//input[@id='kw']/following-sibling::*"
"//input[@id='kw']/following-sibling::div"
preceding:找前面的节点()
"//input[@id='kw']/preceding::a" 指定具体的标签,试过*/script会报错
preceding:找哥哥
"//input[@id='kw']/preceding-sibling::a"
"//input[@id='kw']/preceding-sibling::*"
xpath运算符
| 取两个xpath的并集: //a | //b
3 web对象操作
3.1 浏览器
#coding:utf-8
from selenium import webdriver
import time
t = webdriver.Chrome()
baidu_url = 'https://www.baidu.com'
sougou_url = 'https://www.sougou.com'
# 指定页面 加载时间
t.set_page_load_timeout(1)
t.get(baidu_url)
time.sleep(1)
t.get(sougou_url)
time.sleep(1)
t.back() # 后退
time.sleep(1)
t.forward() # 前进
t.back()
time.sleep(1)
print(t.title) # 获取页面title
print(t.page_source) # 获取页面源码
print(t.current_url) # 获取网址
t.refresh() # 刷新
print(t.get_window_position()) # 获取浏览器位置
t.set_window_position(200,200) # 设置浏览器位置
time.sleep(1)
t.maximize_window() # 浏览器窗口最大化
t.set_window_size(200,400) # 设置浏览器窗口大小
time.sleep(1)
t.close() # 关闭当前窗口
# 句柄切换
t2 = webdriver.Chrome()
t2.get(baidu_url)
# 报错当前句柄
first_handl = t2.current_window_handle
t2.find_element_by_link_text("视频").click()
# 切换到最新的页面
t2.switch_to.window