【测开面经】Selenium快速入门

最新推荐文章于 2024-05-11 14:28:51 发布
最新推荐文章于 2024-05-11 14:28:51 发布
阅读量1.3k 收藏 8
点赞数
分类专栏： # Python补充（MS） 文章标签： selenium 爬虫 python html xpath
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_36477513/article/details/120723748
版权

文章目录

环境配置

  • 安装selenium
    pip install selenium
  • 安装webdriver
    webdriver需要和对应的浏览器版本对应，将webdriver.exe文件复制到python的安装目录下即可。

操作浏览器

启动浏览器

普通启动

from selenium import webdriver

bro = webdriver.Chrome()
bro.get('http://www.baidu.com/')

Headless启动

Headless Chrome是Chrome浏览器的无界面形态，可以在不打开浏览器的前提下，使用所有Chrome支持的特性。相比现代浏览器，Headless Chrome更加方便测试web应用，获得网站的截图，做爬虫抓取信息等。相比于较早的PhantomJS、slimerJS等，其更贴近浏览器环境。

from selenium import webdriver

chrome_options = webdriver.ChromeOptions()
# 使用headless无界面浏览器模式
chrome_options.add_argument('--headless')  # 增加无界面选项
chrome_options.add_argument('--disable-gpu')  # 如果不加这个选项，有时定位会出现问题
# 启动浏览器,获取源代码
browser = webdriver.Chrome(chrome_options=chrome_options)
mainUrl = 'https://www.baidu.com/'
browser.get(mainUrl)
print(f'browser text={browser.page_source}')
browser.quit()

加载配置启动浏览器

用Chrome地址栏输入chrome://version/，查看自己的“个人资料路径”，然后在浏览器启动时，调用这个配置文件。

from selenium import webdriver

option = webdriver.ChromeOptions()
option.add_argument(r'--user-data-dir=C:\Users\Administrator\AppData\Local\Google\Chrome\User Data\Default')
driver = webdriver.Chrome(chrome_options=option)

元素定位

  • webdriver提供的对象定位方法：
    id定位：find_element_by_id()
    name定位：find_element_by_name()
    class定位：find_element_by_class_name()
    link定位：find_element_by_link_text()
    partial link定位：find_element_by_partial_link_text()
    tag定位：find_element_by_tag_name()
    xpath定位：find_element_by_xpath()
    css定位：find_element_by_css_selector()
import time
from selenium import webdriver

bro = webdriver.Chrome()
bro.get('http://www.baidu.com')
# 百度输入框的定位方式
# 通过id定位
bro.find_element_by_id('kw').send_keys('selenium')
# 通过name方式定位
bro.find_element_by_name('wd').send_keys('selenium')
# 通过class定位
bro.find_element_by_class_name('s_ipt').send_keys('selenium')
# 通过css定位
bro.find_element_by_css_selector('#kw').send_keys('selenium')
# 通过xpath定位
bro.find_element_by_xpath('//input[@id=\'kw\']').send_keys('selenium')
# 点击“百度一下”
bro.find_element_by_id('su').click()
# 获取页面快照
time.sleep(3)
bro.save_screenshot('selenium.png')
time.sleep(3)
# close()关闭当前页面，如果只有一个页面，会关闭浏览器；quit关闭浏览器
bro.quit()
  • 页面元素定位不到问题解决方法
  • class含有空格时解决方法
    在实际进行元素定位时，经常发现class name是有多个class组合的复合类，中间以空格隔开，如果直接进行定位会出现报错，可以通过以下方式处理：
    1）选择class中属性唯一的那一个
    2）若空格隔开的class不唯一，可以通过索引进行定位
    3）通过css方法直接定位（空格以’.'代替）
from selenium import webdriver

bro = webdriver.Chrome()
bro.get('http://mail.126.com/')
bro.implicitly_wait(10)
# 切换iframe（iframe是内嵌的网页元素，也可以说是内嵌的框架）
# 126.com不能用selenium定位是因为iframe框架包装了，并且id是动态变化的，所以使用xpath定位iframe
bro.switch_to.frame(bro.find_element_by_xpath('//iframe[@scrolling="no"]'))
# bro.switch_to.frame(bro.find_elements_by_tag_name('iframe')[0]) # 或者使用tag定位
# 方法1）
bro.find_element_by_class_name('dlemail').send_keys('123@126.com')
bro.find_element_by_class_name('dlpwd').send_keys('123456')
# 方法2）定位一组取下标定位
bro.find_elements_by_class_name("j-inputtext")[0].send_keys('123@126.com')
bro.find_elements_by_class_name("j-inputtext")[1].send_keys('123456')
# 方法3）css定位
bro.find_element_by_css_selector('.j-inputtext.dlemail').send_keys('123@126.com')
bro.find_element_by_css_selector('.j-inputtext.dlpwd').send_keys('123456')
# 方法4）直接包含空格的CSS属性定位大法
bro.find_element_by_css_selector("[class='j-inputtext dlemail j-nameforslide']").send_keys('123@126.com')

三种等待方式

强制等待

导入‘time’模块，强制等待sleep(x)，这种等待方式太死板，严重影响程序的执行速度。

隐式等待

通过添加implicitly_wait(x)方法就可以方便的实现智能等待，隐式等待设置了一个最长等待时间，如果在规定时间内网页加载完成，则执行下一步，否则一直等到时间截止然后执行下一步。隐式等待对driver的整个周期都起作用，所以只要设置一次即可，不需要像sleep那样处处使用实现等待。
隐式等待存在一个弊端，那就是程序会一直等待整个页面加载完成，也就是一般情况下看到浏览器标签栏的那个小圈不再转，才会执行下一步，但有时页面想要的元素早就加载完了，但是因为个别js之类的特别慢，仍要等到页面全部完成才执行下一步，这时selenium提供了另一种等待方式——显式等待wait。

显式等待

显式等待WebDriverWait，配合该类的until()和until_not()方法，就能够根据判断条件而进行灵活的等待了。当隐式等待和显式等待都存在时，超时时间取二者中较大的。
调用方法： WebDriverWait(driver,超时时长，调用频率，忽略异常).until(可执行方法，超时返回的信息)

until在等待时，每隔一段时间(即调用频率，默认0.5s)，调用可执行方法，直到返回值为True则继续执行；until_not与until相反。
可执行方法必须是可调用方法，不能传入WebElement对象，否则会抛出异常。这里可以使用expected_conditions模块中的方法，也可以使用WebElement的is_displayed()、is_enabled()、is_selected()方法等。
Expected_Conditions一般直接在断言中使用，或者与WebDriver配合使用，动态等待页面上元素出现或者消失。

from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.support import expected_conditions as EC
from selenium.webdriver.support.wait import WebDriverWait

driver = webdriver.Chrome()
driver.implicitly_wait(5)
driver.get('http://www.baidu.com')

# 判断title，返回布尔值
WebDriverWait(driver, 10).until(EC.title_is(u'百度一下，你就知道'))
WebDriverWait(driver, 10).until(EC.title_contains(u'百度一下'))
# 判断某个元素是否被加到dom树中，并不代表该元素一定可见，如果定位到就返回WebElement
WebDriverWait(driver, 10).until(EC.presence_of_element_located((By.ID, 'kw')))
# 判断某个元素是否被添加到dom树中并且可见，可见代表元素可显示且高宽都大于0
WebDriverWait(driver, 10).until(EC.visibility_of_element_located((By.ID, 'su')))
# 判断某个元素是否可见，如果可见则返回这个元素
WebDriverWait(driver, 10).until(EC.visibility_of(driver.find_element(by=By.ID,value='kw')))
# 判断是否至少有一个元素存在于dom树中，如果定位到就返回列表
WebDriverWait(driver, 10).until(EC.presence_of_all_elements_located((By.CSS_SELECTOR, '.mnav')))
# 判断指定的元素中是否包含了预期的字符串，返回布尔值
WebDriverWait(driver, 10).until(EC.text_to_be_present_in_element((By.XPATH, "//*[@id='u1']/span"), u'设置'))
# 判断指定元素的属性值中是否包含了预期的字符串，返回布尔值
WebDriverWait(driver,10).until(EC.text_to_be_present_in_element_value((By.CSS_SELECTOR,'#su'),u'百度一下'))
# 判断该frame是否可以switch进去，如果可以的话，返回True并且switch进去，否则返回False
# WebDriverWait(driver,10).until(EC.frame_to_be_available_and_switch_to_it((By.ID,'kw')),'该页面无frame')
# 判断某个元素是否存在与dom或不可见，如果可见返回False，不可见返回True
WebDriverWait(driver, 10).until(EC.invisibility_of_element_located((By.CSS_SELECTOR, '#swfEveryCookieWrap')))
# 判断某个元素是否可见并且是enable的，代表可点击
WebDriverWait(driver, 10).until(EC.element_to_be_clickable((By.XPATH, "//*[@id='u1']/span"))).click()
# 判断某个元素是否被选中了， 一般用在下拉列表中
# WebDriverWait(driver, 10).until(EC.element_to_be_selected(driver.find_element(By.XPATH,"//*[@id='nr']/option[1]")))
# 判断页面上是否存在alert，如果有就切换到alert并返回alert的内容
# instance = WebDriverWait(driver,10).until(EC.alert_is_present())
# print(instance.text)
# instance.accept()
driver.close()

浏览器显示

  • 浏览器最大化、最小化显示，设置窗口大小
from selenium import webdriver
import time

driver = webdriver.Chrome()
driver.implicitly_wait(5)
driver.get('http://www.baidu.com')
# 窗口最大化
driver.maximize_window()
time.sleep(3)
# 窗口最小化
driver.minimize_window()
time.sleep(3)
# 设置窗口大小
driver.set_window_size(480,800)
time.sleep(3)
driver.close()
  • 浏览器前进后退
    driver.forward()
    driver.back()

操作对象

一般来说，webdriver中比较常用的操作对象的方法有下面几个：

  • click 点击对象
  • send_keys 在对象上模拟按键输入
  • clear 清除对象的内容，如果可以的话
  • submit 提交对象的内容，如果可以的话
  • text 用于获取元素的文本信息
  • select处理下拉框
<select id="status" class="form-control valid" onchange="" name="status">
    <option value=""></option>
    <option value="0">未审核</option>
    <option value="1">初审通过</option>
    <option value="2">复审通过</option>
    <option value="3">审核不通过</option>
</select>

# 导入 Select 类
from selenium.webdriver.support.ui import Select

# 找到 name 的选项卡
select = Select(driver.find_element_by_name('status'))

select.select_by_index(1)
select.select_by_value("0")
select.select_by_visible_text(u"未审核")

三种选择下拉框的方式：
index索引从0开始
value是option标签的一个属性值，并不是显示在下拉框中的值
visible_text是在option标签文本的值，显示在下拉框的值
全部取消选择：select.deselect_all()

键盘事件

要想调用键盘按键操作需要引入keys包：from selenium.webdriver.common.keys import Keys通过send_keys调用按键：
send_keys(Keys.TAB)，send_keys(Keys.ENTER)，send_keys(Keys.CONTROL,'a')

import time
from selenium import webdriver
from selenium.webdriver.common.keys import Keys

bro = webdriver.Chrome()
bro.get('http://mail.126.com/')
bro.implicitly_wait(10)
bro.switch_to.frame(bro.find_element_by_xpath('//iframe[@scrolling="no"]'))
# 全屏显示
bro.maximize_window()

bro.find_element_by_class_name('dlemail').clear()
bro.find_element_by_class_name('dlemail').send_keys('123')

# tab的定位相当于清楚了密码框的默认提示信息，等同于上面的clear()
bro.find_element_by_class_name('dlpwd').send_keys(Keys.TAB)
bro.find_element_by_class_name('dlpwd').send_keys('123456')

# 通过定位密码框，回车代替登录按钮
# bro.find_element_by_class_name('dlpwd').send_keys(Keys.ENTER)
# 或者直接定位登录按钮，click点击或者用Keys.ENTER代替
bro.find_element_by_id('dologin').click()
time.sleep(3)
bro.quit()

鼠标事件

鼠标事件一般包括鼠标左右键、双击、拖动、移动鼠标到某个元素上等。
引入ActionChains类：from selenium.webdriver.common.action_chains import ActionChains

常用方法：
perform() 执行所有ActionsChains中存储的行为
context_click() 右击
double_blick() 双击
drag_and_drop() 拖动
move_to_element 鼠标悬停
click_and_hold 点击并保持，可以用于滑块验证

  • 鼠标双击示例
# 定位要双击的元素
dc = driver.find_element_by_xpath('xxx')
# 对定位到的元素执行鼠标双击操作
ActionChains(driver).double_click(dc).preform()
  • 鼠标拖放示例
# 定位元素的原位置
element = driver.find_element_by_name('xxx')
# 定位元素要移动到的目标位置
target = driver.find_element_by_name('xxxx')
# 执行元素的移动操作
ActionChains(driver).drag_and_drop(element,target).perform()

Expected_Conditions解析

相关方法

Selenium速查表

异常

在这里插入图片描述

Xpath&Css定位方法

在这里插入图片描述

ZoomToday
关注
  • 0
    点赞
  • 踩
  • 8
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
python自动化测试 selenium 模块 webdriver的简单介绍与使用
一个随缘学习的猿
10-12 3159
一、webdriver基本使用命令 fromselenium importwebdriver # 导入webdriver模块 chrome_obj =webdriver.Chrome() # 打开Google浏览器 chrome_obj.get("https://www.baidu.com") # 打开 网址 chrome_obj.get(...
UI自动化测试02
徐天伦的博客
11-23 546
隐式等待，指针之后的页面所有内容都有效，上面写了10，指的是10s，判断如果某个元素没有加载出来，最大超时时间是10s,显示等待设置的时候，需要是给每一个元素单独设置，偶尔有个元素由于业务需要加载时间比较长，则可以给其单独设置显示等待。句柄就类似于每一个标签页的id一样，是唯一的。submit：可以用于表单的提交，可以在某些时候达到和click互换的效果。time.sleep(4) 这个是python中自带的日期时间模块完成的。为了解决页面加载太慢，而代码执行过快，元素定位不到的问题。
关于from selenium import webdriver报错问题
qq_41544550的博客
03-08 1万+
出现这种错误可能存在以下几种可能情况： 1、根本没有安装selenium库； 2、安装了selenium库，可是在导入的时候，仍然提示selenium库不存在。 解决办法： （1）出现第一种问题时： 安装selenium即可，我的另一篇博客有介绍，地址如下： https://blog.csdn.net/qq_41544550/article/details/88343387 跟着安装...
selenium+webdriver爬虫技术
最新发布
NHB456789的博客
05-11 1025
百度百科Selenium时，头一段文字介绍了selenium的主要作用和特点：selenium是一个用于Web应用程序测试的工具。Selenium测试直接运行在浏览器中，就像真正的用户在操作一样。支持的浏览器包括IE（7, 8, 9, 10, 11），，Safari，Google Chrome，Opera等。这个工具的主要功能包括：测试与浏览器的兼容性——测试你的应用程序看是否能够很好得工作在不同浏览器和操作系统之上。测试系统功能——创建回归测试检验软件功能和用户需求。鉴于本文讨论的是。
Python 3网络爬虫之Selenium用法
种一棵树，最好的结果是十年前，其次是现在！
08-20 1800
代码摘抄之《Python 3网络爬虫开发实战》
Python使用Selenium WebDriver的入门介绍及安装教程
热门推荐
hubing_hust的专栏
12-13 4万+
WebDriver 以本地化方式驱动浏览器，就像用户在本地或使用 Selenium 服务器的远程机器上所做的那样，这标志着浏览器自动化的飞跃。Selenium WebDriver 指的是语言绑定和各个浏览器控制代码的实现。这通常被称为 WebDriver。Selenium WebDriver 是 W3C 推荐标准。WebDriver 被设计成一个简单和简洁的编程接口。WebDriver 是一个简洁的面向对象 API。它能有效地驱动浏览器。本文绝大部分内容，都可以从以下官方文档中找到。
selenium快速入门示例
01-19
cd D:\selenium快速入门示例 D: set JAVA_HOME=E:\tools\java\jdk1.8.0_181x64 set PATH=%JAVA_HOME%\bin;%PATH% javac -encoding utf-8 -Djava.ext.dirs=. SogouTest1.java java -Djava.ext.dirs=. SogouTest1 ...
selenium快速入门及常用api
02-12
**Selenium 快速入门及常用API** Selenium是一款强大的Web自动化测试工具，它允许开发者模拟用户行为，对网页进行各种操作，如点击、输入、导航等，从而进行功能测试和性能测试。本文将深入介绍Selenium的快速入门...
Selenium自动化测试工具入门指南
07-23
教程名称：Selenium自动化测试工具入门指南       课程目录： 【】Seleniumrmtech.pdf 【】Selenium使用说明 【】Selenium私房菜（新手入门教程） 【】集成测试工具 Selenium ...
java+selenium初级入门
05-08
简单的Java+selenium初级入门知识，自己自学记录的，仅供参考。
selenium自动化测试入门
03-28
selenium自动化测试入门
python之selenium-web自动化＜一＞
小木可的博客
01-12 8805
一、基本操作 a. from selenium import webdriver # 启动浏览器 driver = webdriver.Chrome(service_log_path='C:\\Users\\joinkwang\\test\\test_project\\common\\chormelog.log') # 访问一个网页 driver.get("http://devci01:8080/login?from=%2F") # 退出访问或者会话 杀掉进程 不占用资源 driver.quit()
python | 对selenium库使用
a_bini的博客
11-19 234
问题简要：我们通过导入selenium库中webdriver驱动，time时间库，selenium枯By包，完成python库包的使用，用selenium编写代码程序，实现百度网页自动查询数据。
解决 from selenium import webdriver中 selenium webdriver 下面冒红色波浪 亲测有效
qq_740785701的博客
05-21 4013
解决 from selenium import webdriver中 selenium webdriver 下面冒红色波浪 亲测有效
Python+Selenium webdriver mange用法-告别手动下载driver
伟爵社的博客
04-15 5215
1 使用selenium的webdriver问题 通常使用selenium时候我们需要自己单独去下载对应各浏览器版本的webdriver，并在后期针对不同操作系统（mac、windows、linux）或者不同浏览器版本都要反复选择对应版本webdriver 为了解决以上问题，webdriver-manage第三方库营运而生，它可以自动帮你识别当前运行环境下系统信息以及对应浏览器信息，并自动下载对应的w
"from selenium import webdriver"报错的解决方法
qq_34078897的博客
08-14 2万+
在写测试脚本时，出现如下错误： Cannot find reference 'webdriver' in 'imported module selenium' less... (Ctrl+F1)  Inspection info: This inspection detects names that should resolve but don't. Due to dynamic dispatc...
python爬虫--selenium模块
qq_43710889的博客
03-27 4477
文章目录selenium模块selenium基本概念基本使用代码基于浏览器自动化的操作代码代码selenium处理iframe：代码selenium模拟登陆QQ空间代码无头浏览器和规避检测代码 selenium模块 selenium基本概念 selenium优势 便捷的获取网站中动态加载的数据 便捷实现模拟登陆 selenium使用流程： 1.环境安装：pip install selenium 2.下载一个浏览器的驱动程序（谷歌浏览器） 3.实例化一个浏览器对象 基本使用 代码 from seleniu
Python+Selenium基础篇之6-WebDriver API基础
肥叔菌的博客
12-28 2008
from selenium import webdriver是官方推荐的import方式，然后你可以通过webdriver.Firefox、webdriver.FirefoxProfile、webdriver.Chrome、webdriver.ChromeOptions、webdriver.Ie、webdriver.Opera、webdriver.PhantomJS、webdriver.Remote、webdriver.DesiredCapabilities、webdriver.ActionChains、.
用Python编写UI自动化用例第一步from selenium import webdriver，即导入第三方驱动包时报错，高效解决办法，报错问题已解决
qq_41845402的博客
09-03 2334
Web自动化，浏览器初始化时，报错无selenium模块之解决办法
Selenium自动化测试(公版)-compressed1
08-04
"该资源是关于Selenium自动化测试的教程，涵盖了Selenium的安装、页面导航、元素定位、PhantomJS的使用以及实战项目等。它详细介绍了如何启动和操作浏览器，进行页面导航，以及利用Selenium进行元素定位，包括ID、...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

ZoomToday

给作者倒一杯卡布奇诺

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值