爬虫之selenium

一、selenium

介绍:

• 1.selenium是一个web自动化测试用的框架. 程序员可以通过代码实现对浏览器的控制, 比如打开网页, 点击网页中的元素, 实现鼠标滚动等操作.
• 2.selenium ，因为它相比 QTP 有诸多优点：

• 免费，也不用再为破解 QTP 而大伤脑筋
• 小巧，对于不同的语言它只是一个包而已，而 QTP 需要下载安装1个多 G 的程序。
• 这也是最重要的一点，不管你以前更熟悉 C、 java、ruby、python、或都是 C# ，你都可以通过 selenium 完成自动化测试，而 QTP 只支持 VBS
• 支持多平台：windows、linux、MAC ，支持多浏览器：ie、ff、safari、opera、chrome
• 支持分布式测试用例的执行，可以把测试用例分布到不同的测试机器的执行，相当于分发机的功能。

二、selenium+Python环境配置

前提条件：已安装好Python开发环境（推荐安装Python3.5及以上版本）

安装步骤：

• 安装selenium

Win： pip install selenium
Mac: pip3 install selenium

• 安装webdriver

各大浏览器webdriver地址可参见： https://docs.seleniumhq.org/download/
Firefox： https://github.com/mozilla/geckodriver/releases/
Chrome： https://sites.google.com/a/chromium.org/chromedriver/ 或者
http://chromedriver.storage.googleapis.com/index.html
IE： http://selenium-release.storage.googleapis.com/index.html

注：webdriver需要和对应的浏览器版本以及selenium版本对应

Webdriver版本	支持的Chrome版本
v2.41	v67-69
v2.40	v66-68
v2.39	v66-68
v2.38	v65-67
v2.37	v64-66
v2.36	v63-65
v2.35	v62-64
v2.34	v61-63
v2.33	v60-62

• webdriver安装路径

Win： 复制webdriver到Python安装目录下
Mac： 复制webdriver到/usr/local/bin目录下

测试：

启动Chrome浏览器：

from selenium import webdriver

browser = webdriver.Chrome()
browser.get(