python爬虫入门之selenium的学习

selenium是什么?

Selenium 是一个用于Web应用程序测试的工具。Selenium测试直接运行在浏览器中,持的浏览器包括IE（7, 8, 9, 10, 11），Mozilla Firefox，Safari，Google Chrome，Opera等。这个工具的主要功能包括：测试与浏览器的兼容性——测试你的应用程序看是否能够很好得工作在不同浏览器和操作系统之上。测试系统功能——创建回归测试检验软件功能和用户需求。支持自动录制动作和自动生成 .Net、Java、Perl,Python等不同语言的测试脚本。

推荐一篇博客:http://www.cnblogs.com/zhaof/p/6953241.html
------------------python爬虫从入门到放弃（八）之 Selenium库的使用

今日任务

今天主要任务是用selenium模拟163邮箱自动登录
首先,对于爬虫,我们一直以来的思路都是先打开HTML页面,然后用xpath 正则 bs等进行数据清洗和提取找到我们想要的信息
selenium也不例外
过程:
第一步:从selenium包里导入webdriver,顾名思义,就是控制web的
第二步:申请打开一个浏览器,注意,在这之前,一定要把你所申请浏览器的插件放到你浏览器所在文件夹下,不然会报错.
第三步:查找元素

方法(最常用的是xpath,然后是id和name以及css选择器):

• find_element_by_name
• find_element_by_id
• find_element_by_xpath
• find_element_by_tag_name
• find_element_by_css_selector
• find_element_by_class_name
• find_element_by_link_text
• find_element_by_partial_link_text

当然,通过(from selenium.webdriver.common.by import By导入By
通过By.xx也可以查找元素

通过我们分析,用户输入的账号和密码都在iframe框架内,所以我们需要切换到iframe框架的登录框,通过 .switch_to.frame(index),这里使用index原因是iframe无法通过id和name.
其中用户账号登录所在的name叫email.而密码所在的name叫password,所以通过find_element_by_tag_name输入我们的用户名和密码

第四步:点击登录并且关闭浏览器

---

代码实现: