python模拟浏览器打开百度首页并登录或者点击首页新闻并保存网页

首先不知道怎么模拟打开浏览器的童鞋先看我的上篇文章：http://blog.csdn.net/Trisyp/article/details/78688106
这篇文章涉及到前期配置，所以不会的一定要先查看下，配置完了之后再进一步学习本篇文章

这篇文章主要功能是模拟登录百度账号；或者点击首页新闻，同时保存和打印网页源码
过程就不多说，我尽量都加上了备注，直接附上代码：

模拟登陆完整代码如下：

from selenium import webdriver
import os
import time


#构造模拟浏览器
chromedriver = "C:/Program Files (x86)/Google/Chrome/Application/chromedriver"
os.environ["webdriver.chrome.driver"] = chromedriver
driver = webdriver.Chrome(chromedriver) #模拟打开浏览器
time.sleep(2)
url = "https://www.baidu.com/"
driver.get(url) #打开网址
# driver.maximize_window() #窗口最大化

#模拟登陆
time.sleep(2)
#driver.find_element_by_name('tj_login').click() #这样写报错：元素不可见，所以用万能的Xpath
driver.find_element_by_xpath('//*[@id="u1"]/a[7]').click() #点击登录按钮
time.sleep(2)
driver.find_element_by_name('userName').clear() #先清除输入框内容
driver.find_element_by_name('userName').send_keys(u'000000') #输入账号
time.sleep(1)
driver.find_element_by_name('password').clear()
driver.find_element_by_name('password').send_keys(u'000000') #输入密码
#因为需要验证码，所以输完账号密码之后就自己手动输入验证码（能力有限，目前还只能手动解决）

新闻点击完整代码如下：

from selenium import webdriver
import os
import time


#构造模拟浏览器
chromedriver = "C:/Program Files (x86)/Google/Chrome/Application/chromedriver"
os.environ["webdriver.chrome.driver"] = chromedriver
driver = webdriver.Chrome(chromedriver) #模拟打开浏览器
time.sleep(2)
url = "https://www.baidu.com/"
driver.get(url) #打开网址
# driver.maximize_window() #窗口最大化

#模拟登陆
time.sleep(2)
driver.find_element_by_xpath('//*[@id="u1"]/a[1]').click()
time.sleep(2)
html = driver.page_source
print(html)

#至于Xpath的获取大家应该都知道，这里也把方法贴一下（以首页新闻为例）：进入百度首页之后，右键点击新闻选择检查就进入到开发者模式，同时就定位到了新闻对应的页面元素（即elements），右键该页面元素选择copy就可以看到有几个选项，选择其中的copy Xpath就行了，然后复制到你的代码中。