[Anaconda2]Selenium+PhantomJS环境搭建

最近在学习python的js解析,发现使用Selenium+PhantomJS的方案还是比较适合我的,以下是环境配置教程。

Selenium及PhantomJS介绍:

Selenium是一个用于Web应用程序测试的工具,Selenium测试直接运行在浏览器中,就像真正的用户在操作一样。支持的浏览器包括IE、Mozilla Firefox、Chrome等。
Phantom JS是一个服务器端的 JavaScript API 的 WebKit。其支持各种Web标准: DOM 处理, CSS 选择器, JSON, Canvas, 和 SVG。

安装环境:

Windows 7 (64位)
Anaconda2(python 2.7.11)
配置过程:
1. 使用pip安装Selenium
命令: pip install -U selenium,会发现Selenium目录已下载到Anaconda的目录下。
2. 安装PhantomJS
到PhantomJS的官方网站上下载,然后将phantomjs/lib目录下的phantomjs.exe文件放到python的安装目录,即:Anaconda2目录下。
如果想使用Chrome来实现解析的,请下载GG浏览器的相应驱动(同时需要安装chrome浏览器),如上图中的第一个程序,第二个程序就是PhantomJS了。

如果想使用Firefox来实现解析,则需要安装Selenium提供的firefox插件,位于python安装目录Lib\site-packages\selenium\webdriver\firefox\webdriver.xpi,请拖入到firefox浏览器中,然后重启浏览器即可。

测试

from selenium import webdriver

driver = webdriver.PhantomJS()
driver.get("http://news.sina.com.cn/c/2013-07-11/175827642839.shtml")
print driver.title#获取标题
print driver.find_element_by_id("media_comment").text#获取评论数,是动态加载的
print driver.
print driver.page_source#获取js执行后的源码

driver.quit()
  • 3
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值