前言
在做Python爬虫的时候使用火狐浏览器的时候每次爬取都会弹出一个浏览器
有没有一种更好的办法呢?
搜索发现有一个无界面浏览器,叫做PhantomJS。安装的过程中遇到一些问题,这里记录一下。
安装的时候是直接去官网下载最新版安装的,但是安装部署好以后一直报错,于是自己编译,发现太慢。于是改换之前的版本,把PhantomJS2.1.3降为2.1.1还是按2.1.3的步骤配置,一次成功。
下载地址:
http://phantomjs.org/download.html
下面是安装的具体过程
第一步:程序添加可执行权限
chmod u+x phantomjs
第二步:添加环境变量
vim /etc/profile
## 把程序所在的路径添加进来
第三步:测试是否正常运行
但是配置好以后一直启动不了,报错信息如下:
[root@cm02 brower]# ./phantomjs
./phantomjs: error while loading shared libraries:
libssl.so.1.0.0: cannot open shared object file:
No such file or directory
解决办法
网上找相关的解决方法,很少。搜出来的解决方法都不行,
改换编译安装,
这部分PhantomJS官网是有教程的,想看英文原版的话可以看官网的
http://phantomjs.org/build.html
按官网的教程进行操作,git克隆源码搞了半个小时,编译了一个小时还没有一半,
有没有更好的办法呢?
解决办法
降低PhantomJS的版本
搜索发现PhantomJS2.1.3版本太新了现在是2018-02-07,2.1.3版本是1月份才发现的,果断放弃编译换到PhantomJS2.1.1,官网给的下载地址是PhantomJS最新版本的,老版本的在这里
https://bitbucket.org/ariya/phantomjs/downloads/
解压后把bin目录下的phantomjs替换原来的2.1.3版本的
问题解决