Linux使用selenium

安装Python

wget https://www.python.org/ftp/python/3.6.2/Python-3.6.2.tar.xz 下载安装包
yum -y install zlib-devel bzip2-devel openssl-devel ncurses-devel sqlite-devel readline-devel tk-devel gdbm-devel db4-devel libpcap-devel xz-devel gcc   安装依赖包 
tar -Jxvf Python-3.6.2.tar.xz  解压tar包
cd Python-3.6.1 切换到Python路径下
./configure prefix=/usr/local/python3 进行安装配置
make && make install 编译和编译安装
ln -s /usr/local/python3/bin/python3  /usr/bin/python3 对python3 进行一个软连接
ln -s  /usr/local/python3/bin/pip3  /usr/bin/pip3 对pip3 命令进行一个软连接
pip3 install --upgrade pip
pip3 install sqlalchemy  配置完成，顺带测试
pip3 install pymysql

安装selenium模块

命令：

pip3 install selenium

安装chrome命令：

yum install https://dl.google.com/linux/direct/google-chrome-stable_current_x86_64.rpm

这个命令是下载安装最新的稳定的chrome版本，不是固定的版本，所以要注意下载chromedriver时要对应版本

查看版本

google-chrome --version

我是在本地win10系统又下了一遍，解压可以看到chrome版本是86

注：如果运行程序出错：Cannot find Chrome binary，就是没有安装chrome

安装依赖库

命令：

yum install pango.x86_64 libXcomposite.x86_64 libXcursor.x86_64 libXdamage.x86_64 libXext.x86_64 libXi.x86_64 libXtst.x86_64 cups-libs.x86_64 libXScrnSaver.x86_64 libXrandr.x86_64 GConf2.x86_64 alsa-lib.x86_64 atk.x86_64 gtk3.x86_64 -y

注：如果没有安装依赖库会报错：error while loading shared libraries: libX11.so.6:

安装chromedriver（驱动程序）

下载链接如下：点我下载，一定要找到与上面chrome版本相应的版本，这里下载和上面对应的86版本

可以windows下载后然后传到服务器上，也可以直接使用wget命令下载

命令：

wget http://chromedriver.storage.googleapis.com/index.html?path=86.0.4240.22/

然后给chromedriver 文件赋予可执行权限

命令：

chmod 777 chromedriver

然后放到环境变量PATH路径中

命令：

cp chromedriver /usr/bin/

可以查看chromedriver的版本号

命令：

chromedriver --version

selenium代码测试

在服务器上新建一个python文件，写入以下代码

#!/usr/bin/python3
#coding:utf-8
from selenium import webdriver
ch_options = webdriver.ChromeOptions()
#为Chrome配置无头模式
ch_options.add_argument("--headless")  
ch_options.add_argument('--no-sandbox')
ch_options.add_argument('--disable-gpu')
ch_options.add_argument('--disable-dev-shm-usage')

# 在启动浏览器时加入配置

dr = webdriver.Chrome(options=ch_options)
#这是测试网站
url = "https://www.baidu.com"
dr.get(url)
#打印源码
print(dr.page_source)

然后python执行这个py文件，结果打印出了源码，即selenium模块环境配置成功。