Python爬虫学习笔记(selenium库、隐性浏览器PhantomJs)

• selenium库的使用：有利于解决JS渲染的问题，Splash库、PyV8库、Ghost.py库亦有同样效果

1. 安装：pip install -U selenium
2. 安装Chromedriver调用Chrome浏览器，下载与电脑安装的Chrome版本对应的 Chromedriver放入python根目录下的Script文件夹下
3. 引用：CMD->python

from selenium import webdriver #引入库,模拟浏览器加载网页

  driver = webdriver.Chrome() #启动Chrome浏览器

  driver.get(‘https://www.baidu.com’) #打开百度首页

  driver.page_source #获取网页源码

*使用后台运行的隐性浏览器PhantomJs：

1. 下载安装phantomJS参考：https://blog.csdn.net/qq_37245397/article/details/81543450

使用：CMD->python

from selenium import webdriver

driver = webdriver.PhantomJS() #启动phantomJS

driver.get(‘https://www.baidu.com’)  #后台phantomJS打开百度首页

driver.page_source  #获取百度首页源码