利用Selenium爬取淘宝商品信息

文章来源：公众号-智能化IT系统。

一.  Selenium和PhantomJS介绍

Selenium是一个用于Web应用程序测试的工具，Selenium直接运行在浏览器中，就像真正的用户在操作一样。由于这个性质，Selenium也是一个强大的网络数据采集工具，其可以让浏览器自动加载页面，这样，使用了异步加载技术的网页，也可获取其需要的数据。

 

Selenium模块是Python的第三方库，可以通过pip进行安装：

pip3 install selenium

 

Selenium自己不带浏览器，需要配合第三方浏览器来使用。通过help命令查看Selenium的Webdriver功能，查看Webdriver支持的浏览器：

from selenium import webdriver help(webdriver)

查看执行后的结果，如下图所示：