使用Python的自动化工具Selenium爬取京东商品评论

课程作业要求，遂学习了python的自动化selenium工具，并爬取京东商品评论数据练练手。

目录：

一、环境

二、第三方库

三、分析

1.1 chrome驱动

1.2 定位评论元素

1.3 循环爬取评论数据并保存为CVS文件导出

其中xpath对应网页元素

         评论：

         用户名：

四、代码

五、结果

---

 

---

一、环境

我使用的是windows+python3.6+pycharm，大家自己去下载对应的环境。

二、第三方库

from selenium import webdriver
from time import sleep
import csv

三、分析

1.1 chrome驱动

browser = webdriver.Chrome()#需要使用chrome的调用驱动chormedrive导入script目录

调用浏览器需要下载对应的chrome驱动到项目工程目录

我的目录是C:\Users\Administrator\PycharmProjects\python\venv\Scripts

需要注意的是chrome浏览器的版本号需要与对应驱动版本号对应，不然会报错。