python爬取微信聊天记录怎么查_Python selenium爬取微信公众号文章代码详解

需求：

想阅读微信公众号历史文章，但是每次找回看得地方不方便。

思路：

1、使用selenium打开微信公众号历史文章，并滚动刷新到最底部，获取到所有历史文章urls。

2、对urls进行遍历访问，并进行下载到本地。

实现

1、打开微信客户端，点击某个微信公众号->进入公众号->打开历史文章链接(使用浏览器打开)，并通过开发者工具获取到cookies，保存为excel。

2、启动webdriver，并添加相应cookies。

?

3、控制浏览器下移动

观察page_source，可以发现，文章到最底部的判断是。

?

使用driver控制JS。

?

4、关键信息获取。

根据html,分析得出文章url处在

中。

?

文章类型主要分为，

有无原创进行划分。

最终实现：

?

5、将得到url保存到excel

dfout = pd.DataFrame(result, columns=['日期', '标题', '原创', '地址'])

with pd.ExcelWriter(savename) as writ