Python 爬取朋友圈最新方法!!(文末赠书)

点击上方“Python爬虫与数据挖掘”,进行关注

回复“书籍”即可获赠Python从入门到进阶共10本电子书

为学应须毕生力,攀高贵在少年时。

在几年前,互联网上曾经出现过一款生成朋友圈相册的产品。但是它的流程说起来很不互联网:

  • 首先,需要添加指定的微信号,并且给这个微信号查看自己朋友圈的权限;

  • 然后,等待几个小时;

  • 最后,得到一个链接,里面用相册模板显示了自己的朋友圈内容;

最开始听起来觉得很牛逼,心想这款产品是怎么拿到个人的朋友圈数据的,直到看到它的使用流程首先需要添加微信好友,瞬间就笑着明白了。

其实,朋友圈一直是很多人的爬虫想要采集的领地。

在之前,朋友圈只能在手机或Pad上查看,要想获取朋友圈的数据,要么手工进行人肉复制,要么通过钩子进行处理。

这两种操作一个太低端了,一个又太高端了。

有没有稍微简单一点的呢?用 Appnium 或许是一个方法,操作起来比钩子简单多了,但是,Appnium 的环境配置,就会吓跑很多朋友了。

所以,Appnium 还是门槛稍高。

直到最近,微信电脑版开始支持朋友圈,事情似乎出现了转机!

通过 PyWinAuto 和 PyAutoGui 这两个工具,实现对桌面程序的自动化控制和数据采集

这两个工具,是否可以应用在微信朋友圈数据的采集上呢?

州的先生,立马写了个 Demo 来测试。

首先,引入所需的库:

import psutil
import pywinauto
from pywinauto.application import Application

其中:

  • psutil 用于获取微信电脑版的进程信息;

  • pywinauto 用于自动化控制微信电脑版

然后,我们通过 psutil 库获取到微信电脑版程序的进程ID:

PID = 0
for proc in psutil.process_iter():
    try:
        pinfo = proc.as_dict(attrs=['pid', 'name'])
    except psutil.NoSuchProcess:
        pass
    else:
        if 'WeChat.exe' == pinfo['name']:
            PID = pinfo['pid']

这个进程ID用来提供给 PyWinAuto 以连接微信电脑版。

然后,用 PyWinAuto 实例化一个应用:

app = Application(backend='uia').connect(process=PID)

接着控制微信电脑版,把朋友圈窗口打开:

win = app['微信']
pyq_btn = win.child_window(title="朋友圈", control_type="Button")
cords = pyq_btn.rectangle()
pywinauto.mouse.click(button='left', coords=(cords.left + 10, cords.top + 10))

以上代码,就实现了 Python 代码控制微信电脑版打开朋友圈窗口。

效果如下所示:

朋友圈的窗口是打开了,如果获取里面的数据呢?

我们先用 .dump_tree() 方法看看朋友圈窗口里面各个控件的结构是怎样的:

print(pyq_win.dump_tree())

这会把朋友圈窗口内所有显示出来的组件的结构打印到控制台,其显示的内容如下图所示:

我们来看一个具体的例子,例如朋友圈内的这条信息:

它在 dump_tree() 中的结构如下所示:

可以看到,窗口内的每一个信息,比如联系人的名称朋友圈内容朋友圈发布时间等等都是各种组件构成的。

我们可以通过获取和控制这些个组件,来实现数据的提取。

比如在这个例子里,我们就可以通过定位到 Edit 这个组件来获取到这条朋友圈的内容:

跟其他的工具比起来,是不是算是异常简单了?

不仅简单,效果还很不错。

感兴趣的朋友们,赶紧试试吧!

------------------ 送书 -------------------

本周赠书:《吃透Ansible:核心源码剖析与项目实战

作者在Ansible领域深耕多年,有丰富的Ansible使用经验,并对其原理有深入的理解。本书不仅深入剖析Ansible的源码,而且对其底层通信和整体框架做了深入解析,讲解既有广度也有深度。本书语言简练,内容通俗易懂,是学习和研究Ansible的不二之选。书中对Ansible源码的关键部分做了详细讲解,并对不同版本的Ansible源码做了比对分析,而且还结合实际项目进行深度优化,让读者能更好地理解和使用Ansible。本书是一本用心之作,很适合Python初中级软件工程师和运维工程师阅读

内容简介

1、如正文所介绍的那样。

活动规则

参与方式:在下方公众号后台回复 “送书”关键字,记得是“送书”二字哈,即可参与本次的送书活动。

公布时间:2021年8月11号(周三)晚上20点

领取事宜:请小伙伴添加小助手微信: WebFighting,或者扫码添加好友。添加小助手的每一个人都可以领取一份Python学习资料,更重要的是方便联系。

注意事项:一定要留意微信消息,如果你是幸运儿就尽快在小程序中填写收货地址、书籍信息。一天之内没有填写收货信息,送书名额就转给其他人了噢,欢迎参加!

------------------- End -------------------

往期精彩文章推荐:

欢迎大家点赞,留言,转发,转载,感谢大家的相伴与支持

想加入Python学习群请在后台回复【入群

万水千山总是情,点个【在看】行不行

/今日留言主题/

随便说一两句吧~~

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值