这篇博客介绍如何使用Python结合selenium和BeautifulSoup爬取已登录QQ用户的QQ群成员名单。首先，通过selenium模拟浏览器登录，然后根据页面结构抓取数据，最后用pandas整理成表格并保存到本地。注意不同浏览器版本需要对应版本的selenium插件。
本次实验环境：
操作系统：Mac OS
开发语言：python 3.6
IDE：jupyter notebook（建议使用）
浏览器：Chrome（版本75.0.3770.100）
需要用到的库：selenium、bs4、time、datetime、pandas、os。
QQ群的主页为：https://qun.qq.com/member.html。如果想查阅群号为123456的主页，则在主页URL后面加上#gid=123456。即我们想爬取群号为123456的群成员，需要请求的URL为：https://qun.qq.com/member.html#gid=123456
如果正常登陆页面，第一步需要扫码登陆。如果在电脑端已经登陆过QQ的话，则可以通过选择相应的QQ用户进行登陆。登陆后，页面的架构可能会有两种：一种是无群成员积分等级的，如下所示：
另外，一种有群成员积分等级的：
最低0.47元/天 解锁文章
扫一扫
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
