用 Python 爬取 QQ 空间说说和相册

最新推荐文章于 2020-12-07 11:35:16 发布
最新推荐文章于 2020-12-07 11:35:16 发布
阅读量2k 收藏 21
点赞数 1
文章标签： selenium Python Python爬虫 网络爬虫 编程语言
本文链接：https://blog.csdn.net/weixin_46089319/article/details/108054207
版权
本文介绍了如何使用Python的selenium模块爬取QQ空间的说说和相册。首先讲解了selenium的安装及Chrome驱动的配置，接着详细描述了模拟登录过程，然后阐述了如何抓取滚动加载的说说内容和通过模拟点击下载相册图片，最后作者分享了回顾这些旧记录的感受。
摘要由CSDN通过智能技术生成

QQ 空间在 2005 年被腾讯开发，已经经历了 15 个年头，在还没有微信的年代，看网友发表的心情、心事、照片大多都在 QQ 空间的里。它承载了80、90 后的大量青春，下面我们一起用 selenium 模块导出说说和相册回忆青春吧

很多人学习python，不知道从何学起。
很多人学习python，掌握了基本语法过后，不知道在哪里寻找案例上手。
很多已经做案例的人，却不知道如何去学习更加高深的知识。
那么针对这三类人，我给大家提供一个好的学习平台，免费领取视频教程，电子书籍，以及课程的源代码！
QQ群：101677771

安装 selenium

selenium 是一个在浏览器中运行，以模拟用户操作浏览器的方式获取网页源码，使用 pip 安装 selenium 模块

pip install selenium

查看 chrome 浏览器版本并下载 对应的 chrome 浏览器驱动

在 http://npm.taobao.org/mirrors/chromedriver 网址中找到相同版本的 chrome 驱动，并放在 python 程序运行的同一个文件夹中

登陆

按 F12 检擦网页源代码，找到登录和密码的文本框，如下图所示

最低0.47元/天 解锁文章
Python新世界
关注
Python网络爬虫5 - 爬取QQ空间相册
weixin_34122548的博客
03-05 1万+
自毕业后，就再也没有用过QQ，QQ空间里记录的是些并不精彩的青葱岁月，但好歹也是份回忆，近日想着学以致用，用Python把QQ空间相册的所有照片爬取下来，以作备份。 分析QQ空间 登录QQ空间 爬取第一步，分析站点，首先需要知道如何登录QQ空间。最初想法是用requests库配置登录请求，模拟登录，但是不久便放弃了这一思路，请看下图↓ 根据登录按钮绑定的监听事件可以追踪到该按钮的点击事件如下： ...
用Python爬取QQ空间说说和相册！还不让我访问！
pythonlaodi的博客
01-06 2063
QQ 空间在 2005 年被腾讯开发，已经经历了 15 个年头，在还没有微信的年代，看网友发表的心情、心事、照片大多都在 QQ 空间的里。它承载了80、90 后的大量青春，下面我们一起用 selenium 模块导出说说和相册回忆青春吧 安装 selenium selenium 是一个在浏览器中运行，以模拟用户操作浏览器的方式获取网页源码，使用 pip 安装 selenium 模块 pip install selenium 复制代码 查看 chrome 浏览器版本并下载 对应的 chrome 浏览器驱动
用python爬取qq空间内容_Python爬取qq空间说说
weixin_39553705的博客
11-21 430
#coding:utf-8#!/usr/bin/python3from selenium importwebdriverimporttimeimportreimportimportlib2importsysimportlib2.reload(sys)defstartSpider():driver= webdriver.Chrome('/Users/zachary/zachary/chromedri...
python爬取好友QQ空间说说
11-13
用python写的爬虫，可以爬取好友QQ空间的说说，这只是本程序的一个功能，你还可以用这个模板去做别的事情，做什么就看你自己的想象力了，程序基本每句话都有注释，很好懂，也很好改
Python爬取qq空间说说
Zachary_46的博客
08-17 966
#coding:utf-8 #!/usr/bin/python3 from selenium import webdriver import time import re import importlib2 import sys importlib2.reload(sys) def startSpider(): driver = webdriver.Chrome('/Users/zac...
【python爬虫】爬取QQ空间说说
loxs
04-30 2968
前言 虽然扒qq空间不是很地道，但咱还是干干吧……正好也是闲来无事，我这个应该不会被别人发现 tao) 技术路线 selenium + beautifulsoup + pyautogui selenium模拟浏览器 beautifulsoup解析文本 pyautogui 负责下拉 需要注意的点 QQ空间在加载的时候，是一部分一部分加载的。也就是说当下拉到最底的时候，才可以在网页中刷新出来新的...
python使用动态代理ip多线程爬取QQ空间相册
12-23
本教程将深入探讨如何利用Python实现动态代理IP、多线程以及Selenium库来爬取QQ空间相册中的图片。首先，我们需要理解每个标签背后的含义。 1. **Python爬虫**：Python因其丰富的库支持，成为爬虫开发的首选语言。...
python爬取qq空间说说
weixin_34210740的博客
06-04 160
模块：selenium，pyquery，json，time 使用的是：Chrome 遇到的问题： 1. 模拟点击下一页操作，需要换方式。 2. 遇到元素在frame，需要进入查找。 对空间的登陆进行分析 进入网址：https://i.qq.com/ 说说地址：https://user.qzone.qq.com/{qq}/311 我模拟点击这个头像，也可以点击账号密码登陆，然后填充。 对头像点击右键...
python爬QQ空间说说K站图片
11-01
python源码 先登录自己的QQ空间 把代码中类似的传说说的JSON地址 拷贝到代码里运行就可以了， 代码是爬K站图片的，想爬说说就按照说明里面一步步就可。
python爬取别人qq空间相册_Python网络爬虫5 - 爬取QQ空间相册
weixin_39854070的博客
11-20 1618
自毕业后，就再也没有用过QQ，QQ空间里记录的是些并不精彩的青葱岁月，但好歹也是份回忆，近日想着学以致用，用Python把QQ空间相册的所有照片爬取下来，以作备份。分析QQ空间登录QQ空间爬取第一步，分析站点，首先需要知道如何登录QQ空间。最初想法是用requests库配置登录请求，模拟登录，但是不久便放弃了这一思路，请看下图↓根据登录按钮绑定的监听事件可以追踪到该按钮的点击事件如下：账号加密是必...
如何用python爬虫爬取qq空间说说_python爬虫爬取QQ说说并且生成词云图，回忆满满！...
weixin_39582656的博客
12-07 513
Python(发音：英[?pa?θ?n]，美[?pa?θɑ:n])，是一种面向对象、直译式电脑编程语言，也是一种功能强大的通用型语言，已经具有近二十年的发展历史，成熟且稳定。它包含了一组完善而且容易理解的标准库，能够轻松完成很多常见的任务。它的语法非常简捷和清晰，与其它大多数程序设计语言不一样，它使用缩进来定义语句。Python支持命令式程序设计、面向对象程序设计、函数式编程、面向切面编程、泛型编...
用python爬取QQ空间
weixin_30268921的博客
11-18 278
好久没写博文了，最近捣鼓了一下python，好像有点上瘾了，感觉python比js厉害好多，但是接触不久，只看了《[大家网]Python基础教程(第2版)[www.TopSage.com]》的前7章，好多东西还不会，能做的也比较少。我想做的是爬QQ空间，然后把空间里的留言，说说拷下来，已经成功做到了，只是，拷下来是word文档，看着没有在线看那么有感触，有些话，觉得不像自己会说的。 ...
python爬取qq空间照片
最新发布
09-01
可以使用Python中的第三方库来爬取QQ空间的照片，以下是一个简单的示例代码： ```python import requests import os def download_qzone_photos(qq_number): # 设置QQ空间相册的URL album_url = f'https://user.qzone.qq.com/proxy/domain/photo.qzone.qq.com/fcgi-bin/fcg_list_album_v3?' # 设置请求参数 params = { 'uin': qq_number, 'g_tk': 'xxxxxx', # 替换为你的g_tk值，可以通过登录QQ空间后获取 'format': 'json', 'callback': '_preloadCallback', 't': 'xxxxxxxxx', # 替换为你的t值，可以通过登录QQ空间后获取 'hostUin': qq_number, 'topicId': '', 'pageSize': '100', 'pageNum': '0', 'callback': 'shine0_Callback', 'platform': 'qzone', 'needUserInfo': '1', '_': 'xxxxxxxxx', # 替换为你的时间戳 } # 发送GET请求获取QQ空间相册列表 response = requests.get(album_url, params=params) data = response.text # 提取相册列表中的相册ID album_id_list = [] for line in data.splitlines(): if line.strip().startswith('"id"'): album_id = line.split(':')[1].strip(',"') album_id_list.append(album_id) # 遍历相册列表，下载每个相册中的照片 for album_id in album_id_list: # 设置相册照片列表的URL photo_list_url = f'https://h5.qzone.qq.com/proxy/domain/photo.qzone.qq.com/fcgi-bin/cgi_list_photo?' # 设置请求参数 params['topicId'] = album_id # 发送GET请求获取相册照片列表 response = requests.get(photo_list_url, params=params) data = response.text # 提取相册照片列表中的照片URL photo_url_list = [] for line in data.splitlines(): if line.strip().startswith('"url"'): photo_url = line.split(':')[1].strip(',"') photo_url_list.append(photo_url) # 创建保存照片的文件夹 album_folder = f'QQ空间相册{album_id}' if not os.path.exists(album_folder): os.makedirs(album_folder) # 遍历照片URL列表，下载每张照片 for i, photo_url in enumerate(photo_url_list): response = requests.get(photo_url) with open(os.path.join(album_folder, f'photo_{i}.jpg'), 'wb') as f: f.write(response.content) print(f'已下载照片：{os.path.join(album_folder, f"photo_{i}.jpg")}') ``` 以上代码是通过模拟请求获取QQ空间相册列表和相册照片列表，并将照片下载到本地。请注意，在使用此代码之前，你需要替换其中的参数，如`qq_number`、`g_tk`、`t`和`_`，以及确保你已经登录了QQ空间。 希望这个示例代码对你有帮助！
评论 4
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值