selenium——爬取qq空间说说

最新推荐文章于 2023-08-07 16:13:04 发布
最新推荐文章于 2023-08-07 16:13:04 发布
阅读量934 收藏 9
点赞数 1
分类专栏： 爬虫
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43576422/article/details/108436143
版权
本文介绍了如何使用Selenium进行模拟登录并抓取QQ空间的说说内容。首先讲解了如何切换登录界面的iframe，然后定位账号、密码和登录按钮。登录成功后，通过CSS选择器抓取说说的正文、时间信息，并提供了CSS选择器的用法简介。最后，给出了完整的代码实现。
摘要由CSDN通过智能技术生成

采用可见即可爬的方法

  1. 模拟登录
  2. 抓取说说内容

自己的个人说说网址：
https://user.qzone.qq.com/你的qq号/311

一、打开登录界面

切换iframe

1.由于登录按钮是在iframe上，所以第一步需要把定位器切换到iframe上

2.用switch_to_frame方法切换，此处有id属性，可以直接用id定位切换

<iframe id="login_frame" name="login_frame" height="100%" scrolling="no" width="100%"

iframe是HTML标签，iframe 元素会创建包含另外一个文档的内联框架（即行内框架）。

在这里插入图片描述

定位输入框

分别为账户，密码，登录按钮：

<div class="login_form"><form id="loginform" autocomplete="off" name="loginform" action="" method="post" target="0" style="margin:0px;"><div class="uinArea" id="uinArea"><label class="input_tips_focus" id="uin_tips" for="u" data-onlyqq="QQ号码" style="display: none;">支持QQ号/邮箱/手机号登录</label><div class="inputOuter"><input type="text" class="inputstyle" id="u" name="u" value="" tabindex="1"> <a class="uin_del" id="uin_del" href="javascript:void(0);" style=
最低0.47元/天 解锁文章
weixin_43576422
关注
  • 1
    点赞
  • 踩
  • 9
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
爬虫——爬取QQ空间
都市的背包客____博客
05-10 1673
import re from selenium import webdriver import time driver = webdriver.PhantomJS(executable_path="E:\\spider\\phantomjs-2.1.1-windows\\bin\\phantomjs.exe") # 响应Windows全屏 driver.maximize_window() u...
python selenium爬取QQ空间说说
Reserve_Scale的博客
05-13 887
准备工作 安装selenium, pyquery, json模块。 使用的是火狐浏览器，所以还要安装geckodriver, 下载好后，把geckodirver.exe文件放在python.exe同一文件夹下即可。 如果使用chrome浏览器，需要安装chromedriver,需要对应好版本号，否则运行不起来。把下载后的chromedriver.exe放在python的Scripts文件夹下即可。...
selenium爬取QQ空间
bull521的博客
12-12 1163
这几天在看《从零开始学python网络爬虫》中的模拟浏览器篇，对其中的爬取好友说说比较感兴趣，不过书中只是爬取每个好友第一页说说，因此我稍微改进了下（发书名是尊重作者，不过个人认为这本书讲得比较浅，不求甚解）。 先大致说一下我遇到的坑。首先，如果想要看别人的说说，是必须要登录的（使用cookie应该也可以）；然后，可能没有权限访问好友空间；最后则是获取下一页链接并点击前还要注意可能没有下一页了。...
Selenium+Xpath爬取QQ空间好友说说
weixin_45600501的博客
08-10 756
TOC Selenium+Xpath爬取QQ空间好友说说 由于对于爬虫技术的好奇，自己买了一本北大出版社刘延安林的《python网络爬虫开发从入门到精通》，逐渐学习了request、selenium、Xpath、等等很好用的爬虫库。 书中有一个很有趣的利用Selenium+Xpath来爬取简书的例子，我看到之后发现简书的界面实际上很类似于QQ空间的界面，于是开始尝试能否在QQ空间爬取到好友说说 需要的库 这个小爬虫需要用到selenium、time、lxml、xlwt等库，各个模块的安装方法都可以在网络上搜
python使用selenium获取登陆后的界面源码_Python爬虫入门实战七：使用Selenium--以抓取QQ空间好友说说为例...
weixin_39613692的博客
11-24 340
前面我们接触到的，都是使用requests+BeautifulSoup组合对静态网页进行请求和数据解析，若是JS生成的内容，也介绍了通过寻找API借口来获取数据。但是有的时候，网页数据由JS生成，API借口又死活找不着或者是API借口地址随机变换，时间不等人。那就只能使用Selenium了。一、Selenium简介Selenium是一个用于Web应用的功能自动化测试工具，Selenium 直接运行...
python3 使用selenium爬取QQ空间说说信息
SJrong的博客
01-09 1599
使用PhantomJS，事先需要下载PhantomJS from selenium import webdriver import time #使用selenium driver = webdriver.PhantomJS(executable_path="D:\\phantomjs.exe") driver.maximize_window() #登录QQ空间 def get_shuosh
Python爬取qq空间说说的实例代码
09-20
### Python爬取QQ空间说说的实例代码解析 #### 一、引言 随着网络技术的发展，社交平台上的数据越来越受到人们的关注。QQ空间作为中国最大的社交平台之一，其内部蕴含着大量的用户行为数据和社会关系数据。对于...
Python selenium爬取微信公众号文章代码详解
09-16
主要介绍了Python selenium爬取微信公众号历史文章代码详解,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
通过python的selenium框架爬取考试宝典题目
03-30
本篇将详细介绍如何利用Python的Selenium框架来爬取“考试宝典”网站上的题目。 首先，我们需要了解Selenium的基本原理。Selenium是一个自动化测试工具，但同时也常被用于网页爬虫，因为它可以模拟用户的真实行为，...
selenium+webdriver爬取百度百科词条
11-14
读取excel中关键字，利用webdriver对关键词进行搜索，将搜索到的百度百科词条保存到excel中。
Python selenium 获取QQ群信息.py
05-27
Python selenium 获取 QQ 群信息,包含QQ号码，群号，群名称，群人数，群规格，并保存为本地 Excel 文件
selenium爬取qq空间，requests爬取雪球网数据
weixin_30908103的博客
03-22 269
一、爬取qq空间好友动态数据 # 爬取qq空间好友状态信息(说说，好友名称)，并屏蔽广告 from selenium import webdriver from time import sleep from lxml import etree # 自动操作浏览器 bro = webdriver.Chrome(executable_path=r'D:\爬虫+数据分析\tools\...
爬取自己的qq空间说说内容
qq_41818008的博客
02-08 860
#导入包 import requests import re import sys #设置代理浏览器和cookies non_bmp_map = dict.fromkeys(range(0x10000, sys.maxunicode + 1), 0xfffd) hds={'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:72.0...
python的selenium使用方法，爬取QQ空间
顾清风.的博客
12-27 1402
selenium 是一个web的自动化测试工具，不少学习功能自动化的朋友开始首选selenium ，相因为它相比QTP有诸多有点： 免费，也不用再为破解QTP而大伤脑筋 小巧，对于不同的语言它只是一个包而已，而QTP需要下载安装1个多G 的程序。 这也是最重要的一点，不管你以前更熟悉C、 java、ruby、python、或都是C# ，你都可以通过selenium完成自动化测试，而QT...
selenium进行QQ空间登录
匹夫之怒
02-17 622
python爬虫selenium基础操作登录QQ空间
2023最新详细：使用selenium携带cookie登录QQ空间，爬取指定好友空间说说照片
qq_63385279的博客
08-07 5552
最近学了爬虫，正好爬取一下指定好友的所有空间说说照片，之前使用selenium账号密码登录，模拟登录次数过多，会加验证码，甚至导致QQ冻结，所以采用cookie登录。
爬虫 案例 图片懒加载 qq空间模拟登录 药监（selenium)
weixin_30673715的博客
08-07 126
图片懒加载 图片懒加载概念： 图片懒加载是一种网页优化技术。图片作为一种网络资源，在被请求时也与普通静态资源一样，将占用网络资源，而一次性将整个页面的所有图片加载完，将大大增加页面的首屏加载时间。为了解决这种问题，通过前后端配合，使图片仅在浏览器当前视窗内出现时才加载该图片，达到减少首屏图片请求数的技术就被称为“图片懒加载”。 网站一般如何实现图片懒...
python网络爬虫（第七章：selenium实战：模拟登录QQ空间）
qq_38633279的博客
08-10 185
1.模拟登录QQ空间 from selenium import webdriver from time import sleep from selenium.webdriver import ActionChains #获取服务器对象 driver = webdriver.Chrome('./chromedriver.exe') #发送url请求 driver.get('https://qzone.qq.com/') #定位变迁 driver.switch_to.frame('login_frame
python爬取qq空间说说
最新发布
12-25
根据提供的引用内容，以下是使用Python爬取QQ空间说说的一种方法： ```python from selenium import webdriver import time # 设置Chrome浏览器的驱动路径 driver_path = "path/to/chromedriver" # 创建一个Chrome浏览器实例 driver = webdriver.Chrome(executable_path=driver_path) # 打开QQ空间登录页面 driver.get("https://qzone.qq.com/") # 登录QQ空间 # 这里需要手动输入账号和密码进行登录 # 进入自己的QQ空间主页 driver.get("https://user.qzone.qq.com/你的QQ号码") # 模拟滚动到页面底部，加载更多说说 for i in range(3): driver.execute_script("window.scrollTo(0, document.body.scrollHeight);") time.sleep(2) # 获取所有说说的元素 shuoshuo_elements = driver.find_elements_by_xpath("//div[@class='feed']/div[@class='f-info']") # 遍历说说元素，获取说说内容 for element in shuoshuo_elements: shuoshuo_content = element.text print(shuoshuo_content) # 关闭浏览器 driver.quit() ``` 请注意，上述代码使用了Selenium库来模拟浏览器操作，需要安装相应的驱动程序（如ChromeDriver）并设置驱动路径。另外，登录QQ空间需要手动输入账号和密码，代码中没有包含自动登录的部分。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值