使用selenium自动化工具爬取textarea标签属性display:none

最新推荐文章于 2024-04-28 02:16:20 发布
最新推荐文章于 2024-04-28 02:16:20 发布
阅读量2.2k 收藏 2
点赞数
文章标签： selenium textarea display
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zp1156/article/details/82714742
版权

使用selenium自动化功能，在获取html后添加下列代码：

js = 'document.getElementById("catalog-textarea").style.display="block";'
driver.execute_script(js)

使display:none的标签显示

这里写图片描述

下面代码既是html中显示textarea改动部分

<textarea style="display:block" id="catalog-textarea">...</textarea>

接下来你就可以获取这个标签里的信息了

现在学习亦不晚
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Selenium获取textarea
qq3245505的博客
09-01 1864
如果我想在一个textarea里面输入两行文字，那程序该如何实现呢？现在我用的方法是： browser.type("name=notes", "abc"); browser.setCursorPosition("name=notes", "-1"); browser.keyDownNative(String.valueOf(KeyEvent.VK_ENTER)); browser.keyU...
selenium：解决页面元素display:none的方法
weixin_34362875的博客
04-26 2872
在UI自动化测试中，有时候会遇到页面元素无法定位的问题，包括xpath等方法都无法定位，是因为前端元素被设置为不可见导致。 这篇博客，介绍下如何通过JavaScript修改页面元素属性来定位的方法。。。   1、具体问题 常见的页面元素不可见导致的不可定位，都是由于下面的问题： 通过查看相关文档，可以看出display:none方法是设置元素不可见，这就是导致为什么通过定位页面元素无...
再也不用手写爬虫了！推荐5款自动爬取数据的神器！_自动爬取工具
最新发布
m0_54926105的博客
04-28 1300
以上就是今天为大家带来的五款自动提取数据的工具，如果对于偶尔一次的爬虫，或者很低频率的爬取需求，完全没有必要去学习爬虫的技术，因为学习成本很高。好比如果你只是想P几张图，直接用美图秀秀了，不需要学Photoshop。如果是对爬虫有很多定制的需求，需要对收集的数据进行分析和深度挖掘，而且是高频的，或者你想通过爬虫把Python技术运用的更深入，学习的更扎实，这个时候才考虑学爬虫。好了，以上几个工具都是不错的，有兴趣的同学可以试试【读者福利】如果你对Python感兴趣，学好 Python 不论是。
selenium 遇见 display：none元素解决方法
weixin_44388373的博客
05-21 2291
selenium 遇见 display：none元素解决方法 有次在爬深圳房地产信息网信息,但是在爬备案号的时候卡到了,备案名爬不下来,只有用鼠标放在信息上面才会出现 后来检查了一下发现display:none,这是一个css设置,可以让模块不显示 经过一翻查询发现可以用selenium执行js代码来修改css # 一页20个数据 for x in range(20): # 根据类来定位元素,必须加序号不然报错 js = "document.getElementsByClassName('
python 如果遇到爬取解析到得文本为 style="display: none" 没有找到相关内容该怎样解决 修改文本属性获取新的内容
hou9876543210的博客
05-01 7076
在有的爬取网页内容时候有时候遇到text得内容为空 如下图所示 这应该就是display:none的问题，遇到这样问题要改变css的style中的内容 这需要pyquery这个库 下面图是原始f12中的disply：block 显示内容 所以 爬取时候 内容一的到实际的内容为准 也就是requests.get(url = " ",headers = " ").text 不说太多上代码 下面有详...
python selenium解决textarea赋值空行问题
weixin_45012798的博客
12-06 742
python selenium 解决给textarea赋值空行问题 最近在用selenium给textarea传值时，想传多行的字符串，在网上搜了很多资料，最后偶然发现一个更简单的方法！！！ 网上方法 # selenium不报错 js = 'var textarea= document.getElementById("textarea_id"); textarea.value=arguments[0]' driver.execute_script(js,'123\t456\n789') 我的方法：转义字符
Selenium自动化测试工具使用方法汇总
09-16
Selenium 是一款强大的自动化测试工具，它允许开发者模拟用户行为，对Web应用程序进行自动化测试。在本文中，我们将深入探讨Selenium的一些核心功能和使用方法，帮助你更好地理解和运用这个工具。 1. **设置无头...
Selenium自动化测试：基于Python语言
04-15
资源包括Selenium自动化测试：基于Python语言的文档以及每章节的代码
Selenium（Web的自动化测试工具）
05-20
Selenium，作为一款强大的Web自动化测试工具，是软件测试领域不可或缺的一部分。它允许开发者编写脚本，模拟用户在浏览器中的各种交互行为，如点击、填写表单、导航等，从而实现对网页应用的功能验证和性能评估。...
java和selenium自动化爬取超简单实例入门参考
03-31
Java 和 Selenium 是两种在 IT 领域广泛应用的技术，它们结合使用可以实现高效、自动化的网页数据抓取。本文将详细介绍如何使用 Java 和 Selenium 进行自动化爬虫的入门实践，帮助初学者快速掌握这一技能。 ...
selenium自动化框架 爬取b站评论可视化（停用词精准分词）
03-31
在进行B站评论的爬取与可视化分析时，目标是从B站视频下的评论区提取数据，并通过数据可视化技术展现评论的特征和趋势。这一过程涉及到多个步骤，包括数据爬取、数据处理、分析与可视化展示，旨在挖掘和理解观众的...
selenium获取展开里的内容
weixin_42156283的博客
02-20 2593
用selenium控制页面时，可能需要获取展开内的内容 两种思路： 1.定位所有展开标签，然后遍历click 2.更改展开标签的display属性 第一种不推荐，会对后面的代码报一些莫名其妙的错误 第二种直接执行一段js代码即可： js = """ elements = document.getElementsByClassName('xxx'); for (var i=0; ...
当style=display:none时用xpath取text的内容时取不到
08-01 727
使用firefox的webdriver中的By.XPath，取a元素的text时，如果所属任何一个父元素的style=displaynone时，是得不到text内容的，但是可以正常定位，属性也都可以取到，如href。displaynone似乎只影响元素的text内容，其他一切都不影响。...
selenium webdriver + java 在进行元素定位时，元素不可见的问题（display:none）
qq_20774073的博客
07-06 5526
问题描述：在对浏览器页面元素进行定位时，有时无论用id,className还是xpath，                都报错：Element is not currently visible and so may not be interacted with                此时，打印该元素的isDisplayed()，如：                System.out.p...
从零实现一个高性能网络爬虫（二）应对反爬虫之前端数据混淆
vwycm的博客
08-19 2012
摘要 上一篇以知乎网为例简单分享网络请求分析。这一篇主要分享一种应对反爬虫的方法，前端数据混淆。 目的 之前写https://github.com/wycm/zhihu-crawler项目的时候，需要用到免费的http代理，然后找到了这个 http://www.goubanjia.com/ 这个网站。现在需要把这个网站上的ip和port爬取下来，有兴趣的朋友也可以尝试自己爬取一下。 开始 打开这个网
Python爬虫突破封禁的6种常见方法
u011250186的博客
12-18 3189
在互联网上进行自动数据采集（抓取）这件事和互联网存在的时间差不多一样长。今天大众好像更倾向于用“网络数据采集”，有时会把网络数据采集程序称为网络机器人（bots）。最常用的方法是写一个自动化程序向网络服务器请求数据（通常是用 HTML 表单或其他网页文件），然后对数据进行解析，提取需要的信息。 本文假定读者已经了解如何用代码来抓取一个远程的 URL，并具备表单如何提交及 JavaScript 在浏览器如何运行的机制。想更多了解网络数据采集基础知识，可以参考文后的资料。 在采集网站的时会遇..
Python爬虫：xpath，cookie都正确仍然无法爬取需要的内容解决方法之一
m0_71242960的博客
12-23 2222
经过很多次尝试以及仔细观察所爬取的html代码内容，我发现有一个标签里含有的css代码：style = display:none ，这行代码可以把这个标签里面的内容隐藏。展开这个标签里面的内容，很可能就是我们所需要的真实的页面a标签里面的url地址。注意，这里说了一般，有些网站的反爬措施很高级，甚至会封掉你的ip。看这篇文章的猿猿们肯定有了一定的python-xpath爬虫基础了，后面对li_tree的处理以及延伸获取所需要的页面内容我在这就不介绍啦！这样我们就得到了正确的li_tree。
selenium爬虫遇见 display：none元素解决方法
m0_51344172的博客
02-28 2217
python初级爬虫遇到的问题
爬虫攻守道 - 2023最新 - 正则表达式勇猛精进 - 爬取某天气网站历史数据
biaobro的博客
01-14 817
持续优化正则表达式的写法，和用法，进一步缩短文本处理时间。
selenium自动化测试笔记
08-20
今年学测试的时候记的自动化测试语法笔记，适合初学者学习和回顾

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值