XPath里面几种定位不到数据的解决办法

最新推荐文章于 2024-02-26 20:23:02 发布
最新推荐文章于 2024-02-26 20:23:02 发布
阅读量1.1w 收藏 10
点赞数 7
分类专栏： Python数据分析
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_36449202/article/details/97388331
版权

1.缩短定位路径，利用属性定位，比序列定位好像好用一些；

2.tbody  标签是个坑，去掉它；

3.查看获取的HTML源码中有没有想要的数据，有的是获取不到的，；

4.学习一下正则表达式，配合使用；

倾城琉璃
关注
  • 7
    点赞
  • 踩
  • 10
    收藏
    觉得还不错? 一键收藏
  • 3
    评论
专栏目录
处理cnvd官方数据+爬虫(官方提供的数据不全).zip
01-19
数据存储： 爬虫将提取的数据存储到数据库、文件或其他存储介质中，以备后续分析或展示。常用的存储形式包括关系型数据库、NoSQL数据库、JSON文件等。 遵守规则： 为避免对网站造成过大负担或触发反爬虫机制，爬虫...
【转载】Xpath定位方法深入探讨及元素定位失败常见情况
weixin_30814329的博客
10-18 1380
一、Xpath定位方法深入探讨 （1）常用的Xpath定位方法及其特点 使用绝对路径定位元素。 例如： driver.findElement(By.xpath("/html/body/div/form/input"))。 特点：这个路径是从网页起始标签开始一直到要定位的元素的路径，如果要定位的元素在页面最下面，则这个Xpath路径会非常长。如果在要定位的元素与页面开始之间的元素...
Xpath定位不到元素的可能原因及解决方案
二十二画生的博客
01-05 3162
一般来说元素的id是比较稳定的，但是有些元素的id是不断刷新的。解决方案是通过修改Xpath路径来定位隐藏或不可见的元素，可以使用contains()函数、ancestor节点或preceding-sibling节点等来定位目标元素。：如果页面上有多个相同的元素，Xpath默认只会返回第一个匹配的元素。解决方案是使用索引来定位特定的元素，可以使用[1]、[2]等索引来定位第二个、第三个匹配的元素。：有些弹窗，会屏蔽其他元素操作，可以检查是否上层的弹框、下拉框之类的元素遮挡，优先处理弹窗的元素。
『python爬虫』xpath变化导致无法找到指定元素(持续更新中~)
MZH
02-26 784
『python爬虫』xpath变化导致无法找到指定元素
为什么有些xpath绝对路径拿不到数据_定位页面元素之xpath详解以及定位不到测试元素的常见问题...
weixin_39900286的博客
12-20 1173
一、定位元素的方法id：首选的识别属性，W3C标准推荐为页面每一个元素设置一个独一无二的ID属性，如果没有且很难找到唯一属性，解决方法：(1)找开发把id或者name加上。如果不行，解决思路可以是：1. 找到该按钮的特征，例如按钮的文字是 submit；2. 用XPath定位，可以这样写：//button[@value='submit']。(注意是单引号！！)name：和id一致ClassName...
自动化测试定位不到元素怎么办？
软件自动化测试技术交流、资源分享
11-25 753
1.动态id定位不到元素。分析原因：每次打开页面，ID都会变化。用ID去找元素，每次刷新页面ID都会发生变化。解决方案：推荐使用xpath的相对路径方法或者cssSelector查找到该元素。
为什么有些xpath绝对路径拿不到数据_Xpath定位方法深入探讨及元素定位失败常见情况...
weixin_29643235的博客
12-30 3924
一、Xpath定位方法深入探讨(1)常用的Xpath定位方法及其特点使用绝对路径定位元素。例如：driver.findElement(By.xpath("/html/body/div/form/input"))。特点：这个路径是从网页起始标签开始一直到要定位的元素的路径，如果要定位的元素在页面最下面，则这个Xpath路径会非常长。如果在要定位的元素与页面开始之间的元素有任何增减，元素定位就会失败。...
基于豆瓣影视数据(不完整)的影视大数据分析平台.zip
03-01
数据存储： 爬虫将提取的数据存储到数据库、文件或其他存储介质中，以备后续分析或展示。常用的存储形式包括关系型数据库、NoSQL数据库、JSON文件等。 遵守规则： 为避免对网站造成过大负担或触发反爬虫机制，爬虫...
网络爬虫并实时展示数据.zip
最新发布
03-08
数据存储： 爬虫将提取的数据存储到数据库、文件或其他存储介质中，以备后续分析或展示。常用的存储形式包括关系型数据库、NoSQL数据库、JSON文件等。 遵守规则： 为避免对网站造成过大负担或触发反爬虫机制，爬虫...
数据爬虫集合，图片下载.zip
03-08
数据存储： 爬虫将提取的数据存储到数据库、文件或其他存储介质中，以备后续分析或展示。常用的存储形式包括关系型数据库、NoSQL数据库、JSON文件等。 遵守规则： 为避免对网站造成过大负担或触发反爬虫机制，爬虫...
爬虫与ES数据分析的实现.zip
03-08
数据存储： 爬虫将提取的数据存储到数据库、文件或其他存储介质中，以备后续分析或展示。常用的存储形式包括关系型数据库、NoSQL数据库、JSON文件等。 遵守规则： 为避免对网站造成过大负担或触发反爬虫机制，爬虫...
xpath不能正常匹配
hard_days的博客
03-11 1962
记录一下今天掉的坑。。。本来再写爬虫的时候发现xpath能在浏览器里正常使用，但是放到我的项目里就是一个空列表。弄了我将近一个小时。解决方案有两种： 第一种就是携带cookie值。 self.headers = { "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537....
为什么有些xpath绝对路径拿不到数据_我写的Xpath 为什么爬取不到内容
weixin_39636079的博客
12-20 1540
–– coding:utf-8 ––import lxml,requests,sysfrom bs4 import BeautifulSoupfrom lxml import etreereload(sys)sys.setdefaultencoding(“utf-8”)def main():url = 'https://image.baidu.com/search/flip?tn=baiduima...
xpath定位不到原因浅析
airangrong6572的博客
01-08 5709
在爬虫中，我们经常使用xpath来对元素进行定位，xpath定位分为两种，一种是绝对定位，/html/body/div[2]/div[1]/div/div[3]/a[7]，另外一种是相对定位，比如r'//*[@id ='ul' ]/a[7]' 通常我们可以通过开发者工具，复制元素对应的xpath，这种xpath都是绝对定位，方便获取，但是绝对路径太长，如果里面元素被隐藏了或者元素有变...
Selenium定位元素之x-path方法
mhw_bmd的博客
12-09 3040
属性值中标签含义  // 双斜杠  定位根节点，会对全文进行扫描，在文档中选取所有符合条件的内容，以列表的形式返回   / 单斜杠   寻找当前标签路径的下一层路径标签或者对当前路标签内容进行操作   /text()      获取当前路径下的文本内容   /@xxxx   提取当前路径下标签的属性值   | 可选符   使用|可选取若干个路径 。如//p | //div 即在当前路径下...
爬虫：xpath定位不到列表元素原因
KingsCC的博客
09-07 1447
可能是由于列表未展开 元素展开 elements展开如图： sources如图，可以到pageToolbar下面没有列表标签了 因此，在xpath定位时"//*[@id='page']/div[2]/div/ul/li[2]/text()" 并不能获取到列表的text，就很无语 还未找到解决方法，求教知道的大佬。。。 ...
常用日语摘抄
qq_43066440的博客
12-18 1306
鼓励人的话： ①もっとしっかりしってください 要坚强些 ②気合いいれてください 打起精神来 ③仕事に身をいれてください 专心工作吧 ④ぼんやりしないでよ 别发呆了 ⑤ぼーっとしないでください 别迷迷糊糊的了 ⑥もっと、やる気だしてよ 再加把劲吧 ⑦やることはやってください 有事干事吧 ⑧ほかのみんなも頑張ってるんだから 其他各位都在努力着呢 安慰： ①大丈夫ですよ、うまくいかないことだってあるん...
如何在python中倒序遍历数组
热门推荐
qq_36449202的博客
05-09 1万+
num = [5,9,10,23,89] for i in range(0, num.__len__())[::-1]: print num[i]
Python读取Excel文件遇到的编码问题（pycharm）
qq_36449202的博客
05-16 1万+
1.读取中文文件名，出现错误 2.控制台输出中文乱码 3.decode和encode 4.UnicodeDecodeError: 'utf8' codec can't decode bytes in position 0-1: invalid data错误
selenium用xpath定位元素时定位不到则写入Noen
04-29
当使用Selenium定位元素时，如果XPath表达式无法准确匹配到需要定位的元素，可以使用try-except语句捕获异常，并在except中写入"Noen"或其它提示信息。示例代码如下： ```python from selenium import webdriver from selenium.common.exceptions import NoSuchElementException driver = webdriver.Chrome() try: element = driver.find_element_by_xpath('xpath_expression') except NoSuchElementException: element = "Noen" print(element) ``` 在上面的代码中，我们首先使用try语句执行查找元素的操作。如果元素无法找到，则会触发NoSuchElementException异常。在except语句块中，我们将element变量赋值为"Noen"，以表示元素未找到。需要注意的是，如果在执行查找元素的操作时出现其它异常，也会触发try-except语句块中的except语句。因此，在实际应用中，需要根据具体情况进行错误处理。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值