xpath找不到东西

最新推荐文章于 2024-01-05 20:50:40 发布
最新推荐文章于 2024-01-05 20:50:40 发布
阅读量1.1k 收藏
点赞数 1
分类专栏： 爬虫 文章标签： xpath xpath抓取不到内容
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Jayj1997/article/details/101439775
版权

我的爬虫学习

xpath找不到东西

上午刚出现了个xpath+text（）找不到东西，下午就遇到了xpath找不到东西，这整的。。。
xpath是这个

/html/body/div[4]/div[2]/div[2]/ul/li[3]/table/tbody/tr[2]/td[3]/a/@href

在浏览器的xpath插件也试过了没问题，问了问同事也说不知道，最后百度了一会发现是浏览器对html文本进行了规范化，在路径里面加入了tbody，只需要删掉tbody这个就可以了

/html/body/div[4]/div[2]/div[2]/ul/li[3]/table/tr[2]/td[3]/a/@href

只需要变成这样就可以正常使用了

Jayj1997
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
python中无法安装xpath库,Python爬虫 | xpath的安装
weixin_33295562的博客
03-26 2280
错误信息：程序包无效。详细信息：“Cannot load extension with file or directory name. Filenames starting with "" are reserved for use by the system.”。1、找到Chrome安装程序路径，找到对应的插件image.png2、把crx后缀名改为rar，解压缩得到文件夹(有错误提示不用理会)...
解决selenium定位不到xpath元素： “NoSuchElementException: Message: no such element: Unable
weixin_49643729的博客
05-11 2790
找的元素被包含在iframe中，而不是主HTML源码中。需要添加以下代码先将driver切换到相应的iframe中，然后再进行元素的定位和数据的抓取。
Xpath定位不到元素的可能原因及解决方案
最新发布
二十二画生的博客
01-05 4031
一般来说元素的id是比较稳定的，但是有些元素的id是不断刷新的。解决方案是通过修改Xpath路径来定位隐藏或不可见的元素，可以使用contains()函数、ancestor节点或preceding-sibling节点等来定位目标元素。：如果页面上有多个相同的元素，Xpath默认只会返回第一个匹配的元素。解决方案是使用索引来定位特定的元素，可以使用[1]、[2]等索引来定位第二个、第三个匹配的元素。：有些弹窗，会屏蔽其他元素操作，可以检查是否上层的弹框、下拉框之类的元素遮挡，优先处理弹窗的元素。
使用xpath解析时返回为空，获取不到相应的元素的解决方法
mys328的专栏
08-09 3100
的时候解析网页，使用最多的解析方式就是xpath解析，但是在使用在使用xpath解析的时候，明明自己写的xpath语句正确，但是返回值还是为空。原因通常是前端做的一些反爬措施，在编写网页的时候通常省略一层标签，但是被省略的标签浏览器会自动补充，修改成正确的结构。我们通过浏览器进行检查的时候，看到的代码结构是已经被浏览器修改后的，而爬虫获取到的是源代码。总结 当使用xpath获取不到向相应的元素的时候，观察一下源码结构，根据源码进行解析。缺少一个tbody标签，
使用xpath查找元素的子元素，找不到
weixin_33871366的博客
03-27 1572
List<WebElement> allUserList = driver.findElements(By.xpath("xxx")); for (WebElement user:allUserList){ 　　String xxx = user.findElement(By.xpath(".//a")).getText() } 需要在前面加个点 转载于:https:...
IEXPath.zip
04-07
想不到我一个开发人员，居然在测试人员里面昙花一现闪亮了一把，造化弄人啊。这个软件还说明了一个事情，对用户切实有用的东西是不太需要宣传的。。。 使用很简单，直接拖动左下角鼠标到IE查看即可。还可以查看IE...
自己用java做的一个类似网页爬虫的东西
09-12
了解这些机制并编写对应的解决方案，如设置随机User-Agent、使用代理IP池，是爬虫开发中不可或缺的一部分。 10. **异常处理和日志记录**：在爬虫运行过程中，可能会遇到各种错误，如网络连接问题、解析异常等。良好...
frink:基于标准的分层数据处理库
05-19
皱纹：除了厨房水槽以外的所有东西将XML解析为DOM级别4兼容的持久性（又名AKA不可变）虚拟树。 具有速度优化功能的遍历树使人联想到XPath。 将JSON解析为相似的，可遍历的树，或与XML混合。 生成L3，这是XML或JSON树...
学习 php 的东西
12-29
本文将深入探讨PHP以及与之相关的XML技术，基于提供的标题“学习PHP的东西”和描述，我们将围绕PHP语言基础、PHP与ASP的对比、以及XML在PHP中的应用展开讨论。 首先，PHP（Hypertext Preprocessor）是一种服务器端...
xml简单实现学生管理系统！看不懂来打我！！！
01-21
再用dom4j解析器来对xml文件进行操作，也会用到一点xpath的东西。 二：实现步骤 1.Dom4j工具类 用来简化对xml的操作： import java.io.FileOutputStream; import java.io.IOException; import org.dom4j.Document; ...
[Selenium]文件上传时点击上传链接，找不到元素
心之所向，一往而深
07-05 1582
scenario： 上传功能: 鼠标点击“ 添加附件”，弹出上传对话框。 当鼠标放置“添加附件上”，chrome指向“<input ……>”,而真正作用元素是“”   这种情况下需要使用action.moveToElement。  Actions action = new Actions(driver);  action.moveToElement(driver.f
遇到过的使用xpath定位不到元素的两种情况
sun_977759的博客
03-15 1万+
第一种情况，根元素是根据ID去定位的 如：//*[@id="cascader-menu-3732-1"]/div[1]/ul 像这种元素的ID中间那一串3732是变化的，每一次看到都是不一样的，故而不能作为定位元素的依据 解决办法是可以把copy xpath换成copy full xpath，另外根元素ID属性也可以换成其他固定唯一的属性去定位 第二种情况，xpath里面某个标签的数字是动态的 如：下图所示想定位下拉框里面那个元素，通过xpath定位出来为/html/body/div[4]/div
爬虫坑之xpath解析不出来
qq_42832858的博客
06-24 1万+
如果遇到了用xpath解析到的数据为空列表,而自己又确信解析正确的情况下,不妨使用xjax或者正则来解析,原因是HTML不是源文件 只是生成的 所以用xpath解析不到 现在很多网页都是这种了 注意下即可 ...
Scrapy: 为什么xpath和css明明是对的，但却爬不到任何内容？
热爱代码
02-13 1万+
有很多小伙伴入门Scrapy的时候都会有这样的疑问：明明写的xpath和css是对的（就算真自己写错，那用谷歌或火狐返回的xpath和css不会错的吧），但总是返回一个空列表。 解决办法很简单，改变自己的一个观念就好：Scrapy爬虫看到的页面结构与我们自己在浏览器看到的可能并不一样。 所以scrapy shell这种工具就非常有用了，Scrapy官方文档对它的说明是： The...
lxml.etree,HTML使用xpath地址找不到元素
南巷清风
06-03 2641
使用etree.HTML(response.text)里面的xpath地址找不到，切换成etree.HTML(response.content)里面的xpath地址就找到了 response.text的内容是str类型 response.content的内容bytes类型 具体为什么不是很清楚，如果有知道为什么的可以评论一下。 检查过程： html =etree.HTML(response.text) print(etree.tostring(html)) 发现最后打印的数据和之前打印..
xpath定位元素返回列表为空
热门推荐
Liubingzhe
01-23 2万+
在爬取一些网站的时候，结合from lxml import etree库中etree.HTML()可以构造一个符合xpath语法的html文本，为了方便，我们可以F12-copy xpath获取该元素在网页中的xpath语法，但是其复制的为绝对路径，在某些时候是无法定位出元素的。 HTML（text， parser = None， base_url = None） 从字符串常量解析HTML文档。...
XPath里面几种定位不到数据的解决办法
qq_36449202的博客
07-28 1万+
1.缩短定位路径，利用属性定位，比序列定位好像好用一些； 2.tbody 标签是个坑，去掉它； 3.查看获取的HTML源码中有没有想要的数据，有的是获取不到的，； 4.学习一下正则表达式，配合使用； ...
hutool的xmluitl使用xpath找不到
05-23
3. 节点不存在：如果查询结果为空，可能是节点不存在。可以先使用 `XmlUtil.toStr(document)` 方法将 XML 转换为字符串，检查需要查询的节点是否存在。 以下是一个使用 Hutool 的 XmlUtil 工具类进行 XPath 查询的...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值