“21天好习惯”第一期- 3 xpath使用方法

最新推荐文章于 2024-09-11 20:34:56 发布
最新推荐文章于 2024-09-11 20:34:56 发布
阅读量100 收藏
点赞数 2
分类专栏： 爬虫 文章标签： 爬虫 python vscode
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_52862895/article/details/120961562
版权

爬虫爬取数据时经常要使用xpath进行元素定位，比较常用的方法有下面3种

以青柠起始页为例：

1.属性定位

按下F12，点击左上角选取元素，即可查询到元素位置

2.索引定位 

直接指定元素位置

/html/body/div[1]/div[2]/span[1]/i[1]

选取了第一个图标

3.模糊匹配 

//div[contains(@class,"i")]

选取了所有div中的class为i的盒子

GinFounder
关注
  • 2
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
两万文字多图详解常用软件工具使用(持续更新)
herosunly的博客
07-16 3万+
1. 写在前面的话 2. 实用工具 2.1 Chrome 2.1.1 Chrome双开 2.1.2 视频加速 2.2 Autoruns(开机启动项管理工具) 2.3 Everything 2.3.1 使用正则表达式 2.4 Ditto 2.5 云笔记 2.6 大文本编辑器 2.7 winscp 2.7.1 登录自动输入密码 2.8 winsshd 2.9 TeamViewer或者向日葵 2.10 Sublime Text 3 2.10.1 将tab转换为4个空格 2.10.2 安装package contr
Xpath之最好使用方式
一小平民
11-05 1178
我们在使用Xpath做自动化测试元素
史上最全的xpath定位方法 全在这了!
热门推荐
weixin_43865008的博客
03-30 6万+
Xpath常用的定位方法 相信做过selenium UI自动化的朋友都知道，工作中大部分的元素定位都是使用xpath进行定位，所以xpath是UI自动化工作中非常重要的一个环节，所以我单独整理出来一篇博客出来~~希望对大家有帮助~ last()方法 当标签存在多个相同的时候，可以使用xpath中的last()方法，定位到最后一个 //标签名[last()] //span/ul//li[last()] 如果我们要定位到倒数第二个，可以在last() 后面加上 -1，代表倒数第二个 //标签名[last(
XPATH 常用几种方式
ijoanne
11-26 1280
# h1 = doc.xpath('//h1/text()') # print(h1) # 获取a标签的href属性 # a_attrs = doc.xpath('//a/attribute::href') # a_texts = doc.xpath('//a/text()') content = doc.xpath('//div[contains(@class, "article-content")]') fn:contains(string1,str...
XPATH定位的一般使用方法
tchtest的博客
07-12 4001
一、Xpath定位表达式的二种写法： 绝对定位：以“/”开头，相对的是Dom文档的根节点。如，“/html/body/div[2]/div/…”，由于绝对路径不可靠，在页面改动的时候很容易使定位信息失效，所以不建议使用。在定位信息不好选，而需要做调试的时候可以作为临时定位方式 相对定位：以“//”开头，相对的是当前的Dom文档，也可以是相对于当前所选取的节点对象。如，//*[@class=’hello’], 表示匹配当前Dom文档对象中所有class=’hello’的节点对象，或“//div[@clas
xpath基本使用方法
wingwqr的专栏
04-25 2088
文章目录xpath helper安装XPATH语法在python中使用XPATH基本方式案例 xpath helper安装 下载 链接：https://pan.baidu.com/s/1ukDFizJ60gv6rEqkZkK6IA 提取码：cg0w 安装 解压xpath-helper.rar，然后得到一个解压到到一个目录； 在chrome浏览器的导航栏输入chrome://extensions，打开开发者模式； 点击“加载已解压的扩展程序”，选择解压的文件夹，安装成功 设置快捷键 在导航栏
xpath基本用法初入门
qq_42007843的博客
02-24 975
css是一门美化的语言 xpath是一门查找元素路径的语言， 绝对路径用单斜杠表示，/ 相对路径用双斜杠表示，// 能用相对路径，就不要用绝对路径，相对路径更加稳定，可读性更强 路径也可以右击copy (F12,ELEMENT-选择这个元素对应xml，右击，copy-xpath)，不建议用，基本不准确 元素的组成：tagname,属性，text,下属标签 ===》DOM对象 一，可以通过上级标签s...
虎牙爬虫爬取直播间热度尝试记录（xpath）
weixin_42638313的博客
11-12 1479
使用pycharm新建一个pyhton项目(python版本3.7) 将untitled修改成自己取得项目名称。 Location表示路径。 new environment using 表示新建一个项目依赖配置 existing interpreter 选择一个已存在的项目依赖配置 首次操作选择一个新建的配置，后续有需要可以选择已存在的配置 新建项目完成后，在路径下新建任意名字的python文...
Java第一阶段学习——建立编程思想
weixin_42357284的博客
04-12 717
Day1 （1）什么是JDK、JRE JDK基本介绍 JDK的全称（Java Development Kit）Java 开发包工具） JDK = JRE + Java的开发工具（Java，javac，javadoc，javap。） JRE基本介绍 JRE（Java Runtime Environment Java运行环境） JRE = JVM + java的核心类库（类） 包括JAVA虚拟机和Java程序所需要的核心类库等，如果要运行一个开发好的Java程序，计算机只需要安装JRE即可 （2）安装
python学习笔记6---数据解析
qq_32482091的博客
03-08 6606
xpath简介 xpath（XML Path Language）是一门在XML和HTML中查找信息的语言。 Xpath开发工具 1.Chrome插件Xpath Helper 点击浏览器右边三点—更多工具—扩展程序—chrome网上商店搜索该插件（需要翻墙，可能一次不能成功添加，多尝试即可） 2.Firefox插件Try Xpath 点击浏览器右边三横—附加组件—搜索插件—添加 Xpath语法 谓...
爬虫教程（ 6 ） --- 爬虫 进阶、扩展
墨鱼菜鸡
07-11 6822
1. 前言 1. 先看一个最简单的爬虫。 import requests url = "http://www.cricode.com" r = requests.get(url) print(r.text) 2. 一个正常的爬虫程序 上面那个最简单的爬虫，是一个不完整的残疾的爬虫。因为爬虫程序通常需要做的事情如下： 1)给定的种子 URLs，...
网页解析 lxml 库--实战
qiqi776532的博客
09-09 1333
本节课我们又学习了爬虫的一个新的网页解析库lxml，从网页中快速解析出想要的目标元素，熟练掌握解析库的使用技巧是必须的基础，爬虫的范围非常的广，爬虫的入门门槛很低，但是要修炼到更高的阶段，道路可不平坦，课程所限不能将爬虫的知识展开细讲，同学们有需要可以在拉拉老师的星球里和老师一起来研讨如何写出自己想要的爬虫。
【python】—— Python爬虫实战：爬取珠海市2011-2023年天气数据并保存为CSV文件
weixin_63106307的博客
09-05 1086
本文将介绍如何使用Python编写一个简单的爬虫程序，以爬取珠海市2011年至2023年的天气数据，并将这些数据保存为CSV文件。
【数据获取与读取】JSON & CSV
？的博客
09-09 574
获取数据-读取数据-评估数据-清洗数据-整理数据-分析数据-可视化数据。
基于Python爬虫的淘宝服装数据分析项目
₍˄·͈༝·͈˄*₎◞ ̑̑的博客
09-07 2668
该项目是基于Python爬虫的淘宝服装数据分析项目，以致于帮助商家了解当前服装市场的需求，制定更加精确的营销策略。首先，需要爬取淘宝中关于服装的大量数据，然后对数据进行处理和分析，比如处理重复值，提取关键信息，统计分析等等，最后，通过Echarts将处理后的数据进行可视化展示，可以更为直观的看到服装市场的趋势和变化。 代码分析 导入模块 代码首先从主函数进入，传入三个参数，运行TaobaoCrawler爬虫类 初始化方法 _init：方法 create_images_folder： 检查并创建存储图片的
【爬虫软件】用python开发的youtube关键词搜索采集工具！
马哥小迷弟的博客
09-07 367
我用Python独立开发了一款爬虫软件，作用是：通过搜索关键词采集YouTube的搜索结果软件是通过调用谷歌官方API实现，并非通过网页爬虫，所以稳定性较高！开发成界面软件的目的：方便不懂编程代码的小白用户使用，无需安装python，无需改代码，双击打开即用！软件界面截图：爬取结果截图：软件使用演示视频：（不懂编程的小白直接看视频，了解软件作用即可，无需看代码）【软件演示】YouTube关键词搜索采集软件。
大模型训练数据库Common Crawl
最新发布
u013308709的博客
09-11 214
‌‌Common Crawl是一个非营利组织，致力于通过大规模分布式爬虫系统定期抓取整个Web并将其存储在一个可公开访问的数据库中。Common Crawl的数据收集和处理过程包括使用Python开源爬虫工具收集全球范围内的网站数据，并将其上传到‌Common Crawl基金会的数据仓库中。该项目从2008年开始，至今已经积累了大量的原始网页数据、元数据和文本提取数据。这些数据经过处理后，可以用于自然语言处理和机器学习的训练。
Day21—爬虫性能优化技巧
Ztop的博客
09-02 819
爬虫性能优化是一个复杂的过程，涉及到多个方面的考虑。通过本文的学习，你应该了解了请求头优化、连接池、缓存策略、并发与异步、下载延迟、错误处理和重试机制等技巧。这些技巧可以帮助你提高爬虫的性能，减少对目标网站的压力，并提高爬虫的稳定性和可靠性。在后续的文章中，我们将继续探讨更多关于爬虫性能优化的高级技巧和最佳实践。通过不断学习和实践，你将能够构建出更加高效和强大的网络爬虫。
爬虫7：多线程与协程
bliblisukabulie的博客
09-06 432
我们可以使用线程池：一次性开辟一些线程，我们用户直接给线程池子提交任务，线程任务的调度交给线程池来完成。进程是资源单位 ，每个进程至少要有一个线程。因为91被封了这里用另一个视频网站代替吧。创建线程比创建进程花销小，故使用前者。多线程爬取北京新发地。
python-selenium -- xpath定位方法详解
06-06
XPath是一种XML文档的定位方法，也可以用于HTML文档的定位，Selenium中也可以使用XPath来定位网页元素。下面是使用XPath定位元素的详细步骤： 1. 打开浏览器并访问网页： ```python from selenium import ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值