爬虫（BeautifulSoup--select--class的选择）

最新推荐文章于 2024-02-24 19:08:37 发布
最新推荐文章于 2024-02-24 19:08:37 发布
阅读量405 收藏
点赞数
文章标签： python 爬虫
原文链接：http://www.cnblogs.com/missmissmiss/p/7139433.html
版权
本文介绍了如何使用BeautifulSoup的select方法选择带有特定class的元素。讲解了无空格和有空格的情况，如select(.item.name)和select(.item .name)的区别，并列举了其他选择方式，包括通过标签名、类名、ID名的查找，以及组合查找和直接子标签查找。同时提到了属性查找，强调了属性与标签在同一节点时中间不应有空格。
摘要由CSDN通过智能技术生成

<div class="item name" title="中央公园">

<a href="/Attraction_Review-g60763-d105127-Reviews-Central_Park-New_York_City_New_York.html" target="_blank" class="poiTitle" οnclick="widgetEvCall('handlers.shelfItemClick', event, this)" data-tpp="Attractions" data-tpact="shelf_item_click" data-tpatt="1|poi|105127" data-tpid="162">

中央公园

</a>

</div>

select(.item.name)  中间不加空格表示选中class为   item name  中包含的元素

<div class="item" title="中央公园">

　　<div class = name>中央公园</div>

</div>

select(.item .name)中间有空格 表示选中为 class为item 下 class为 name的元素

select的用法

 

（1）通过标签名查找

最低0.47元/天 解锁文章
dichen0168
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Python BeautifulSoup 使用 选择多个 class
weixin_42544006的博客
11-20 8552
import requests from bs4 import BeautifulSoup as bs url = 'https://car.autohome.com.cn/price/brand-40.html#pvareaid=2042193' html = requests.get('https://car.autohome.com.cn/price/brand-40.html#pvar...
爬虫之select
yanfumin的博客
07-08 545
select为查找HTML中的标签 select的语法 "."表示class属性 “#”表示id属性 通过css的class类查找 print soup.select(".sister") print soup.select("[class~=sister]") 通过tag的id属性查找 print soup.select("#link1") print soup.select(“a#link2”) 通过属性值来查找 print soup.select(‘a[href=“http://example.co
BeautifulSoup，CSS选择器
qq_53318060的博客
08-18 947
文章目录BeautifulSoupBS对象的一些方法属性 BeautifulSoup 数据解析原理: 1.标签定位 2.提取标签、标签属性中存储的数据 from bs4 import BeautifulSoup import lxml 1.将本地的html文件中的数据加载 fp=open(filename,'r',encoding='utf-8') res=BeautifulSoup(fp,'lxml') #返回BeautifulSoup对象 2.将互联网上获取的页面源码加载 page_text=r
Jsoup 选择有空格的class
荷塘月色
08-10 997
遇到有多个空格的的class，其实我们可以把空格前后的各当成一个class，也就是多个class的情况进行处理。
转python爬虫：BeautifulSoup 使用select方法详解
onemorepoint的博客
07-30 685
转python爬虫：BeautifulSoup 使用select方法详解   1 html = """ 2 &lt;html&gt;&lt;head&gt;&lt;title&gt;The Dormouse's story&lt;/title&gt;&lt;/head&gt; 3 &lt;body&gt; 4 &lt;p
BeautifulSoup-3.2.2.tar.gz
02-05
7. **CSS选择器**: 自版本4起，BeautifulSoup支持CSS选择器，通过`.select()`方法实现，如`soup.select('div.container')`。 8. **属性访问**: 可以通过`.`访问元素的属性，如`element['class']`获取元素的class...
Python-网易LOFTER图片爬虫
08-10
通过选择器如`class`、`id`等，我们可以精准定位到图片元素。例如，`soup.select('.image-url')`可以找到所有具有特定类名的图片链接。 4. **动态加载内容**：很多现代网站使用AJAX技术动态加载内容，LOFTER也不...
beautifulsoup4-4.0.1.tar.gz
03-03
BeautifulSoup4支持CSS选择器，通过`select()`方法可以像操作DOM一样选取元素： ```python elements = soup.select('.class_name') ``` 七、版本4.0.1的改进 在BeautifulSoup4的4.0.1版本中，主要关注了稳定性和...
beautifulsoup4-4.9.1.tar.gz
最新发布
03-03
element = soup.select_one('.some-class .another-class') ``` BeautifulSoup4还具有强大的异常处理机制，当遇到无法解析的HTML时，它会尝试修复错误，而不是抛出异常。这使得在处理网络爬虫或网页抓取任务时，它...
beautifulsoup4-4.6.0
09-07
- `select()`：通过CSS选择器来查找元素，类似于浏览器的DOM操作。 4. **遍历文档树** - `children` 和 `descendants`：这两个迭代器可以遍历元素的所有直接子元素或所有子孙元素。 - `parent` 和 `parents`：...
第一次爬虫之Select 小猪短租
a1161510735的博客
04-24 454
第一次爬虫之select 小猪短租 因为我是在成都 当然爬的是成都 短租房 http://cd.xiaozhu.com 需要爬取的是这些信息： 短住房的标题信息 短住房的地址 当然还有价格 还有房东信息（头像，性别)hh 工具 个人喜欢用Pycharm， Select 方法 360 极速浏览器（chrome）同样 requests time BeautifulSoup 以上是所用的库。...
BeautifulSoup.select(selector)函数中参数的选择表达式的书写方法（CSS选择器）二则
陈广智的专栏
08-17 2168
1 介绍 使用BeautifulSoup从网页中抓取自己需要的信息，有两种常用的方法： 使用 find()或者find_all()方法，很方便，很容易直接定位到自己所需要的信息； 使用select(selector)方法，能起到与方法1同样的效果。 方法2相比较方法1，有一个优点是：当我们写一个通用的爬虫类时，亦即该类爬虫方法代码与网页中的具体的标签无关（同一内容在不同的网页中具体的标签是千变万化的），允许我们将不同网页的信息定位抽象出来（亦即，允许我们书写一个CSS选择器）。 下面给出两个书写CSS选
Python笔记-BeautifulSoup基本用法(通过标签及class定位元素)
IT1995的博客
03-11 1万+
如下： 将html文件下载后，使用BeauifulSoup读取文件，并且使用html.parser tmp_soup.select里面的参数为： div标签中class中带有listbg 下面 span标签中带有title，这种意思： 并且他们的类型如下： 都是ResultSet类型。 可以通过下面这种方式获取， find('某个标签')['中包含的域'] 当为li...
python的BeautifulSoup库怎么用（详细教程）
qq_40860747的博客
05-19 6118
以上就是一个比较详细的 BeautifulSoup 教程，包括安装、基本用法和一些高级应用。BeautifulSoup 可以帮助我们方便地解析 HTML 和 XML 文档，并从中提取所需的信息，是 Python 网络爬虫开发中常用的工具之一。
BeautifulSoup获取指定class样式的div
坂田搬运工
12-03 1万+
更详细的，参考链接 beautifulsoup菜鸟教程 ： http://www.jsphp.net/python/show-24-214-1.html 想获取<div class='xxx'> ...<div>这样的div标签，通常有三种办法， 1）用字符串查找方法,然后切分字符串（或切片操作），如str.index(patternStr)或str.find...
python爬虫：BeautifulSoup 使用select方法的使用
热门推荐
sym的博客
08-23 2万+
1 html = """ 2 html>head>title>The Dormouse's storytitle>head> 3 body> 4 p class="title" name="dromouse">b>The Dormouse's storyb>p> 5 p class="story">Once upon a time there were three little siste
Python之爬虫之BeautifulSoup学习
shy的博客
10-01 2424
Beautiful Soup 是一个可以从HTML或XML文件中提取数据的Python库。由于 BeautifulSoup 是基于 Python，所以相对来说速度会比另一个 Xpath 会慢点，但是其功能也是非常的强大学习资料中文官网：https://www.crummy.com/software/BeautifulSoup/bs4/doc.zh/
BeautifulSoup中的find_all()及select()查找方法
book_dw5189的博客
02-24 3281
BeautifulSoup中的find_all()及select()查找方法
写CSS选择器时标签的class属性值中有空格的问题
陈广智的专栏
08-18 4830
1 问题描述 HTML代码片段为： <div class="alert alert-warning"> 请至“随书下载”下载本书的示例程序。 </div> <div class="book-intro readmore"> 本书通过正在学习机器学习的程序员绫乃和她朋友美绪的对话，结合回归和分类的具体问题，逐步讲解了机器学习中实用的数学基础知识。其中，重点讲解了容易成为学习绊脚石的数学公式和符号。同时，还通过实际的Python 编程讲解了数学公式的应用，进而加深读
python 爬虫select >
08-18
在Python的爬虫中，使用select方法可以通过CSS选择器定位HTML元素。例如，通过select("div")可以选择所有的div元素。 使用select方法时，可以使用空格或者>符号来表示子元素关系。空格表示选择后代元素，而>表示选择直接子元素。例如，select("div span")表示选择div下的所有span元素，而select("div>span")表示选择div的直接子元素中的span元素。 需要注意的是，在爬取网页时遇到<br>或者<br/>隔开的文本内容时，可能只能获取到最后一个文本内容，而不能获取到所有的文本内容。这是因为<br>或者<br/>是HTML中的换行标签，而不是实际的文本内容。如果想要获取到所有的文本内容，可以使用get_text方法，并指定换行标签作为参数，例如get_text('', '<br>')。这样就可以将换行标签替换为空格或者其他可以接受的字符，从而获取到所有的文本内容。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *3* [Python爬虫beautifulsoup <br>](https://blog.csdn.net/weixin_40835949/article/details/85797855)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] - *2* [零基础python爬虫48小时速成](https://download.csdn.net/download/weixin_36643308/88220343)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值