Py爬虫学习笔记：Beautiful Soup——find_all、select

最新推荐文章于 2024-04-24 08:26:26 发布
最新推荐文章于 2024-04-24 08:26:26 发布
阅读量405 收藏 1
点赞数
分类专栏： 笔记
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_44980720/article/details/115959909
版权
本文是关于Python爬虫中Beautiful Soup库的使用笔记，重点介绍了find_all和select方法。find_all用于查找所有指定标签，如查找所有a标签、class为info的li标签及特定href属性的a标签。在处理class属性时，由于'python'是关键词，需使用class_。同时，展示了如何结合使用find_all获取内部class为download的a元素文字内容。select方法则通过CSS选择器进行筛选，简化了查询过程。
摘要由CSDN通过智能技术生成

find_all

用来查询所有节点的方法
案例1:查询所有的a标签

from bs4 import BeautifulSoup

html = """
<html>
  <head>
    <title>优课达</title>
  </head>
  <body>
    <a href="https://www.youkeda.com" alt="学得比别人好一点">优课达</a>
    <ul>
      <li><a href="https://www.youkeda.com">问吧</a></li>
      <li class="info"><a href="https://www.youkeda.com/academy/java">研发学院</a></li>
      <li class="info"><a href="https://www.youkeda.com/academy/python/P2">Python学院</a></li>
      <li class="info last"><a class="download" href="https://www.youkeda.com/app">APP下载</a></li>
    </ul>
  </body>
</html>
"""
result = BeautifulSoup(html, 'html.parser')

# 查询所有的a标签
aList = result.find_all('a')
print(aList)

结果为

[
  <a alt="学得比别人好一点" href="https://www.youkeda.com">优课达</a>,
  <a href
最低0.47元/天 解锁文章
python爬虫之BeautifulSoup 使用select方法详解
09-21
本篇文章主要介绍了python爬虫之BeautifulSoup 使用select方法详解，具有一定的参考价值，感兴趣的小伙伴们可以参考一下
BeautifulSoup select函数
weixin_43765541的博客
05-22 774
其中，`soup`是BeautifulSoup对象，`selector`是一个字符串，表示要选择的元素的CSS选择器。- 选择后代元素：`ancestor descendant`，例如`body p`（选择body元素下的所有p元素）- 选择类名：`.class`，例如`.container`、`.title`- 选择ID：`#id`，例如`#header`、`#content`- 选择元素类型：`tag`，例如`div`、`p`、`a`这将打印所有匹配选择器条件的`h1`元素的文本内容。
Beautiful Soup的用法（五）：select的使用
热门推荐
haleycat的博客
03-07 3万+
原文地址：http://www.bugingcode.com/blog/beautiful_soup_select.html select 的功能跟find和find_all 一样用来选取特定的标签，它的选取规则依赖于css，我们把它叫做css选择器，如果之前有接触过jquery ，可以发现select的选取规则和jquery有点像。 通过标签名查找 在进行过滤时标签名不加任何修饰，如下...
BeautifulSoup中的find_all()及select()查找方法
book_dw5189的博客
02-24 4177
BeautifulSoup中的find_all()及select()查找方法
python爬虫：BeautifulSoup 使用select方法的使用
sym的博客
08-23 2万+
1 html = """ 2 html>head>title>The Dormouse's storytitle>head> 3 body> 4 p class="title" name="dromouse">b>The Dormouse's storyb>p> 5 p class="story">Once upon a time there were three little siste
【学习笔记】爬虫（Ⅲ）—— BeautifulSoup和CSS选择器
最新发布
Eddie_hyh的博客
04-24 1266
爬虫第三部分：beautifulsoup和css选择器
Python网络爬虫笔记（四）——requests与BeautifulSoup
xuanhuangwendao的博客
01-20 1291
requests和BeautifulSoup的基本用法
Beautifulsoup4学习笔记
Dream It Possible
12-20 4572
beautifulsoup4学习小记 pip安装pip install beautifulsoup4或easy_installeasy_install beautifulsoup4或源码安装python setup.py installBeautifulSoup除了内置HTML解析器，还支持一些第三方解析去，比如html5lib,lxml等，可以安装之后，在初始化BeautifulSoup对象的时
《网络爬虫开发实战案例》笔记
qq_41679358的博客
08-10 4259
转自行云博客https://www.xy586.top/ 爬虫基础 1.HTTP基本原理 URI和URL URI： 统一资源标志符 URL： 统一资源定位符 HTTP和HTTPS HTTP: 超文本传输协议，用于从网络传输超文本数据到本地浏览器的传输协议，它能够保证高效准确的传输文本文档 HTTPS： 以安全为目标的HTTP通道，简单来讲是HTTP的安全版，即HTTP下加入SSL，所简称为HTTPS HTTPS的安全基础是SSL，因此通过它传输的内容都是经过SSL加密的，它的主要作用可以分为两种： .
python爬虫：BeautifulSoup 使用select方法详解
起当风萧的博客
04-06 1万+
转载自 （“**[https://www.cnblogs.com/yizhenfeng168/p/6979339.html](https://www.cnblogs.com/yizhenfeng168/p/6979339.html)**”）。 ```html 1 html = """ 2 <html><head><title>The Dormouse's story</title></head> 3 <body> 4 <p...
【python爬虫】BeautifulSoup库的选择器select()方法
masterbu的博客
02-20 2万+
一般使用BeautififulSoup解析得到的Soup文档可以使用find_all()、find()、select() 方法定位所需要的元素。find_all()是获得list列表、find() 是获得map一条数据。select() 是根据选择器可以获得多条也可以获得单条数据。一般最常用的是find_all() 和 find() 两个参数。 select()方法的使用 从页面...
Beautiful Soup 之 select详解
从零开始学习python --zeropython
07-06 1198
1 [code language="python"] ### select 传入tag标签 1. soup.select("title"...
爬虫：BeautifulSoup(6)--select
提拉米苏的博客
09-03 479
Beautiful Soup中的select Beautiful Soup中的select也是过滤器的一种，个人认为要比find_all()好用一点 find_all()的返回方式是列表，以CSDN的主页为例，探究一下select # coding=utf-8 from bs4 import BeautifulSoup import requests url = 'https://w...
强大的BeautifulSoup select选择器
weixin_43837855的博客
06-12 1240
select的功能跟find和find_all 一样用来选取特定的标签，它的选取规则依赖于css，我们把它叫做css选择器 通过标签查找，返回含有此标签的语句会按照列表的形式返回 print(soup.select('title')) print(soup.select('meta')) print(soup.select('h3')) 输出： [<title>百度新闻——海量中文资讯平台</title>] [<meta content="text/html;charset
BeautifulSoup中find(),find_all(),select()函数
w_xuechun的博客
07-25 2万+
find()函数：输出第一个可匹配对象，即find_all()[0]. find_all()函数：（以下来自官方文档）
BeautifulSoup之find(),find_all(),select()
blank4569的专栏
11-19 1万+
BeautifulSoup介绍 BeautifulSoup是python的一个库，算是python爬虫的一大利器。它的功能就是解析网页数据。 Beautiful Soup自动将输入文档转换为Unicode编码，输出文档转换为utf-8编码。你不需要考虑编码方式，除非文档没有指定一个编码方式，这时，Beautiful Soup就不能自动识别编码方式了。然后，你仅仅需要说明一下原始编码方式就可以了。...
BeautifulSoup.select(selector)函数中参数的选择表达式的书写方法（CSS选择器）二则
陈广智的专栏
08-17 2368
1 介绍 使用BeautifulSoup从网页中抓取自己需要的信息，有两种常用的方法： 使用 find()或者find_all()方法，很方便，很容易直接定位到自己所需要的信息； 使用select(selector)方法，能起到与方法1同样的效果。 方法2相比较方法1，有一个优点是：当我们写一个通用的爬虫类时，亦即该类爬虫方法代码与网页中的具体的标签无关（同一内容在不同的网页中具体的标签是千变万化的），允许我们将不同网页的信息定位抽象出来（亦即，允许我们书写一个CSS选择器）。 下面给出两个书写CSS选
数据解析：Beautiful Soup的使用3，select（css选择器）使用案例
旧人小表弟的博客 - 无业游民学习笔记
09-27 762
html = """ <table class="tablelist" cellpadding="0" cellspacing="0"> <tbody><tr class="h"> <td class="l" width="374">职位名称</td> <td>职位类别</td> <td>人数</td> <td>
Python中使用BeautifulSoup进行HTML解析：快捷定位元素的select方法
ByteHackerX的博客
08-10 520
在本文中，我们介绍了使用BeautifulSoup进行HTML解析，并着重讲解了使用select方法快速定位HTML文档中的元素。select方法支持CSS选择器，可以帮助我们更方便地定位和提取HTML文档中的信息。
Python Beautiful Soup 库中find_all的用法
03-11
find_all() 是 Beautiful Soup 库中的一个方法，用于查找 HTML 或 XML 文档中的所有符合条件的标签。它可以接受多个参数，包括标签名、属性名和属性值等，用于指定要查找的标签的类型和属性。例如，可以使用以下语句...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值