beautifulsoup4 bs4 find_all & find 函数解析_bs4 find all 语法详解 class 属性-CSDN博客

本文链接：https://blog.csdn.net/YZXnuaa/article/details/97002132

本文介绍了BeautifulSoup4库中find_all和find函数的使用方法，包括通过属性名、属性值、正则表达式进行筛选，以及如何根据标签内容和位置来定位元素。还提到了.name、.attrs和.has等后缀函数的功能。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

假定soup是我们下载下来的网页的对象了

soup = BeautifulSoup(a, "html.parser")

# 第一种，直接将属性名作为参数名，但是有些属性不行，比如像a-b这样的属性
soup.find_all('p', id = 'p1') # 一般情况
soup.find_all('p', class_='p3') # class是保留字比较特殊，需要后面加一个_

# 最通用的方法
soup.find_all('p', attrs={'class':'p3'}) # 包含这个属性就算，而不是只有这个属性
soup.find_all('p', attrs={'class':'p3','id':'pp'}) # 使用多个属性匹配
soup.find_all('p', attrs={'class':'p3','id':False}) # 指定不能有某个属性
soup.find_all('p', attrs={'id':['p1','p2']}) # 属性值是p1或p2

# 正则表达式匹配
import re
soup.find_all('p', attrs={'id':re.compile('^p')}) # 使用正则表达式
soup.find_all('p', attrs={'class':True}) # 含有class属性即可

根据标签内内容来识别

这部分还是使用find_all函数，增加text参数

a = '''
<p id='p1'>段落1</p>
<p class='p3'>段落2</p>
<p class='p3'>文章</p>
<p></p>
'''

soup = BeautifulSoup(a, "html.parser")

soup.find_all('p', text='文章')
soup.find_all('p', text=['段落1','段落2'])

# 正则表达式
import re
soup.find_all('p', text=re.compile('段落'))
soup.find_all('p',text=True)

# 传入函数
def nothing(c):
    return c not in ['段落1','段落2','文章']
soup.find_all('p',text=nothing)

# 同上
def nothing(c):  
    return c is None
soup.find_all('p',text=nothing)

根据位置识别

找到第i个a标签
找到第i个和第j个a标签

有时三个标签的标签属性全都一样，所有东西都一样（内容可能不一样，但是类型是一样的），但是我们只想要第二个，这时就不能只通过标签属性内容这些方法提取了，可能它的位置是特殊的就可以用位置来提取。这里其实可以用find_all提取出列表，然后在列表中根据位置再提取一次

使用方法

后缀函数

.name ：标签类型
.attr ：标签所有属性的字典 find特征查找非常方便
.has ：检查标签是否有某属性 True、False # 没什么用

a = '''
<body>
    <h><a href='www.biaoti.com'>标题</a></h>
    <p>段落1</p>
    <p></p>
</body>
'''
soup = BeautifulSoup(a, 'html.parser')
for i in soup.body.find_all(True):
    print(i.name) # 提取标签名
    print(i.attrs) # 提取标签所有属性值
    print(i.has_attr('href')) # 检查标签是否有某属性