python基础爬虫——BeautifulSoup查找元素

最新推荐文章于 2024-08-05 15:44:04 发布

pitiful dog

最新推荐文章于 2024-08-05 15:44:04 发布

阅读量3.5k

点赞数

分类专栏： python 文章标签： python

本文链接：https://blog.csdn.net/felldeng/article/details/112976471

版权

本文介绍了Python爬虫中BeautifulSoup库的查找元素功能，包括find_all和find两个函数的使用。find_all返回元素列表，find返回第一个匹配的元素。文中通过示例代码展示了这两个函数的用法。

摘要由CSDN通过智能技术生成

困于下衡于虑而后作
人生不能放弃
今天的学习目标是：beautiful soup 查找元素
总共有两个函数find_all和find
find_all返回列表，find返回查找的第一个值
1.python代码——find的使用

from bs4 import BeautifulSoup

# find_all or find
doc = '''
<!DOCTYPE html>
<html lang="en">
<head>
    <meta charset="UTF-8">
    <title>The Dormouse's story</title>
</head>
<body>
<p class="title"><b>The Dormouse's story</b></p>
<p class="story">
    Once upon a time there were three little sister;and their names were
    <a href="http://example.com/else" class="sister" id="link1">Elsie</a>
    <a href="http://example.com/lacie" class="sister" id="link2">Lacie</a>
    <a href="http://example.com/tillie" class="sister" id="link3">Tillie</a>
    and they lived at the bottom of a well
</p>
<p class="story">...</p>
</body>
</html>
'''
soup = BeautifulSoup(doc, 'lxml')  # 解析html变成beautifulsoup对象
tag = soup.find("title")  # 查找第一个标题标签，title一般只有一个
print(type(tag), tag)  # 显示标签的类型和内容
tag = soup.find("a")  # 查找第一个a标签
print(type(tag), tag)  # 显示标签的类型和内容
tag = soup.find('p', attrs={
   'class': 'title'}) # 查找文本当中class为title的<p>元素
print(type(tag), tag)  # 显示标签的类型和内容
soup = BeautifulSoup