爬虫数据解析bs4获取所有属性时，bs.find_all返回值为空列表，请问什么原因

最新推荐文章于 2025-03-03 16:47:55 发布

孟波61

最新推荐文章于 2025-03-03 16:47:55 发布

阅读量2.2k

点赞数

分类专栏：运行错误文章标签： python

本文链接：https://blog.csdn.net/weixin_61108422/article/details/122719744

版权

在使用BeautifulSoup库（bs4）进行网页爬虫数据解析时，遇到`find_all`方法返回空列表的情况。这可能是由于网页结构变化、选择器错误或编码问题导致的。检查网页源代码，确保正确指定标签和属性；同时，考虑使用更健壮的解析策略，如XPath或尝试使用`requests-html`库。确保网页编码正确设置，避免因字符集问题找不到元素。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

from bs4 import BeautifulSoup
html = '''
        <title>马士兵教育</title>
        <div class='info' float='left'>欢迎来到马士兵教育</div>
        <div> class='info' float='right' id='gb'>
            <span>好好学习，天天向上</span>
            <a href='http://www.mashibing.com'>官网</a>
        </div>
        <span>人生苦短，你需要Python</span>   
'''
bs = BeautifulSoup(html, 'lxml')
print(bs.title, type(bs.title))
print(bs.find('div', class_='info'), type(bs.find('div',class_='info'))) # 获取满足条件的第一个标签
print('-------提取满足要求的所有数据-------')
print(bs.find_all('div', class_='info'))  # 不能直接写关键字class，加下划线
print('----------遍历列表----------')
for item in bs.find_all('div', class_='info'):
    print(item, type(item))
pri