#python 爬虫 #BeautifulSoup如何分别提取多个span标签的值

多个span标签的值提取(不含空)

如图所示,首先通过selec()或者find_all()定位到需要爬取的标签,有四个标签,然后分别提取第一,第二,第四个标签,就用列表的思路提取。然后type(star.select(‘span’)[0])为<class ‘bs4.element.Tag’>

rating_star=print(star.select('span')[0]['class'])   #评星 
rating_num=star.find_all('span')[1].text   #评分    
comments=star.find_all('span')[3].text    #评价人数

在这里插入图片描述

多个span标签的值提取(含缺失标签)

但是当遇到,有的span标签缺失的情况就很尴尬,如图所示,两个span标签。但是有的第二个标签缺失。

在这里插入图片描述

提取第一个标签(chi_titile)简单:
chi_title=item.select(’.title’)[0].text

但是提取第二个标签(eng_title),如果用
eng_title=item.select(’.title’)[1].text就会报错IndexError: list index out of range

参考:https://www.imooc.com/wenda/detail/506920,之后u尝试更好的方法是:
eng_title=item.find_all(‘span’,class_=‘title’)[1:2]实现第二个可能有缺失值的标签内容的提取,提取结果如下图(开心!!!!),然后type(item.find_all(‘span’,class_=‘title’)[1:2])为<class ‘list’>,同时第一个标签的提取相应为chi_title=item.find_all(‘span’,class_=‘title’)[0:1]

在这里插入图片描述

小白不太懂上述操作的原理,路过的大佬可以在评论区多多指教,鞠躬₍ ᕕ⍢ᕗ⁾

  • 4
    点赞
  • 16
    收藏
    觉得还不错? 一键收藏
  • 5
    评论
Python爬虫提取数据的方法有多种。通过Python爬虫可以获取网页上的数据并进行进一步的处理和分析。 其中,有四种常用的方法: 1. 使用正则表达式:通过编写正则表达式,可以在网页源代码中匹配需要提取的数据,然后进行提取和处理。这种方法适用于数据结构相对简单的网页。 2. 使用BeautifulSoup库:BeautifulSoupPython的一个HTML/XML解析库,可以通过解析网页的结构,提取出需要的数据。它提供了简单易用的API,能够很方便地从HTML文档中提取数据。 3. 使用XPath:XPath是一种用于在XML文档中定位节点的语言,通过使用XPath表达式,可以在网页中定位需要的数据,并进行提取。XPath在数据提取方面非常强大和灵活。 4. 使用Scrapy框架:Scrapy是一个基于Python的高级网络爬虫框架,它提供了强大的数据处理和存储功能,支持多种数据格式,并且可以与其他Python数据处理库无缝集成。通过编写Scrapy的爬虫代码,可以快速、高效地抓取网页数据并进行处理。 这些方法各有特点,可以根据具体的需求和网页的结构选择合适的方法进行数据提取。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* [Python爬虫入门之爬虫解析提取数据的四种方法](https://blog.csdn.net/xuezhangmen/article/details/130573647)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] - *2* *3* [Python抓取数据9步骤](https://blog.csdn.net/oGuJing123/article/details/130653108)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 5
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值