python bs4 入门

最新推荐文章于 2024-06-05 09:13:17 发布
最新推荐文章于 2024-06-05 09:13:17 发布
阅读量217 收藏
点赞数
分类专栏： python爬虫笔记 文章标签： python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/enginebrkalsy/article/details/116355941
版权

python bs4 BeautiSoup入门

在这里插入图片描述
在这里插入图片描述

结果：

在这里插入图片描述

prettify（）：

在这里插入图片描述

直接打印相关内容

在这里插入图片描述

有多个相同标签时

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

找到三个href

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

bs4 对象种类

在这里插入图片描述

bs4 tag标签

在这里插入图片描述
在这里插入图片描述

找标签属性——attrs

在这里插入图片描述

NavigableString可导航的字符串

在这里插入图片描述

soup对象

在这里插入图片描述

comment 注释

在这里插入图片描述
在这里插入图片描述

遍历文档树

在这里插入图片描述

contents chlidren descendents

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

string strings stripped strings–把多余空格去掉

string——获取标签里面的内容

在这里插入图片描述

strings——返回是一个生成器对象用过来获取多个标签内容

在这里插入图片描述

stripped_strings——和strings基本一致 但是它可以把多余的空格去掉

在这里插入图片描述

遍历父节点

在这里插入图片描述

parent

在这里插入图片描述

html的父节点是整个soup对象

在这里插入图片描述

parents

在这里插入图片描述
在这里插入图片描述

遍历兄弟节点

在这里插入图片描述

next_sibling 下一个兄弟节点

在这里插入图片描述
在这里插入图片描述

previous_sibling 上一个兄弟节点

在这里插入图片描述

搜索数——findAll&find_all

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

find（）找一个

在这里插入图片描述

find_all（）找全部以列表形式返回

在这里插入图片描述
在这里插入图片描述

find_all只找某几条

在这里插入图片描述

1.class_

在这里插入图片描述
在这里插入图片描述

attrs{:}

在这里插入图片描述

多重约束条件

在这里插入图片描述

获取标签内部信息

在这里插入图片描述
在这里插入图片描述

过滤第一条——用切片[1:]

在这里插入图片描述

brkalsy
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 3
    评论
专栏目录
Python的BeautifulSoup之find和find_all
yoga0617的博客
12-06 1万+
# coding : UTF-8 import requests from bs4 import BeautifulSoup res = requests.get('http://www.weather.com.cn/weather/101190401.shtml') res.encoding = 'utf-8' soup = BeautifulSoup(res.text,"html5lib")
python中find函数的使用方法_Python学习日记5|BeautifulSoup中find和find_all的用法
weixin_39962675的博客
11-23 995
今天是4.20号。前天晚上看到蒋方舟的一句话：不要左顾右盼。慢慢积累，慢慢写吧。毕竟除了这样单调的努力，我什么也做不了。而现在的自己就是个十足的壁花少年。在进入正题前先说一下每次完成代码后，可以用ctrl+alt+l对代码进行自动格式规范化。在爬取网页中有用的信息时，通常是对存在于网页中的文本或各种不同标签的属性值进行查找，Beautiful Soup中内置了一些查找方式，最常用的是find()和...
Python爬虫编程：数据解析模块之bs4，超详细
lu_jianjun的专栏
09-27 4672
BeautifulSoup，是python中的一个库，是一个可以从HTML或XML文件中提取数据的Python库；它能够通过提供一些简单的函数用来处理导航、搜索、修改分析树等功能。它是一个工具箱，通过解析文档为用户提供需要抓取的数据，因为简单，所以不需要多少代码就可以写出一个完整的应用程序。会帮你节省数小时甚至数天的工作时间。自动将输入文档转换为Unicode编码，输出文档转换为utf-8编码。你不需要考虑编码方式，除非文档没有指定一个编码方式，这时，就不能自动识别编码方式了。
python的网页解析库-bs4(BeautifulSoup)
最新发布
weixin_46429290的博客
06-05 1157
>BeautifulSoup是一个用于解析HTML和XML文档的Python库，它能够方便地从网页中提取数据。
python—bs4模块解析
W0ngk，一个安全菜鸡，一直在模仿，尚未有超越。
03-16 2820
bs4模块详解
[学习]用python的BeautifulSoup分析html
wcqlwyt的博客
07-21 266
序言 　　之前用python爬取网页的时候，一直用的是regex或者自带的库sgmllib里的SGMLParser。但是遇到复杂一点的情况时，SGMLParser往往就不那么给力了！（哈，难道说我 t
python bs4 2
enginebrkalsy的博客
05-04 83
css select()方法——标签找——select（‘标签名’) select()方法——类名找——（.class） select()方法——id找——#id select()方法——组合方式——（标签 #id）中间有空格 select()方法——通过父标签找下面内容 select（）找数据——[索引].get_text() 练习 修改文档树 改标签——.name=’’，改属性——[类]=’’ 改数据——string=’’ append增加值 删除 ...
python入门教程大全.pdf 精心整理
04-11
2. **Python爬虫**：介绍了如何使用Python进行微博数据的抓取，这是网络爬虫的一个实例，涉及到HTTP请求、网页解析（可能使用BeautifulSoup库，如`bs4.FeatureNotFound`错误处理）、数据提取和存储等基本流程。...
Python爬虫入门.zip
05-31
from bs4 import BeautifulSoup url = 'http://example.com' response = requests.get(url) soup = BeautifulSoup(response.text, 'html.parser') ``` 接着，我们要学会如何定位和提取网页元素。在BeautifulSoup中...
基于Python的bs4库爬取电影排名
04-17
本资源基于Python的bs4库实现电影排名的爬取，适用于Python爬虫的新手入门，了解爬虫的基本规则、语法构成以及简单的示例。 2.同时也适用于“选择困难症”的人群，帮你列出电影评分排名，为你提供参考，让你不再...
Python爬虫入门必会
12-19
from bs4 import BeautifulSoup import re soup = BeautifulSoup(page_text, 'lxml') img_src_list = re.findall('<div class="thumb">.*?(.*?)" alt.*?</div>', page_text, re.S) ``` XPath是另一种强大的XML和...
Python爬虫入门示例.zip
06-01
from bs4 import BeautifulSoup soup = BeautifulSoup(html_content, 'html.parser') title = soup.find('title').text print(title) ``` **5. 数据提取** 在HTML中，我们可以使用CSS选择器或XPath来定位目标元素...
【Python】【进阶篇】二十二、Python爬虫的BS4解析库
deepboat的博客
04-18 1151
【Python】【进阶篇】二十二、Python爬虫的BS4解析库
Python爬虫 BeautifulSoup（bs4）-- bs4介绍、安装bs4、bs4基础语法
热门推荐
天行健 君子以自强不息，地势坤 君子以厚德载物。
02-28 2万+
bs4介绍、安装bs4、bs4基础语法
Python爬虫：bs4解析
Ohh24的博客
11-01 4274
python爬虫学习笔记：bs4解析
python bs4 find_all_在BS4中使用find_all获取文本作为列表
weixin_33895554的博客
01-14 675
I'll start by saying I'm very new with Python. I've been building a Discord bot with discord.py and Beautiful Soup 4. Here's where I'm at:@commands.command(hidden=True)async def roster(self):"""Gets a...
Python bs4解析库使用详解
永远是少年
12-28 4869
今天继续给大家介绍Python 爬虫相关知识，本文主要内容是Python bs4解析库使用详解。 一、Python bs4库简介与安装 二、Python bs4库获取数据 三、Python bs4库使用 （一）基本标签查找 （二）递进关系标签查找 （三）获取标签间的文本数据 （四）获取标签中的属性值 四、Python bs4库使用示例
python爬虫（二）
awesomeQ的专栏
05-13 355
针对《用python写网络爬虫的第二章》，该章主要讲述了如何从网页中抽取数据。1. 现讲述一下正则匹配数据的方法：import urllib2 import re def scrape(html): area = re.findall('&lt;tr id="places_area__row"&gt;.*?&lt;td\s*class=["\']w2p_fw["\']&gt;(.*?)...
python 爬虫快速入门
05-31
from bs4 import BeautifulSoup import requests response = requests.get('https://www.baidu.com') soup = BeautifulSoup(response.text, 'lxml') print(soup.title.string) ``` 这段代码可以获取百度首页的标题...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值