Python课堂笔记-requests库&bs4库的使用（12.23）

最新推荐文章于 2023-11-18 20:57:43 发布

KaLiNiTE0819

最新推荐文章于 2023-11-18 20:57:43 发布

阅读量623

点赞数

分类专栏：笔记文章标签： python

本文链接：https://blog.csdn.net/KaLiNiTE0819/article/details/122159126

版权

笔记专栏收录该内容

11 篇文章 1 订阅

订阅专栏

本文介绍了Python中用于网络请求的requests库和网页解析的beautifulsoup4库的使用方法。通过requests.get发送HTTP请求，获取网页内容，结合beautifulsoup4解析HTML，提取关键信息。涉及状态码检查、编码处理以及BeautifulSoup对象的创建和美化输出。

摘要由CSDN通过智能技术生成

requests库:
       方法：
       r=requests.get('url'):发送请求获取资源对象，并返回资源对象
       requests.request（代码标签）：构造请求
       requests.head():获取网页头信息

beautifulsoup4库：
       安装：pip install bs4/beautifulsoup4
       常用导入办法：
           导入库：from bs4 import BeautifulSoup
           创建对象：soup=BeautifulSoup（文本/网页内容，'html.parser'）
           输出网页代码：print(soup.prettiffy)
       测试步骤：
           import requests:导入库
           r=requests.get('url'):发送并返回请求资源对象
           print(r.status_code):查看状态码（是否发送成功）
           r.encoding:查看网页编码
           r.apparent_encoding:根据网页内容评估的备用编码
           r.text:查看网页内容
           r.encoding=r.apparent_encoding:将备用编码替换头编码
           r.text[-500:]/r.text[:1000]
       from bs4 import BeautifulSoup
       soup=BeautifulSoup(文本/网页内容，‘html.parser’)
       print(soup.prettify())