python笔记:获取网页中某类标签，找出有效信息

最新推荐文章于 2022-10-17 09:20:15 发布

nedwons

最新推荐文章于 2022-10-17 09:20:15 发布

阅读量567

点赞数

本文链接：https://blog.csdn.net/hunter___/article/details/108715745

版权

本文记录了使用Python进行网络爬虫时，如何通过解析HTML找到特定标签，进而提取有价值数据的过程。内容包括使用BeautifulSoup库进行网页内容筛选及信息提取的方法。

摘要由CSDN通过智能技术生成

#!/usr/bin/env python
# coding=utf-8
import requests
from bs4 import BeautifulSoup

def getListBytag(url,tag):

    re_test = requests.get(url)
    re_test.encoding = 'utf-8'
    taglist = list()
    soup = BeautifulSoup(re_test.text, "html.parser")
    lable