python学习爬取豆瓣电影名称及评分

最新推荐文章于 2024-08-04 17:55:11 发布

learn_is_happy

最新推荐文章于 2024-08-04 17:55:11 发布

阅读量3k

点赞数 1

文章标签： python 豆瓣 url

本文链接：https://blog.csdn.net/learn_is_happy/article/details/78817980

版权

本文介绍了使用Python进行网络爬虫的基本步骤，通过实例演示如何爬取豆瓣电影网站上的电影名称和评分，从而掌握HTTP请求、解析HTML及数据存储等核心技术。

摘要由CSDN通过智能技术生成

import requests
from bs4 import BeautifulSoup
import bs4
import re
def getHTMLText(url):
    try:
        r = requests.get(url)
        r.raise_for_status()
        r.encoding = r.apparent_encoding
        return r.text
    except:
        return ""


def fillUnivList(ulist,rlist,html):
    count=