python爬取百度电影榜单

最新推荐文章于 2023-12-08 16:12:56 发布

ueheb

最新推荐文章于 2023-12-08 16:12:56 发布

阅读量1.1k

点赞数

文章标签： python

本文链接：https://blog.csdn.net/ueheb/article/details/123853354

版权

该博客介绍了如何使用Python爬取豆瓣电影Top250的电影信息，包括电影链接、图片、标题、评分、评价人数和简介，并将数据保存到Excel表格中。同时，博主还进行了简单的数据分析展示。

摘要由CSDN通过智能技术生成

# -*- codeing = utf-8 -*-
from bs4 import BeautifulSoup  # 网页解析，获取数据
import re  # 正则表达式，进行文字匹配`
import urllib.request, urllib.error  # 制定URL，获取网页数据
import xlwt  # 进行excel操作
import numpy as np
import matplotlib.pyplot as plt
import pymysql;
#import sqlite3  # 进行SQLite数据库操作




#
# host="47.108.13.197"
# user="root"
# password="@Qq12345678"
# port=3306
# db="python"
# charset="utf8"
# connect = pymysql.connect(host="47.108.13.197", user="root", password="@Qq12345678", port=3306, db="python", charset="utf8")
# cursor=connect.cursor()
#
# result=cursor.fetchone()

# cursor.close()
# connect.close()





findLink = re.compile(r'<a href="(.*?)">')  # 创建正则表达式对象，标售规则   影片详情链接的规则
findImgSrc = re.compile(r'<img.*src="(.*?)"', re.S)
findTitle = re.compile(r'<span class="title">(.*)</span>')
findRating = re.compile(r'<span class="rating_num" property="v:average">(.*)</span>')
findJudge = re.compile(r'<span>(\d*)人评价</span>')
findInq = re.compile(r'<