python爬虫大作业爬取豆豆影评

一、系统介绍

1)数据描述
数据来源：豆豆最受欢迎的影评
数据获取：豆豆最受欢迎的影评并将获取的这些信息（评论链接、电影名、电影详细地址、评论标题以及评论地址等）写入excel表格，同时也会生成词云。
2)数据获取步骤
第一步：调用获取页面信息的函数，获取并保存html页面信息，使用html.parser解析器，查找符合要求的字符串，对电影的html代码再次使用bs4解析，将电影的信息加入datalist。
第二步：创建workbook对象，创建工作表，建立列名，将"评论链接", “电影名”, “电影详情地址”, “评论标题”, "评论正文"写入数据并保存。
第三步：生成词云，将text进行分词，使用plt库展示图片，保存到文件。
第四步：打开或创建数据库文件，执行sql语句，提交数据库操作，关闭数据库连接，即成功建表。
第五步：将获取到的数据，保存到xls表格，并保存到数据库。

运行环境：pyCharm、python3.8以上

二、效果展示

生成词云

三、其他系统实现

Java+Swing实现学生选课管理系统
Java+Swing实现学校教务管理系统
Java+Swing+sqlserver学生成绩管理系统
Java+Swing用户信息管理系统
Java+Swing实现的五子棋游戏
基于JavaSwing 银行管理系统
Java+Swing+mysql仿QQ聊天工具
Java+Swing 聊天室
Java+Swing+dat文件存储实现学生选课管理系统
Java+Swing可视化图像处理软件
Java+Swing学生信息管理系统
Java+Swing图书管理系统
Java+Swing图书管理系统2.0
基于java+swing+mysql图书管理系统3.0
大作业-基于java+swing+mysql北方传统民居信息管理系统

四、获取源码

点击下载
python爬虫大作业爬取豆豆影评