计算机专业毕设之基于python爬虫的招聘da数据可视化系统
flask web框架,数据使用requests模块爬取boss直聘网获取数据,使用bs4模块解析数据,数据存入存入csv,在使用pandas模块读取清洗csv数据,并且存入数据库。数据库使用sqlite数据库。使用flask_sqlalchemy模块做orm映射,直接操作数据库增删查改。使用flask-admin做后台管理,对数据表进行增删查改。前端使用css,html,JavaScript。bootstrap响应式框架,echarts可视化图表,数据分析使用pandas和pyspark。