一、系统概述:
基于Spark+python django的招聘数据分析系统是一个综合招聘平台,提供首页、数据分析可视化和薪资预测功能,同时支持用户登录和注册。用户可以通过输入正确的账号、密码和验证码来登录,成功登录后进入用户端,可以方便地修改账户信息和密码。
二、系统开发环境:
1、数据采集:
pycharm+python3
爬虫使用mysql+selenium+pandas,爬取前程无忧招聘数据,存入mysql数据库。
2、数据分析:
IntelliJ IDEA + maven + linux集群(centos/ubuntu)
分析采用spark集群+scala+sparksql进行数据分析,将分析结果存入mysql数据库。
3、网站开发:
pycharm + vscode+python3+node
采用django + sqlite3 + sklearn+vue+echarts进行招聘数据分析网站开发和薪资预测。
三、系统功能介绍:
系统的首页为用户提供系统介绍和招聘数据总览。用户可以了解系统的功能和特点,同时获取关于招聘数据的整体情况。首页还展示热门岗位、热门城市等相关信息,以提供更全面的就业市场分析。
数据分析可视化模块通过图表和地图展示各个城市的招聘情况。用户可以通过柱状图、折线图和饼图等方式,直观地了解各个岗位的数量和比例。地图展示了各个城市的招聘热度&#x