文章目录 ==有需要本项目的代码或文档以及全部资源,或者部署调试可以私信博主==项目介绍数据集展示Hadoop脚本文件可视化展示每文一语 有需要本项目的代码或文档以及全部资源,或者部署调试可以私信博主 项目介绍 本项目基于hadoop的社交媒体用户进行大数据分析,数据来源于微博用户信息,共计二十余万条,通过数据预处理之后,再将结构化数据上传到hadoop进行大数据分析,通过MapReduce执行系列分析语句,完成数据分析并通过sqoop将结果指标导出到MySQL,在利用Pyecharts进行连接数据源进行编程可视化,最终将可视化渲染为web界面,完成分析。 过程细节涉及过多,有大量的细致语法实现,需要仔细的推敲。 数据集展示 Hadoop脚本文件 可视化展示 每文一语 成长在于不断地进步