- 博客(4)
- 收藏
- 关注
原创 关于通信公司用户数据的计算
总的来说,学习了Spark,让我对大数据计算得到了进一步的加强,结合上个学期的Hadoop,我相信我也初步的掌握了大数据平台的搭建与使用,但在实际的操作中也还是会犯一些错误的,所以当我发现一些错误后我也积极进行改正和反馈,接下来的时间,要继续学习好Hadoop和Spark,我们唯有克服重重困难,才能取得成功。这里准备了3150条通信用户的数据,里面包括了呼叫失败次数,是否投诉,订阅时长,收费金额,呼叫时长,呼叫总,短信总数,联系人数量,缴费方式,使用状态,年龄等字段。Driver的主机地址。
2023-11-19 13:44:34 36
原创 学生管理系统
学生管理系统是由model、service、repository、controller和三个HTML文件组成。在学习的过程中,遇到了依赖项方面的错误,pom.xml修改了好几遍才可以正常运行。Spring boot自动化配置的全新框架。在构建Spring应用时,我们只需要添加相应的场景依赖,Spring Boot就会根据添加的场景依赖自动进行配置,直接嵌入Tomcat、Jetty 和Undertow 服务器。
2023-07-04 22:58:47 69 1
原创 使用Hadoop、Hbase搭建新能源汽车大数据平台及学习HADOOP的心得体会
1、编写一个MapReduce程序,每天凌晨2点统计前一天的新能源车辆数据是否有重复数据(所有字段都相同的两条数据则认为是重复数据),并将有重复数据的车辆信息写入到第一题的Mysql数据库的repeat表中(表必须包含字段:数据生成日期、车架号、重复次数。3、编写一个MapReduce程序,每天凌晨4点统计前一天上传的车辆数据中非当天的数据总条数,并将统计结果写到第一题的Mysql数据库的other_date_num表中(表字段必须包含:数据生成日期、非当天的数据总条数);2.设置虚拟机的储存空间。
2023-06-29 13:24:14 368 1
原创 Python数据可视化之环形饼图
制作饼图还需要下载pyecharts库,Echarts 是一个由百度开源的数据可视化,凭借着良好的交互性,精巧的图表设计,得到了众多开发者的认可。随着学习python的热潮不断增加,Python数据可视化也不停的被使用,那我今天就介绍一下Python数据可视化中的饼图。在我们的生活和学习中,编程是一项非常有用的技能,能够丰富我们的视野,为各行各业的领域提供了新的角度。环形饼图的制作并不难,主要是在于数据的打包和分组这里会有点问题,属性的标签可以去 这个网站进行修改。图中的zip压缩函数,并分组打包。
2023-06-20 16:05:09 1286
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人