- 博客(5)
- 收藏
- 关注
RSS订阅原创 数据分析项目，办公自动化项目—京东卡发放
摘要：本文介绍了一个银行客户京东卡奖励发放的数据处理方案。通过Python的pandas库对客户业务数据进行整合，将同一客户多笔业务的奖励金额累加，并按从大到小的面值顺序智能分配京东卡。方案实现了自动校验发放金额准确性，并将每位客户的分配结果保存为独立Excel文件。该流程可封装为可执行程序，便于重复使用，确保客户奖励发放的准确性和高效性，同时支持后续自动化处理类似营销活动。通过数据分析和自动化技术，有效提升了客户回馈活动的执行效率。
2025-09-09 13:54:22
322
原创 基于Hadoop的疫情分析系统源码分析
该项目是一个完整的COVID19疫情分析系统，包含前后端代码。系统目前功能完善，但建议增加实时疫情数据采集功能，以增强前端实时疫情板块的动态更新能力。项目已托管在GitCode平台，可通过指定链接访问完整代码。该优化将提升系统的数据时效性和用户体验。
2025-08-20 11:47:42
192
原创 基于Hadoop的疫情分析系统从0开始搭建，源码免费分享
本文详细介绍了新冠疫情大数据分析项目的搭建实现过程。项目架构分为环境搭建和数据采集处理两部分：1）环境搭建包括Hadoop集群（可选伪分布式或完全分布式）和基于SpringBoot+Vue3的前后端可视化环境；2）数据采集使用爬虫从丁香医生网站获取实时疫情数据，通过Flume传输至HDFS存储，配置文件详细说明了数据采集流程。数据分析采用Hive替代MapReduce进行数据处理，最终将结果数据导入MySQL用于可视化展示。项目完整展示了从数据采集、存储、分析到可视化的全流程实现方案。
2025-06-26 15:23:52
1744
2
原创 大数据专业毕业设计：基于Hadoop的疫情分析系统
本系统基于Hadoop设计开发一个疫情分析系统，该系统的主要功能分为疫情数据采集与存储、疫情数据分析、疫情数据可视化。通过收集和爬虫方式获取疫情数据并通过Flume传输；将分析结果和数据通过Sqoop传输至MySQL，采用SpringBoot进行后端搭建并通过ECharts图形库在前端用Vue框架实现数据可视化，将疫情信息图表化显示。将分析数据通过sqoop传输到MySQL，通过spring boot和vue进行可视化展示。通过网络收集历史数据+爬虫获取实时数据（丁香医生）+Flume采集到。
2025-06-10 19:11:17
354
原创 xcall.sh jps脚本，bash: jps: command not found
在搭建Hadoop集群时候，想着写一个脚本查看各个主机的节点启动情况，但遇到了一些小麻烦，在此记录一下。将文件复制到bin目录下：cp xcall.sh /bin。赋予脚本权限：chmod 777 xcall.sh。重新运行，问题解决！
2024-10-21 15:27:31
506
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人