- 博客(4)
- 收藏
- 关注
RSS订阅原创 Spark--模拟生成电商销售数据
1.2.将Spark的包下载下来，并将它解压到虚拟机上，放在/usr/local/路径下3.修改Spark配置文件得到一个 spark-env.sh文件;;得到一个slaves文件;(5) 将slaves内容改为虚拟机的主机名。4.启动Spark切换路径：启动命令：5.验证Spark是否部署成功，至此完成了平台搭建（Hadoop+Spark）
2023-11-07 21:06:02
120
原创 JAVA---后端开发中实现分页功能
Java开发是一门广泛应用于各种软件系统和网络应用的重要技术。在实际开发中，经常需要处理大量的数据和结果集，而分页功能则成为了提高用户体验和系统性能的关键。分页是将大数据集按照固定大小划分成多页并逐页显示的过程，能够有效减少数据传输量和页面加载时间，提升用户浏览效率。在Java后端开发中，实现分页功能可以应用多种方法和技术。可以使用第三方的分页插件或框架来简化分页的操作和管理，如Spring Data JPA的分页支持。在本文中，将探讨Java后端开发中实现分页功能的方法和技巧。
2023-07-01 10:32:11
3381
原创 Hadoop-模拟生成新能源车辆数据并上传到HDFS
比如假设程序是2023-01-1 03点运行，那么就将当前模拟生成的数据写入到HDFS的/can_data/2023-01-01文件夹的can-2023-01-01.json文件中，写满100M，则继续写到can-2023-01-01.json.2文件中，依次类推；（2）看题目要求：每天生成的数据中要混有少量前几天的数据（即数据生成时间不是当天，而是前几天的），所以我们要添加前几天的数据；3、每天模拟生成的车辆数据中，必须至少包含20辆车的数据，即要含有20个车架号（一个车架号表示一辆车，用字符串表示）；
2023-06-22 20:36:09
329
原创 数据可视化及开发---基于销售数据对其进行可视化
1.引入pandas库；2.导入数据；data = pd . read_excel(r'折线图作业数据-商品销量(1).xlsx') data运行结果3.将时间对象转换成字符串，并提取片段，由上图的运行结果可以看到，日期列为时间对象序列所以我们对这个序列进行了一些处理，并用切片提取日期列中的月份和日x1 = data [ '日期' ] . agg(lambda x : str(x) [ 5 : 10 ]) . tolist() x1运行结果4.（1）.画折线图展示牛奶和面包的每日销量。
2023-06-09 13:02:13
597
2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人