- 博客(10)
- 收藏
- 关注
RSS订阅原创 Spark的复习整理
对 1~10根据奇偶性进行分组，因此 groupBy ()方法传入的参数是一个计算偶数的函数，得到的结果是一个映射，包含两个键值对，键为 false 对应的值为奇数列表，键为true对应的值为偶数列表。使用flatMap()方法时先进行map（映射）再进行flat（扁平化）操作，数据会先经过跟map一样的操作，为每一条输入返回一个迭代器（可迭代的数据类型），然后将所得到的不同级别的迭代器中的元素全部当成同级别的元素，返回一个元素级别全部相同的RDD。两个RDD的顺序会影响结果。
2024-05-16 18:56:14
869
原创 无人售货机分析
1.库存分析：对无人售货机库存情况进行大屏可视化展示，如图所示。由图可以看出，在不同区域中，体育馆的无人售货机缺货总量最多；在不同商品品类中，碳酸饮料类的库存最多，商品的存货周转天数最大为9天，旺旺牛奶、沙琪玛、安慕希和营养快线的滞销金额较高使用矩形树图对各类商品的存货周转天数进行展示由图可以看出，井水豆腐香辣味、香芋面包和沙琪玛3种商品的存货周转天数最大使用簇状柱状-折线图对商品的滞销金额、库存数量和存货周转率进行展示，如图所示，绘制下图的代码详见charts.int.js文件。
2024-05-13 11:31:46
748
1
原创 词云图（爱心形状）
/生成随机的字体颜色。"name": "家居家装关注品牌","name": "K12课程培训","name": "移动APP购物","name": "给陌生的你听","name": "远途出行方式","name": "旅游网站偏好","name": "基础教育科目","name": "高等教育专业","name": "体育赛事项目","name": "家电关注品牌","name": "办公数码设备","name": "个人护理电器","name": "母婴护理服务","name": "宝宝洗护用品",
2024-04-08 17:40:40
1889
原创 Scala函数练习
1、定义一个高阶函数，按照指定的规则对集合里面的每个元素进行操作，比如: Array(“hh”,“red”,“java”,“hadoop”)规则: 对集合中每个元素进行操作，得到集合每个元素的长度2、定义一个高阶函数，对数据中的元素按照指定的规则进行过滤比如: Array(1,4,7,9,10,6,8,99,88,66)规则: 只保留偶数数据3、对数据中的元素按照指定规则进行分组比如:List("张三,深圳,男","王五,北京,男","刘六,北京,女")规则: 按照地址进行
2024-03-25 08:41:17
126
1
原创 在idea里搭建Scala环境
在IDEA安装Scala插件，下载第一个。1，下载安装Inteilj IDEA。在Scala类中编写Scala程序。打开IDEA进入此页面即安装成功。2，下载安装Scala插件。
2024-03-17 21:23:08
366
1
原创 直升机坠机了，今天来教大家有点小难度的spark和scala的安装部署
首先下载Scala和spark的安装包Scala安装包spark安装包修改网关连接xshell将安装包使用导入到虚拟机。
2024-03-10 12:12:16
1592
1
原创 spark与scala的简要概述（灵感像直升机一样飞涨）
Spark 应用程序计算的整个过程可以调用不同的组件，如 Spark Streaming 的实时流处理应用、SparkSQL的即席查询、BlinkDB 的权衡查询、MLlib/MLBase 的机器学习、GraphX的图处理和SparkR的数学计算等。Scala 是一种纯粹的面向对象的语言，每个值都是对象。一般情况下，对于迭代次数较多的应用程序，Spark程序在内存中的运行速度是Hadoop MapReduce运行速度的100多倍，在磁盘上的运行速度是Hadoop MapReduce运行速度的10多倍。
2024-03-10 11:44:41
755
1
原创 VS code 安装教程与创建
官网下载Download Visual Studio Code - Mac, Linux, Windows。在创建的java文件中分别建立css,image,js,并导入两个文件。创建工作区文件并建立css和js，在js中导入两个文件。安装javaScript和HTML Snippets。安装open in browser v2.0.0。右击选择第一个或者alt+b直接打开。新建文本文件，导入代码实现效果。创建一个java文件。导入代码实现图片展示。
2024-03-04 11:39:45
369
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人