- 博客(12)
- 收藏
- 关注
RSS订阅原创 Spark大数据技术与应用-----总结
Apache Spark是一个开源的、强大的分布式查询和处理引擎，它提供MapReduce的灵活性和可扩展性，但速度明显要快上很多；拿数据存储在内存中的时候来说，它比Apache Hadoop 快100倍，访问磁盘时也要快上10倍。Spark 是一种由 Scala 语言开发的快速、通用、可扩展的大数据分析引擎。Spark Core：Spark Core包含Spark的基本功能，如内存计算、任务调度、部署模式、故障恢复、存储管理等。
2024-05-16 00:41:16
689
原创 词云图绘制
rotationRange rotationStep ：词云中文字的角度，词云中的文字会随机的在 rotationRange 范围内旋转角度，渲染的梯度就是 rotationStep ，这个值越小，词云里出现的角度种类就越多。sizeRange ：词云的文字字号范围，默认是[12, 60] ，词云会根据提供原始数据的 value 对文字的字号进行渲染。以默认值为例， value 最小的渲染为 12px ，最大的渲染为 60px ，中间的值按比例计算相应的数值。gridSize ：词云中每个词的间距。
2024-04-09 16:52:21
587
原创 Echarts绘制雷达，浏览，多雷达图形
多维数据展示：雷达图通常用于展示多个维度的数据，每个维度在坐标系中对应一个坐标轴，数据点的位置表示了各个维度的数值大小。这样可以方便地比较不同维度之间的差异或者比较不同组之间的差异。明确的数据对比：雷达图通过多个维度的数据在同一坐标系下的展示，可以直观地比较不同数据点之间的差异。交互操作丰富：Echarts雷达图支持选中、高亮、点击事件等交互操作，用户可以与雷达图进行交互，进行数据的筛选和查看。兼容性强：Echarts雷达图能够兼容主流的浏览器，并且提供了响应式布局的功能，可以自适应不同的屏幕尺寸。
2024-04-01 11:44:46
387
原创 scala高阶函数练习题
比如: Array(“hh”,“red”,“java”,“hadoop”)比如: Array(1,4,7,9,10,6,8,99,88,66)1、定义一个高阶函数，按照指定的规则对集合里面的每个元素进行操作。2、定义一个高阶函数，对数据中的元素按照指定的规则进行过滤。规则: 对集合中每个元素进行操作，得到集合每个元素的长度。比如:Array(10,4,6,10,2)3、对数据中的元素按照指定规则进行分组。4、根据指定规则对数组所有元素聚合。规则: 按照地址进行分组。规则: 只保留偶数数据。
2024-03-21 20:10:16
225
1
原创 数据可视化-ECharts Html项目实战
其次，准备一个具备大小(weight与height)的div容器，并使用init()方法初始化容器。最后设置标准条形图的配置项、“性别”与“入会方式”数据完成标准条形图绘制。“会员信息表.xlsx”文件记录了某鲜花店销售系统上的会员信息，具体内容包括会“华面 员编号、姓名、性别、年龄、城市、入会方式、会员级别、会员入会日、VIP建立日、注意） 购买总金额、购买总次数等信息。最后设置环形图个具备大小(weight与hcight)的div容器，并使的配置项和“入会方式”数据完成环形图绘制。
2024-03-19 16:44:31
1014
1
原创 idea安装scala
7.找到src——>wjrnb（刚创建包的名称，这里的包就相当于windows下的文件夹）——>scala Class 创建scala类。3.搜索scala，这里因为scala我以前已经安装过了，搜索之后会出现如下界面，找到scala，点击instal进行下载即可。1.现在我们来新建一个scala项目，点击file——>new——>project。4.下载好之后会出现如下界面，点击右上角的restart IDE，重启即可。会跳出这样一个界面，找到自己安装scala的版本，点击ok即可。
2024-03-14 20:03:50
821
1
原创 第五：Spark启动！
一.什么是SparkSpark是一种基于内存的快速、通用、可扩展的大数据分析计算引擎。是加州大学伯克利分校AMP实验室（Algorithms, Machines, and People Lab）开发的通用内存并行计算框架Spark得到了众多大数据公司的支持，这些公司包括Hortonworks、IBM、Intel、Cloudera、MapR、Pivotal、百度、阿里、腾讯、京东、携程、优酷土豆。当前百度的Spark已应用于大搜索、直达号、百度大数据等业务；
2024-03-06 20:29:20
1695
1
原创 VSCode安装流程与基础操作
2.在文件夹里new一个Folder，并分别命名为css，js，image。3.建立html file，new然后other，找到web建立。1.查询VSCode官网并下载。3.将echarts文件拖进js中并添加html。5.将案例一导入NewFile.html中。5.最后保存至“1”文件夹中并右键运行。6.保存并运行到web浏览器，出效果图。3.单击运行开始安装并选择目标位置。1.在桌面新建文件夹并添加到工作区。2.新建文件夹添加css，js。1.新建java文件并命名。一.VSCode的下载安装。
2024-03-04 16:03:07
338
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人