Scala
Java架构师联盟
这个作者很懒,什么都没留下…
展开
-
阿里大数据专家图解sparkRDD(附代码实操)
在开始学习Spark工作原理之前, 先来介绍一下Spark中两个最为重要的概念-- 弹性分布式数据集(Resilient Distributed Datasets, RDD) 和算子(Operation). RDD背景 Spark的核心是建立在RDD之上, 使Spark中的各个组件可以无缝进行集成, 从而在一个应用程序中完成大数据计算. 这也是为什么说在SparkCore中一切得计算都是基于RDD来完成的. RDD的设计理念源自AMP实验室发表的论文–Resilient Distributed.原创 2020-05-16 23:05:26 · 481 阅读 · 0 评论 -
大数据处理编程神器--Scala,确定不学习一下吗?
Scala字符串 Scala中字符串也是分为两种: 可变长度的StringBuilder和不可变长度的String, 其操作用法与Java几乎一致. 接下来, 通过代码来查看常用方法 //定义字符串 val str1 = "Hello Scala" var str2 = "Hello Scala" var str2_1 = "hello scala" //字符串比较 println(str1 == str2) println(str1.equals(str2)) println(str1.equ原创 2020-05-14 22:38:52 · 239 阅读 · 0 评论 -
整理常用Scala函数代码供大家参考(附wordcount源码)
随着大数据的发展,spark逐渐成为主流技术之一,而且支撑的scala语言也成为做大数据热门的编程语言之一,在家无聊,就将scala中一些常用的的scala的高端函数以及set、map等代码进行整理,在最后有一个完整的wordcount大数据入门源码 偏应用函数 偏应用函数是一种表达式,不需要提供函数需要的所有参数,只需要提供部分,或不提供所需参数。 /** * 偏应用...原创 2020-03-24 16:01:18 · 383 阅读 · 0 评论