大数据
文章平均质量分 79
贪狼切
这个作者很懒,什么都没留下…
展开
-
scala中常见MAP操作
先感谢大佬,转载以备自己使用原文:https://blog.csdn.net/xianpanjia4616/article/details/80947616Map(映射)是一种可迭代的键值对(key/value)结构。所有的值都可以通过键来获取。Map 中的键都是唯一的。Map 也叫哈希表(Hash tables)。Map 有两种类型,可变与不可变,区别在于可变对象可以修改它,而不可变...转载 2019-05-24 22:26:22 · 512 阅读 · 0 评论 -
scala中List的常见操作
参考自:https://blog.csdn.net/xianpanjia4616/article/details/84930779https://blog.csdn.net/hguo11/article/details/81585158Scala 列表类似于数组,它们所有元素的类型都相同,但是它们也有所不同:列表是不可变的,值一旦被定义了就不能改变,其次列表 具有递归的结构(也就是链接表结构)...转载 2019-05-24 22:46:01 · 9477 阅读 · 0 评论 -
win7下IDEA maven scala环境配置及wordcount遇到的坑
IDEA maven scala环境配置自己折腾了两天。看了网上环境配置的文档和慕课的视频教程,被弄得迷迷糊糊的。这里自己梳理一下,希望对大家有所帮互助。环境安装可以参考着两个网站:https://blog.csdn.net/chengyuqiang/article/details/77925606https://www.jianshu.com/p/32b74feb55e2其中,第二个网...原创 2019-05-18 19:13:12 · 307 阅读 · 1 评论 -
Graphx中pregel详解及具体应用分析(以最短路径为例)
Spark Pregel参数说明Pregel是个强大的基于图的迭代算法,也是Spark中的一个迭代应用aggregateMessage的典型案例,用它可以在图中方便的迭代计算,如最短路径、关键路径、n度关系等。然而对于之前对图计算接触不多的童鞋来说,这个api还算是一个比较重量组的接口,不太容易理解。 Spark中的Pregel定义如下:def pregel[A: ClassTag]( ...原创 2019-06-06 09:11:23 · 2795 阅读 · 2 评论