- 博客(4)
- 资源 (3)
- 收藏
- 关注
原创 Centos6.5镜像下载
CentOS6.5系统安装1、首先打开网易开源镜像站: http://mirrors.163.com/当然,大家也可以使用阿里开源镜像站:http://mirrors.aliyun.com/2、我们打开里面的readme文件,找到下载地址:http://vault.centos.org/3、点击进入isos/目录。4、选择点击进入CentOS-6.5-x86_64-bin-DVD1.is...
2018-11-01 14:19:53 5768 2
转载 jupyter scala kernel
在Windows上安装jupyter notebook的scala kernel1、下载 scala kernel 文件https://blog.csdn.net/xiligey1/article/details/802645742、解压缩,查看readme.txt,里面的详细步骤如下: 1、复制 coursier文件夹到 %USERPROFILE%目录下 2、复制 scala文件夹到...
2018-10-23 20:03:42 688
原创 aggregat和aggregateByKey用法
aggregate用法 —先局部再全局计算val rdd2= sc.parallelize(List(1,2,3,4,5,6,7,8),2)其中rdd2被分为两个分区,0分区的数据是1,2,3,4;1分区的数据是5,6,7,8rdd2.aggregate(0)(math.max(_,_),_+_) 结果是12分析:初始值0和第一个分区的数据比较,取最大值4,然后初始值0和第二个分区的数据...
2018-10-18 08:17:23 1822
转载 Spark函数详解系列之RDD基本转换
(https://www.cnblogs.com/MOBIN/p/5373256.html)引用大神的帖子,写的很不错,记录一下
2018-08-15 14:13:14 146
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人