hadoop-spark
CalicoBox
人生苦短,唯有全栈。青青子衿,还有诗意。
进了大数据的坑,走的磕磕绊绊,想想还是帮后来人把坑填一填吧。
(关于博客,内容全是记录在xx云笔记上的杂物,当时没有想到会要搬到博客上,所以有些内容会与其他博客相同,毕竟就是复制粘贴的,若有侵权,告知必改!还望谅解。)
展开
-
一个Spark Demo与代码详解
一个Spark Demo与代码详解原创 2017-08-04 18:01:48 · 1327 阅读 · 0 评论 -
Spark转换(transform)与动作(action)一览
【说的很特么抽象,能看得懂算你厉害啊,所以代码详解:一个Spark Demo与代码详解以下func,大部分时候为了让逻辑更清楚,推荐使用匿名函数!(lambda)】【ps:java和python的api是一样的,名字和参数没有变化】转换含义map(func)每一个输入元素经过func函数转换后输出一个元素fil翻译 2017-08-04 17:59:01 · 3779 阅读 · 0 评论