- 博客(2)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 Spark常见算子总结
官方文档上列举共有32种常见算子，包括Transformation的20种操作和Action的12种操作。内容自己用心整理，看我的就够了Transformation：1.mapmap的输入变换函数应用于RDD中所有元素，而mapPartitions应用于所有分区。区别于mapPartitions主要在于调用粒度不同。如parallelize（1 to 10， 3），map函数执行10次，而...
2019-10-10 11:32:57
580
原创 Scala集合总结
Scala集合总结最近有时间看了一下Scala，总结了一下Scala集合，和大家分享一下。1.基本概念scala中的集合类可以分为三大类：1.Seq，是一组有序的元素，比如List，Array2.Set，是一组没有重复元素的集合。3.Map，是一组k-v对。Scala集合有三个基本操作：head 返回集合第一个元素tail 返回一个集合，包含除了第一元素之外的其他元素isEmp...
2019-09-26 19:56:12
336
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人