- 博客(8)
- 收藏
- 关注
RSS订阅原创 Spark知识点总结大全
aggregateByKey:在kv对的RDD中，按key将value进行分组合并，合并时，将每个value和初始值作为seq函数的参数，进行计算，返回的结果作为一个新的kv对，然后再将结果按照key进行合并，最后将每个分组的value传递给combine函数进行计算（先将前两个value进行计算，将返回结果和下一个value传给combine函数，以此类推），将key与计算结果作为一个新的kv对输出。一个函数一次处理所有分区。代码中是一个抽象类，它代表一个不可变、可分区、里面的元素可并行计算的集合。
2022-09-17 15:45:44
1940
原创 Idea常用快捷键
Ctrl+/ 或 Ctrl+Shift+/ 注释（// 或者/*...*/ ）选中文本，按Ctrl+Shift+F7 ，高亮显示所有该文本，按Esc高亮消失。30.Ctrl＋Alt＋Up /Ctrl＋Alt＋Down可以快速跳转搜索结果。16.Ctrl＋Alt＋T可以把代码包在一块内，例如try/catch。29.Ctrl＋Shift＋F7可以高亮当前元素在当前文件中的使用。Ctrl+Shift+Up/Down 代码向上/下移动。22.Ctrl＋/和Ctrl＋Shift＋/可以注释代码。
2022-09-15 14:16:16
1275
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人