- 博客(7)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 Spark代码可读性与性能优化——示例五（MapJoin）
文章目录Spark代码可读性与性能优化——示例五（HashJoin）1. 内容点大纲2. 原代码3. 优化后的代码+注释Spark代码可读性与性能优化——示例五（HashJoin）1. 内容点大纲数据集之间的Join大数据集、小数据集数据倾斜减少Shuffle更好的写法 flatMap + Some + None广播常见的陷阱*注意：和前面文章内容重复的不再做提示，已直接修改...
2019-04-26 00:10:26
4035
1
原创 Scala方法和函数的本质区别——反编译解析
文章目录Scala的方法和函数有什么区别——反编译解析1. 方法-解析1.1 普通方法1.2 嵌套方法2. 函数-解析2.1 函数示例2.2 反编译结果2.3 函数反编译解析3. 为什么方法和函数可以相互转换？3.1 方法和函数混用示例3.2 方法与函数转换-解析3.3 混用示例-解析Scala的方法和函数有什么区别——反编译解析1. 方法-解析1.1 普通方法普通方法，即平常在clas...
2019-04-15 23:32:43
3608
原创 Spark代码可读性与性能优化——示例四
文章目录Spark代码可读性与性能优化——示例四1. 内容点大纲2. 原代码（来自GitHub）3. 优化后的代码+注释Spark代码可读性与性能优化——示例四1. 内容点大纲更简洁的写法易懂的写法返回类型提示本地打印提示代码换行提示占位符提示*注意：和前面文章内容重复的不再做提示，已直接修改2. 原代码（来自GitHub）import org.apache.spark....
2019-04-15 00:35:06
803
1
原创 Spark代码可读性与性能优化——示例三
文章目录Spark代码可读性与性能优化——示例二1. 内容点大纲2. 原代码（来自GitHub）3. 优化后的代码+注释Spark代码可读性与性能优化——示例二1. 内容点大纲无意义代码清除提示数据本地获取提示unpersist解除缓存优化提示使用匹配模式的提示代码简写提示*注意：和前面文章内容重复的不再做提示，已直接修改2. 原代码（来自GitHub）import sca...
2019-04-10 01:16:20
891
1
原创 Spark代码可读性与性能优化——示例二
文章目录Spark代码可读性与性能优化——示例二1. 内容点大纲2. 原代码（来自GitHub）3. 优化后的代码+注释Spark代码可读性与性能优化——示例二1. 内容点大纲SparkConf可读性提示Scala语法可读性提示方法默认值提示代码冗余写法提示函数式写法提示persist缓存性能优化提示sc.stop()性能优化提示注意：不同示例之间的内容点经常会有重复，意在强...
2019-04-06 13:51:48
804
1
原创 Spark代码可读性与性能优化——示例一
文章目录Spark代码可读性与性能优化——示例一1. 内容大纲2. 原代码（来自GitHub）3. 优化后的代码+注释Spark代码可读性与性能优化——示例一1. 内容大纲SparkConf可读性提示Scala语法可读性提示mkString可读性提示persist缓存性能优化提示sc.stop()性能优化提示2. 原代码（来自GitHub）import org.apache....
2019-04-06 13:19:04
880
1
原创 RustBook——WebServer学习示例+注释
文章目录Rust——WebServer示例的学习+注释项目结构Main入口——main.rsLib库——lib.rsHtml文件——hello.html和404.htmlCargo配置——Cargo.toml和Cargo.lockRust——WebServer示例的学习+注释项目结构- hello_web - src - main.rs - lib.rs - Cargo.lock...
2019-04-01 15:36:23
887
ProtobufForJavaAndWindows.zip
2019-08-22
KryoForJavaAndScala.zip
2019-08-22
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人