![](https://img-blog.csdnimg.cn/20201014180756738.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Spark
ʚ 秃头小宝贝ɞ
这个作者很懒,什么都没留下…
展开
-
Spark读取redis
Spark读取redis数据,映射成表原创 2022-04-25 10:33:52 · 1689 阅读 · 0 评论 -
Spark如何确定数据倾斜的key
使用sample抽样获取数据倾斜的key object SparkDataSkew { def main(args: Array[String]): Unit = { val sparkConf: SparkConf = new SparkConf() .setMaster("local") .setAppName("data_skew_key") val sparkContext = new SparkContext(sparkConf) val rd原创 2021-12-01 16:56:25 · 1099 阅读 · 0 评论