蛋蛋淡淡定的庄园

springBoot 注解大全

spark-submit提交job任务解决三方依赖方案spark-submit提交job任务解决三方依赖方案spark-submit提交job任务解决三方依赖方案在spark 安装目录spark/jars 下面添加需要加装的jar包，此方法需要在每个节点都放入jar包或者在spark/conf/spark-defaults.conf 文件下面添加如下两行spark.executor.extraClassPath=/root/bigData/apache-maven-3.6.3/lib/*spar

Spark零基础入门第十一课：sparkSQL没有看前面的同学可以回顾一下：10.Spark零基础入门第十课：spark数据倾斜后怎么办？？9.Spark性能优化-开发调优8.SparkCore 调优之内存模型8.SparkCore 调优之内存模型7.SparkCore 核心知识复习与核心机制详解6.Spark共享变量之累加器和广播变量的使用！！！5.RDD常用算子用法训练（附习题答案）（aggregateByKey与combineByKey）！！！4.Spark Rdd常用算子和RD

Spark零基础入门第九课：spark数据倾斜没有看前面的同学可以回顾一下：9.Spark性能优化-开发调优8.SparkCore 调优之内存模型8.SparkCore 调优之内存模型7.SparkCore 核心知识复习与核心机制详解6.Spark共享变量之累加器和广播变量的使用！！！5.RDD常用算子用法训练（附习题答案）（aggregateByKey与combineByKey）！！！4.Spark Rdd常用算子和RDD必备知识3.spark core 核心知识2.spark 之

Spark零基础入门第九课没有看前面的同学可以回顾一下：8.SparkCore 调优之内存模型7.SparkCore 核心知识复习与核心机制详解6.Spark共享变量之累加器和广播变量的使用！！！5.RDD常用算子用法训练（附习题答案）（aggregateByKey与combineByKey）！！！4.Spark Rdd常用算子和RDD必备知识3.spark core 核心知识2.spark 之 wordcount入门1.spark 入门讲解...

Kafka安装步骤：1.安装JDK1.81 .1 安装：2.安装zookeeper （配置单机模式）2.1 下载地址：[http://mirrors.hust.edu.cn/apache/zookeeper/](http://mirrors.hust.edu.cn/apache/zookeeper/)3. 安装kafka：3.1 下载3.2修改配置文件：3.3测试生产消费：启动ZK启动Kafka创建topic查看topic list生产消息消费消息从0开始消费所有消息1.安装JDK1.8首先kafka.

leetcode 国内网站：https://leetcode-cn.com/problemset/all/给定一个无序的整数数组，找到其中最长上升子序列的长度。示例:输入: [10,9,2,5,3,7,101,18]输出: 4解释: 最长的上升子序列是 [2,3,7,101]，它的长度是 4。说明:可能会有多种最长上升子序列的组合，你只需要输出对应的长度即可。你算法的时间复杂度应该为 O(n2) 。进阶: 你能将算法的时间复杂度降低到 O(n log n) 吗?//动态规划

Spark零基础入门第八课没有看前面的同学可以回顾一下：7.SparkCore 核心知识复习与核心机制详解6.Spark共享变量之累加器和广播变量的使用！！！5.RDD常用算子用法训练（附习题答案）（aggregateByKey与combineByKey）！！！4.Spark Rdd常用算子和RDD必备知识3.spark core 核心知识2.spark 之 wordcount入门1.spark 入门讲解...

leetcode 国内网站：https://leetcode-cn.com/problemset/all/感觉第一个还是很简单的，O(∩_∩)O哈哈~，可能我还没有被现实打击吧，分享给大家，希望大家可以一起进步！！ public boolean containsDuplicate(int[] nums) { int a = 0; Arrays.sort(nums); for(int i=0;i<nums.length-1;i++){

Spark零基础入门第七课Spark 的核心概念 ：Spark 运行架构特点Spark运行架构图：spark stage 阶段划分算法图：spark-on-yarn 模式图：sparkContext的构建的过程Spark MasterHA机制Worker节点的原理没有看前面的同学可以回顾一下：**6.Spark共享变量之累加器和广播变量的使用！！！5.RDD常用算子用法训练（附习题答案）（aggregateByKey与combineByKey）！！！4.Spark Rdd常用算子和RDD必备知识

Spark零基础入门第六课1. spark共享变量（Shared Variables）1.1 简介：1.2 为什么要定义广播变量 ：1.3 、如何定义和还原一个广播变量 ：2. Accumulators（累加器）2.1 为什么要定义累加器 :2.2 如果定义和还原一个累加器3. 自定义累加器：每日福利来一个。没有看前面的同学可以回顾一下：5.RDD常用算子用法训练（附习题答案）（aggregateByKey与combineByKey）！！！4.Spark Rdd常用算子和RDD必备知识3.sp

自述大家一说到程序员肯定都会想到高工资，可是我的生活为什么和别人口中的那么不一致呢?有时候都会觉得自己是一个假的程序猿了。感觉上面这图很好的表现了我现在的生活。那么首先来说说我这大学到毕业都经历了什么吧：首先自我介绍一下，本博主已经是一个24的小伙子了，刚刚出社会，面临着巨大的压力，每天都是过着2点一线的生活，在大学学的是物联网专业搞硬件嵌入式的，后来在大3的时候才决定放弃硬件转行软件行业，这其中的艰辛啊，真的还是比较难受的，因为感觉软件要学习的东西实在是太多了，完全没有自己的方向，后来是因为什么.

Spark零基础入门第五课常见的transformation算子练习：常用的action算子练习：在这些基本的了解之后，给大家来两个高级调优的聚合算子的用过：combineByKeyaggregateByKey**最后我们做一些练习巩固一下常用算子：**拉钩网职位数据练习题每日福利来一个，话不多说，我们直接开始今天的spark RDD的实战练习代码，我们学习编程，还是要多实战，在实战中我们才能领悟到平时很难理解的知识点，下面我们开始我们今天的训练吧！没有看前面的同学可以回顾一下：4.Spark Rd

Spark零基础入门第三课1. RDD1.1 什么是RDD1.2 RDD 的属性2. 创建 RDD3. RDD常见的算子介绍3.1 Transformation 类算子：3.2 action 类算子：3.3 WordCount 中的 RDD4. RDD的依赖关系4.1 窄依赖和宽依赖对比4.2、窄依赖和宽依赖总结4.3、Lineage5. DAG 生成6. RDD 缓存6.1 RDD 的缓存方式每日福利来一个，话不多说，我们直接开始今天的spark的学习，之前我们学习了Spark的基础原理，和概念，然后

感觉这一天天的，上班是真的混，没有一个比你厉害的带你，都靠自己学习，你觉得这样的公司可以一直待下去吗???!!!还是多学习算法，思维，到时候去面试薪资翻倍不是梦啊！【61】你有两个罐子，50个红色弹球，50个蓝色弹球，随机选出一个罐子，随机选取出一个弹球放入罐子，怎么给红色弹球最大的选中机会？在你的计划中，得到红球的准确几率是多少？答案：一个罐子放一个红球，另一个罐子放49个红球和50个...

感觉这一天天的，上班是真的混，没有一个比你厉害的带你，都靠自己学习，你觉得这样的公司可以一直待下去吗???!!!还是多学习算法，思维，到时候去面试薪资翻倍不是梦啊！【41】有23枚硬币在桌上，10枚正面朝上。假设别人蒙住你的眼睛，而你的手又摸不出硬币的反正面。让你用最好的方法把这些硬币分成两堆，每堆正面朝上的硬币个数相同。【42】三个村庄A、B、C和三个城镇A、B、C坐落在如图所示的环形...

最近想做一个微信小程序，所以蹭着优惠买了一个阿里的服务器，还挺好用的，大家可以买一个学习学习，特别是学生，优惠力度特别大，链接：阿里云学生服务器购买地址首先你进入网站就可以看到：我买的是轻量应用服务器，因为我需求是需要一定网速来支撑的，所以买的下面的，然后你不是很需要网速可以考虑ECS。然后进入点击购买：当然我不是学生所以贵很多，学生的话，就是一年114就可以买到，还可以续约的。...

Spark零基础入门第三课1. Spark作业调度方式1.1 cluster 和 client 的区别2. spark 核心功能介绍：2.1 SparkContext2.2 存储体系2.3 计算引擎2.4 部署模式3. Spark 扩展功能3.1 Spark SQL3.2 Spark Streaming3.3 Spark GraphX3.4 Spark MLlib4. spark基本结构spark...