kkkkkc丶-CSDN博客

原创 MapReduce核心思想

第一章 Map1.1 InputFormat数据输入1.2 map阶段一个job的map阶段并行度由客户端在提交job的时候的切片决定每个split切片分配一个maptask，每个maptask是并行运行每个切片数的大小由块大小决定：split.size = block.size切片时不考虑数据集的整体，而是针对每个文件进行切片每个maptask运行在哪个节点是根据节点上的资源来决定的具体maptask运算过程按行处理，读数据按空格切分行内单词形成kv键值对<单词， 1&g

2021-07-16 20:03:03 274 2

原创 Hive总结

第一章 Hive基本概念1.架构原理cli:客户端命令行，可以在这里写sql①.sql parser：sql解析器，得到sql以后，先解析，再通过元数据，可以在mysql中找到对应的元数据关系，这是一个准备阶段；②.physical plan：编译器，将sql解析成一个mr的执行流程；③.query optimizer：优化器，由于sql直接生成一个mr任务计划的时候，运行效率不一定高，所以会对sql进行一个内部优化；④.execution：执行器，开始一个mr任务。2.Hive和数据库比较

2021-07-15 22:17:04 312 1

原创 Java实现快速排序。

import java.util.Arrays;public class QuickSort { public static void main(String[] args) { int[] arr = {5, 2, 1, 4, 8, 9, 3, 12, 16, 11, 20}; sort(arr); System.out.println(Arrays.toString(arr)); } public static void s

2021-04-15 11:20:45 124

原创 Java中类和对象的初始化

成员变量初始化方式：成员变量为以下数据类型时，都是有默认值的，这叫默认初始化赋值：基本数据类型：short char byte int long float double；引用数据类型：接口类数组。显示赋值，在创建成员变量时，就直接在等号右边赋上相应的值,显示赋值一般都是赋常量值：public class Person {private String name = “小明”;private int age = 23;}代码块初始化赋值：静态代码块初始化，只能初始化静态变量

2021-04-10 22:25:39 422

原创 Java this和super的理解

thisthis的含义this代表当前对象的引用。this使用位置this在实例初始化相关的代码块和构造器中：表示正在创建的那个实例对象，即正在new谁，this就代表谁。this在非静态实例方法中：表示调用该方法的对象，即谁在调用，this就代表谁。this不能出现在静态代码块和静态方法中。this使用格式this.成员变量名当方法的局部变量与当前对象的成员变量重名时，就可以在成员变量前面加this.，如果没有重名问题，就可以省略this。this.成员变量会先从本类声明的成员变量列表

2021-04-10 22:24:55 127

原创 Java多态的理解

多态的定义：在有继承和子类重写的前提下，将父类对象的引用指向子类对象。示例：class Father {}class Son extends Father {}Father fa = new Son();多态的理解：编译看左边，运行看右边。在代码编译时，表现的是父类特征，运行时表现的是子类的特征。多态的好处：增加代码的复用，减少冗余。降低类与类之间的耦合。多态的应用：在形参class Animal {public void walk() {sysout(“动物走路”);

2021-04-10 22:24:23 95

原创 Java继承的理解

继承：一个子类只可以有一个父类，而一个父类可以有多个子类；好处：提高代码复用性；提高代码扩展性；类与类之间产生了联系，是多态的前提3. 弊端：增加了类与类之间的耦合性；继承的格式：// 用extends关键字, 可以声明一个类继承于另一个类// 修饰符 class 子类 extends 父类 {}class Father {}class Son extends Father {}继承中成员变量的特点：子类可以继承父类的所有属性及方法，但是不能直接访问父类的私有属性；子类虽然不

2021-04-10 22:23:43 370

原创对Java封装的理解

封装：通俗来说就是将该隐藏的隐藏，该暴露的暴露，若需要访问就只能通过指定的方式去获取或者修改。通过相应的权限修饰符，可以将某些数据隐藏起来。权限修饰符：修饰符本类本包其他包子类任意位置private √ × × ×缺省(default) √ √ × × protected √ √ √ ×public √ √ √ √权限修饰符可修饰的类型：外部类：public 缺省；成员

2021-04-10 22:22:45 294

qq_34900568的博客