- 博客(6)
- 收藏
- 关注
RSS订阅原创 比较器Comparable和Comparator
package 比较器;import java.util.Arrays;import java.util.Comparator;class Employee implements Comparable<Employee>{ private int no; private String name; public Employee() { super(); // T...
2019-05-18 17:55:55
83
原创 数组复制以及arrays方法
package 数组排序和二分查找和调用方法;import java.util.Arrays;/**数组复制*/public class TestArrayCopy { public static void main(String[] args) { int [] arr = {1,2,3,4,5}; //方法一 int []arr1=new int[arr.length...
2019-05-18 17:37:08
659
转载 Spark性能优化指南——高级篇
继基础篇讲解了每个Spark开发人员都必须熟知的开发调优与资源调优之后，本文作为《Spark性能优化指南》的高级篇，将深入分析数据倾斜调优与shuffle调优，以解决更加棘手的性能问题。调优概述有的时候，我们可能会遇到大数据计算中一个最棘手的问题——数据倾斜，此时Spark作业的性能会比期望差很多。数据倾斜调优，就是使用各种技术方案解决不同类型的数据倾斜问题，以保证Spark作业的性能。数据...
2019-01-26 20:17:52
120
转载 Spark性能优化指南——基础篇
在大数据计算领域，Spark已经成为了越来越流行、越来越受欢迎的计算平台之一。Spark的功能涵盖了大数据领域的离线批处理、SQL类处理、流式/实时计算、机器学习、图计算等各种不同类型的计算操作，应用范围与前景非常广泛。在美团•大众点评，已经有很多同学在各种项目中尝试使用Spark。大多数同学（包括笔者在内），最初开始尝试使用Spark的原因很简单，主要就是为了让大数据计算作业的执行速度更快、性能...
2019-01-26 20:06:40
101
原创 Namenode 服务器的磁盘故障导致 namenode 宕机，如何挽救集群及数据？
NameNode 对数据的管理采用了两种存储形式：内存和磁盘首先是内存中存储了一份完整的元数据，包括目录树结构，以及文件和数据块和副本存储地的映射关系；1、内存元数据 metadata（全部存在内存中）其次是在磁盘中也存储了一份完整的元数据。有三种格式：2、磁盘元数据镜像文件fsimage_0000000000000000666fsimage_0000000000000000666...
2019-01-23 10:32:12
1418
原创 冒泡排序，选择排序，插入排序，快速排序，归并排序，计数排序，二分查找
1. 冒泡排序，package 排序算法;public class MaoPaoPaiXu { public static void main(String[] args) { int [] maopao= {1,3,45,3,7,2,5,65,12}; int temp; /** * 外循环轮 内循环比较 * 从第一个元素开始相邻的两个元素比较,把小的元素往前...
2019-01-21 21:31:04
554
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人