自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

calorie的博客

java,大数据,spark,算法

  • 博客(29)
  • 资源 (5)
  • 收藏
  • 关注

原创 数据可视化工具

大数据可视化展示工具(开源免费)1.BIRTBIRT是一种开源BI软件,可用于创建数据可视化和报告,这些都可以嵌入到Web应用程序中。主要组件是可视化报表设计器,用于生成设计的运行时组件以及图表引擎。该平台拥有超过1200万的下载量以及BIRT开发人员中心的社区中心。2. ClicdataClicData提供ClicData Personal,它是仪表板软件的免费版本,可为单个用户提供...

2019-09-10 10:52:05 854

原创 HDFS内部原理解析

HDFS定义:它是一个分布式文件系统,用于存储大文件,分布式系统整合个多台机器的计算能力和存储能力,适合于一次写入数据,多次读出的场景,适合用于数据分析组成架构:NameNode:1,管理HDFS的命名空间2,配置副本策略3,管理数据块的映射信息4,处理客户端的读写请求DataNode:1,存储实际的数据块2,执行文件的的读写操作3,负责块的创建,删除Second...

2019-08-17 17:12:11 401

原创 正则表达式

正则表达式:正则是为了处理负责的文本,是一种强大灵活的文本工具,它可以通过自定义规则去匹配字符串,来进行一些数据的简单筛选.语法:例如:\d是匹配一个数字 \D就是匹配非数字–正则表达式的特殊符号如果被包含到中括号里,则会失去特殊意义,除了^ -之外–标准字符集合,除小数点外,如果被包含于中括号,自定义字符集合将包含该集合例如123456 --> \d{6}...

2019-07-23 21:56:34 142 1

原创 TreeSet自定义排重

TreeSet集合通常是用来对某个对象进行自定义规则排序,下面我们举个例子说明一下:public static void main(String[] args) { TreeSet<persion> a = new TreeSet<>(); Collections.addAll(a, new persion("小明", 17), new persion("小王",...

2019-07-18 18:05:42 444 1

原创 lambda函数式编程总结

lambda函数式编程总结lambda是java8版本的新特性,其主要针对于函数式接口(就是一个有且仅有一个抽象方法,但是可以有多个非抽象方法的接口)函数式语言提供了一种强大的功能——闭包(函数中,能访问函数外的变量,并且函数外的变量值改变后,会影响函数内的计算)相比于传统的编程方法有很多优势,闭包是一个可调用的对象,它记录了一些信息,这些信息来自于创建它的作用域。Java 现在提供的最接近...

2019-07-18 17:08:17 383 2

原创 深入理解java匿名内部类(详细)

匿名内部类匿名内部类是没有名字的类,它主要是为了重写抽象类和接口中的抽象方法(全部)下面通过代码演示可以清晰的感受到匿名内部类的用法及优点1.省略继承的过程public class NoName { public static void main(String[] args) { persion p1 = new xiaoming(); persion p1 = ne...

2019-07-17 21:53:45 850 1

原创 java中枚举enum常见用法

Java枚举总结:作用:在需要写入多个常量的时候,使用枚举更加的方便,而且安全性更高class text { public static final "星期一" public static final "星期二" public static final "星期三" public static final "...

2019-07-16 19:47:15 412

原创 java中comparable与comparator用处

Java比较器内部比较器: 实现comparable接口, 需要重写comparato方法ps:写在创建类的内部,例如写个persion类,比较年龄! 让类实现该接口,去重写compareto方法即可public class perison implements Comparable<Book> { // 实现比较 private String name; p...

2019-07-16 10:56:37 402

翻译 解开java中的锁

尊重原作者本文出处:https://tech.meituan.com/(有好多知识分享)前言Java提供了种类丰富的锁,每种锁因其特性的不同,在适当的场景下能够展现出非常高的效率。本文旨在对锁相关源码(本文中的源码来自JDK 8和Netty 3.10.6)、使用场景进行举例,为读者介绍主流锁的知识点,以及不同的锁的适用场景。Java中往往是按照是否含有某一特性来定义锁,我们通过特性将锁进行分...

2019-07-09 14:07:12 267

翻译 11个简单的Java性能调优技巧

作为开发人员我们都希望编写的程序拥有最佳的性能,但是这需要大量的经验和知识。优化应用程序以获得最佳性能并非易事。有几个易于遵循的建议和最佳实践可帮助创建性能良好的应用程序。1.在知道必须优化之前不要进行优化这可能是最重要的性能调优技巧之一。你应该遵循常见的最佳实践并尝试有效地实现你的用例。但这并不意味着你应该在证明必要之前替换任何标准库或构建复杂的优化。在大多数情况下,过早优化会占用大量时间...

2019-07-08 19:20:47 117

原创 Java算法和数据结构面试问题

1.数组面试问题数组是最基本的数据结构,它将元素存储在连续的内存位置。这也是采访者的一个主要话题,你会在任何编码访谈中听到很多关于数组的问题,例如反转数组,排序数组或搜索数组中的元素。如何在给定的1到100的整数数组中找到缺失的数字?如何在给定的整数数组上找到重复的数字?如何在未排序的整数数组中找到最大和最小的数字?你如何找到所有对的整数数组,其总和等于给定的数字?如果数组包含多个重...

2019-07-05 09:51:35 3756 3

翻译 数据仓库:过去,现在和未来

在当今世界,数据正在快速生成,尤其是几乎每个行业的企业都经历数字化转型。我们也看到了前所未有的需求,使每个业务决策者都能够访问实时数据,以便他们能够为业务做出最明智的决策。全球公司比以往任何时候都更多地将虚拟团队分散到世界各地,使他们能够使用所有可用数据做出明智的业务决策。例如,零售商不仅要考虑过去的购买和浏览历史,还要使用所有公开的客户信息,例如他们的专业和雇主,他们的观看和收听兴趣,体育和爱好...

2019-07-05 09:31:53 743 3

翻译 理解什么是大数据和Hadoop

HDFS是Hadoop系统的存储部分。它是块结构的文件系统,其中每个文件被分成预定大小的块。这些块存储在一台或多台机器的集群中。HDFS适用于两种类型的节点:NameNode(主节点)和DataNodes(从节点)Hadoop NameNodesNameNodes是HDFS文件系统的核心。它们保留文件系统中所有文件的目录树,并跟踪集群中数据的保存位置。它们不存储这些文件的数据。这是一台非常高效...

2019-07-05 09:25:14 426 2

翻译 Java NIO与IO

在研究Java NIO和IO API时,很快就会出现一个问题:我什么时候应该使用IO,什么时候应该使用NIO?在本文中,我将尝试阐明Java NIO和IO之间的差异,它们的用例以及它们如何影响代码的设计。Java NIO和IO的主要区别下表总结了Java NIO和IO之间的主要区别。我将在表格后面的部分中详细介绍每个区别。IONIO流导向缓冲导向阻止IO非阻...

2019-07-04 14:45:49 400 2

原创 面向对象(oop)结束篇(1)

继承1. 继承的基础语法在程序设计中,如果有多个具有逻辑关联的类,具有相同的特性和行为(属性和方法)。那么我们可以将这些相同的部分提取出来,做成另外的一个类。被提取出来的类,称作是 – 父类,基类,超类那些被提取共同点,具有逻辑关联的类,被称作 – 子类,派生类他们之间的关系,叫做 – 继承// Dog类继承自Animal类// Animal是父类// Dog是子类class D...

2019-07-03 19:52:35 102 1

原创 从宏观角度了解JVM

Java开发人员都知道字节码将由JRE(Java运行时环境)执行。但许多人不知道JRE是Java虚拟机(JVM)的实现,它分析字节码,解释代码并执行它。作为开发人员,了解JVM的体系结构非常重要,因为它使我们能够更有效地编写代码。在本文中,我们将更深入地了解Java中的JVM体系结构以及JVM的不同组件。什么是JVM?一个虚拟机是一个软件实现物理机。Java是在WORA(随时随地运行)的概念...

2019-07-03 19:41:37 397 1

转载 数据可视化工具

数据可视化无处不在,而且比以前任何时候都重要。无论是在行政演示中为数据点创建一个可视化进程,还是用可视化概念来细分客户,数据可视化都显得尤为重要。以前的工具的基本不能处理大数据。无论你是需要对数据进行分析并且决定用最好的方式向你的客户或同事进行展示,还是你心里有一个视觉化布局但需要将此概念应用到生活中,该表单中总会有一款工具能够满足你的需求。1.Polymaps需要在地图上展示复杂的数据集?P...

2019-07-03 09:43:59 1033

转载 Hive详解

Hive使用必知必会系列一、Hive的几种数据模型内部表 (Table 将数据保存到Hive 自己的数据仓库目录中:/usr/hive/warehouse)外部表 (External Table 相对于内部表,数据不在自己的数据仓库中,只保存数据的元信息)分区表 (Partition Table将数据按照设定的条件分开存储,提高查询效率,分区-----> 目录)桶表 (Buck...

2019-07-03 09:17:02 485

原创 面向对象(oop)进阶篇

面向对象进阶1. 包package: 组织文件的作用。将程序中在逻辑上具有关联关系的文件组织在一起。在一个类中,使用另外一个包中的类:1、使用类的全限定名全限定名:从最层的包开始,一层层的向我们想要使用的文件进行定位。例如 com.qianfeng.aexercise.two.Person2、使用关键字 import,导入想要使用的资源文件import java.util.Arra...

2019-07-02 21:25:57 349

原创 面向对象(oop)基础篇

面向对象基础1. 面向对象基础概念面向过程是一种看待问题、解决问题的思维方式。着眼点在于问题是如何一步步的解决的,然后亲力亲为的去解决这个问题面向对象是一种看待问题、解决问题的思维方式。着眼点在于找到一个能够帮助解决问题的实体,然后委托这个实体去解决问题把大象装冰箱:面向过程:1、打开冰箱门 --> 我2、把大象装进去 --> 我3、关上冰箱门 --> ...

2019-07-02 21:23:22 353

原创 选择排序

选择排序:固定一个元素的值,然后依次和后面每一个元素进行比较,若当前固定元素的值大于后面比较元素的值就进行交换,直到所有元素都比较完成之后,固定的第一个元素会得到所有元素最小的,在固定面一个值依次比较直到所有元素比较完成结束例如: 6,4,9,1,3 --> 升序1,6,9,4,3 --> 一轮排序1,3,9,6,4 --> 二轮排序1,3,4,9,6 -->三...

2019-07-02 21:21:40 589

原创 冒泡排序

冒泡排序:对未排序的数组中的元素从头到尾依次比较相邻的两个元素,若第前一个元素大于后面一个元素那么就交换两个元素的位置,经过一轮的比较,那么最大的那个元素,会存到数组的最后一位,每比较一次就会有一个正确的数字放到正确的位置例如: 6,4,9,1,3 --> 升序4,6,1,3,9 -->一轮排序4,1,3,6,9 -->二轮排序1,3,4,6,9 --> 三轮排...

2019-07-02 21:18:59 280 1

原创 算法-稀疏数组

当一个数组的元素包含大量的0时,或者为同一个值的数组时,可以使用稀疏数组来保存数组.稀疏数组的处理方法:1,记录数组一共有几行几列,有多少个不同的值2,把具有不同值的元素的行列及值记录在一个小规模的数组(稀疏数组)中,从而缩小程序的规实例讲解:图片中的二维数组转换成稀疏数组二维数组转稀疏数组 publicstaticvoidmain(String[]args) { ...

2019-07-02 10:29:50 538

原创 深入理解集合(2)

Set集合Set是Collection集合的子接口,Set集合中存储元素是无序.排除重复.Set集合主要使用的是Hash算法HashSet集合–>子类LinkedHashSet集合 TreeSet集合什么是Hash算法?Hash一般你会被翻译为"散列",也有直译"哈希"的,它是为了快速存取的角度而设计,这里的计算原则即"空间置换"–>空间换时间 Hash的组成 -->是一种...

2019-07-02 10:02:14 277

原创 深入理解集合(1)

在学习集合之前首先要思考一个问题,为什么要有集合?​ 为了方便对多个对象进行操作,我们就必须对这多个对象进行存储,而要想对多个对象进行存储就不能是一个基本的变量,而应该是一个容器类型的变量,到目前为止,我们学习过了哪些容器类型的数据呢?StringBuilder,数组,StringBuilder的结果只能是一个字符串类型,不一定满足我们的需求,所以我们目前只能选择数组了,也是就我们前面学...

2019-06-29 16:36:47 533

原创 java数组(1)

数组数组,是一个用来存储相兼容数据类型的容器。容量:在数组中,表示能够存储多少个数据。在数组中“容量”被称为 – 长度。特点:1、数组中只能存储相兼容的数据类型。2、数组的长度是不可变的,一旦实例化完成,长度不能修改!元素:在数组中存储的每一个数据,被称作是数组的元素4.1. 数组的定义对数组进行定义,并进行初始化的赋值操作,这个过程称作数组的 实例化数组实例化的过程,需要关键...

2019-06-28 23:31:13 421

原创 java基础03

方法什么是方法?方法,其实就是对一部分代码的包装。我们可以把一部分具有特殊功能的代码包装起来,做成一个方法。什么时候再需要使用到这个功能的时候,直接使用这个方法即可。3.1. 方法的定义语法[访问权限修饰符] [其他的方法修饰符] 返回值类型 方法名([参数列表]) { // 方法体}1、语法部分用中括号括起来的,表示可以写,也可以不写。2、在Java中,方法与方法之间是平级的...

2019-06-27 16:57:07 77 1

原创 java基础02

*1. Java中的运算符和表达式表达式是由数字,运算符,变量,常量组成一个式子,通过当前的组合可以得到一个结果,这样的组合即使表达式例如:1 + 2 --> 表达式: 1加2的和是什么int a = 10;a - 2 --> 表达式** 2. 算数运算符/ % 基本数学中四则运算加号:操作数值型数据进行求和一个符号例如 1+1 1.234+12.23 i...

2019-06-26 20:58:11 77 1

原创 java基础01

1. Java基础语法1.1. 计算机理论基础编程:编写程序。其实就是操作计算机,让计算机帮我们实现我们想要的需求。计算机其实是一个非常单一的机器,计算机只认识两个数字: 0 和 1,并且只会做加法。1.2. 编程基础 ———— 进制分类、进制转换进制:进位制,指的是数字进位的制度。进制分类二进制:使用数字0和1来表示所有的自然数,逢2进1位。0, 1, 10, 11, 1...

2019-06-25 19:53:12 294 2

快速排序.pdf

里面主要是用java 编写的有关快速排序算法的详细说明!!

2019-07-09

大数据学习路线图.doc

2019年最新出来的大数据学习路线图,以及需要掌握的详细知识点

2019-07-06

Linux学习笔记.pdf

超级详细的总结笔记针对于linux系统!

2019-07-06

SparesArry.rar

稀疏数组学习 !

2019-07-04

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除