HDFS测试

HDFS基准测试其中 HDFS 基准测试包括: ( 1 )dfsio基准测试 HDFS I/O 读写性能 ( 2 )slive基准测试NameNode内部操作的性能 ( 3 )scan 基准测试MapReduce作业访问 HDFS 的 I/O 性能 ( 4 )shuffle 基准测试 sh...

2017-08-11 09:47:02

阅读数 1465

评论数 0

为什么使用ZeroMQ作为消息队列

1 基本优点1.1 简单 仅仅提供24个API接口,风格类似于BSD Socket。 处理了网络异常,包括连接异常中断、重连等。 改变TCP基于字节流收发数据的方式,处理了粘包、半包等问题,以msg为单位收发数据,结合Protocol Buffers,可以对应用层彻底屏蔽网络通信层。 对大数据通过...

2017-08-11 09:30:55

阅读数 934

评论数 0

数据结构基础与常见算法

链表与数组数组,在内存上是连续的空间;链表,在内存上可以不连续,每个链表节点包括数据可其他节点的地址信息。 数组优点: 内存空间占有少,因为链表节点保存其他节点的信息。 数组内的数据是随机访问的,数据查找速度快 链表优点: 数组需要连续内存空间,在数组过大时可能引起内存不足的问题,链表则不需要大...

2017-07-16 15:17:01

阅读数 1483

评论数 0

计算机网络理论基础

网络面试问题OSI与TCP/IP各层的结构、功能及协议OSI模型物理层机械、电子、定时接口通信信道上的原始比特流传输。链路层物理寻址,将原始比特流转变成逻辑传输路线。 隧道协议 ARP/RARP(地址解析协议(逆向)) 网络层控制子网的运行,如逻辑编址、分组传输、路由选择。 路由协议 安全协议 A...

2017-07-15 17:37:14

阅读数 1232

评论数 0

操作系统理论基础

操作系统面试问题进程和线程进程进程:进程是系统资源调度的基本单位。进程的存在实体是进程控制块(PCB),创建进行就相当于创建了一个进程控制块,该数据结构用于表示进程的状态。 包含的信息有: 进程标识符(进程ID) 处理机的信息(通用寄存器、指令计数器、用户栈指针) 进程调度信息(进程状态、进程优...

2017-07-14 18:03:13

阅读数 354

评论数 0

JVM垃圾回收机制概述

JVM垃圾回收机制概述如何判断“垃圾”在JAVA中是通过引用来和对象进行关联的,必须通过引用来操作对象。一般的,如果一个对象没有任何引用与之关联,那么该对象基本不可能在其他地方被使用。 JAVA中常用的判断对象是否“垃圾”的方法有引用计数法和可达性分析法。引用计数法的特点是实现简单,而且效率较高...

2017-07-14 10:51:18

阅读数 229

评论数 0

JVM运行时数据区概述

JVM运行时数据区JVM运行时数据区分为,方法区、JAVA堆、虚拟机栈、PC程序计数器、本地方法栈本地方法栈为JVM提供本地方法服务(native),JAVA之外语言的方法会存入此方法栈,供程序调用。用来存储每个native方法调用的状态。虚拟机栈 虚拟机栈是线程私有的,其生命周期与线程相同。 线...

2017-07-13 17:46:29

阅读数 201

评论数 0

JVM类加载机制

总体流程JAVA 加载一个类的流程如下: JAVA源文件(.java)——>编译器——>字节码文件(.class)——>解释器(JVM的一部分)——>机器码字节码文件经过JVM进行兼容处理可以在不同系统中得到同样的操作结果,这是JAVA跨平台的基础。JVM虚拟机总是和程序...

2017-07-13 12:46:10

阅读数 121

评论数 0

JAVA面试问题—基础篇(下)

1.Concurrent包这个包包含有一系列能够让 Java 的并发编程变得更加简单轻松的类。BlockingQueue:如果BlockingQueue是空的,获取操作将会被阻断进入等待状态,直到BlockingQueue有数据,同样,如果BlockingQueue是满的,添加操作会被阻断进入等待...

2017-07-13 10:48:36

阅读数 154

评论数 0

JAVA面试问题—基础篇(上)

JAVA面试问题—基础篇(上)1.JAVA基本数据类型及其大小32位/64位编译器大小一致的数据类型: char(1),short(2),int(4),float(4),double(8),unsigned int(4),long long(8) 32位/64位编译器大小不同的数据类型: c...

2017-07-12 12:28:17

阅读数 208

评论数 0

JAVA三大特性——继承

1. 概念继承,使用已存在的类的定义作为基础建立新类的技术,新类的定义可以增加新的数据或新的功能,也可以用父类的功能,但不能选择性的继承父类。继承所描述的关系是“IS-A”。 实际上,继承者是被继承者的特殊化,除了拥有继承者的特性外,还拥有自己特有的属性。继承定义了类如何互相关联,共享特性。继承注...

2017-04-11 16:29:03

阅读数 158

评论数 0

JAVA虚拟机原理初探

一、JAVA虚拟机的生命周期运行中的JAVA虚拟机有着清晰而明确的任务,执行JAVA程序。JVM从程序开始时运行,程序结束时停止。每一个JAVA程序都有一个JVM为其服务。JVM总是开始于 public void main(String[] args)这个方法。在程序执行时,必须为JVM指明包含m...

2017-04-11 11:09:01

阅读数 241

评论数 0

JAVA三大特性——封装

一、概念JAVA封装,是指利用抽象数据类型将数据和对数据的操作封装成为一个独立实体。内部隐藏,使用对外接口。一个对象所封装的是自己的属性和方法,不需要依赖其他对象。二、优点使用封装的好处: 减少耦合 类的内部结构可以自由修改 对类中成员进行更精确的控制 隐藏信息,实现细节 三、代码实例使用以下两个...

2017-04-01 14:14:52

阅读数 317

评论数 0

JAVA三大框架入门

写在前面:最近接到某公司的电话面试,其中问到了JAVA框架的相关知识,发现自己对于这个方面了解实在太少,故整理出该篇文章,从基本入门开始对JAVA框架再认识。一、基本概念了解框架的定位可以帮助我们更好的找到学习的切入点1.Spring: 依赖注入(DI)又称为控制反转(IOC),通常来说,当某个角...

2017-04-01 10:37:13

阅读数 33958

评论数 1

HADOOP 2.6.5 高可用部署(YUM 安装)

题外话初次部署Hadoop HA的时候,踩过很多坑。现在将部署流程记录下来,希望可以帮助到更多的初学者。

2017-03-31 09:33:15

阅读数 3097

评论数 1

HDFS基本介绍

HDFS基本介绍初次接触HADOOP HDFS,从它得定位与优缺点角度开始,是一个好方法。本文为个人翻译的官方文档,水平极其有限。总体介绍HDFS是Hadoop的分布式文件系统,该组件被设计为高度容错且部署在低成本硬件上,提供给了应用程序数据一个高吞吐量的连接。HDFS放宽一些POSIX的要求,以...

2017-03-31 09:11:02

阅读数 1039

评论数 0

一个菜鸟程序员的进阶之路

一个菜鸟程序员的逆袭之路 从2011年上大学到现在上研究生,一直都在学习如何写代码。但是近些日子静心反思,发现并没有什么特别值得骄傲的事情。所以,我想借用此博客来整理之前所学所得,完成自己得菜鸟进阶之路。

2017-03-31 09:01:51

阅读数 445

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭