Hadoop
qq_21292551
这个作者很懒,什么都没留下…
展开
-
1.hadoop的认识
占有率:Hadoop57.5% Hbase23.2% 截至2012年12月23日,Apache Hadoop版本分为两代,我们将第一代Hadoop称为Hadoop 1.0,第二代Hadoop称为Hadoop 2.0。第一代Hadoop包含三个大版本,分别是0.20.x,0.21.x和0.22.x,其中,0.20.x最后演化成1.0.x,变成了稳定版,而0.21.x和0原创 2015-12-11 11:05:37 · 348 阅读 · 0 评论 -
2.hadoop配置信息处理
配置文件概念一个灵活的系统不可缺少的一部分,虽然重要,却没有标准windows上的配置文件:特殊化的ASCII文件(以”ini”为文件拓展名)java配置文件:java.util.Properties类,用于处理简单的配置文件 k-vHadoop Configuration:采用XML格式1.name、原创 2015-12-11 11:06:13 · 336 阅读 · 0 评论 -
3.hadoop中的序列化
序列化的三种主要途径作为一种序列化格式:一个对象序列化以后,它的编码可以被存储到磁盘上,供以后反序列化使用作为一种通信数据格式:序列化结果可以从一个正在运行的虚拟机,通过网络被传递到另一个虚拟机上作为一种拷贝、克隆机制:将对象序列化到内存的缓冲区中,然后通过反序列化,可以得到一个对已存对象进行深拷贝的新对象序列化机制java:实现Seri原创 2015-12-11 11:07:26 · 313 阅读 · 0 评论 -
4.hadoop中的压缩
所有的压缩算法都会考虑时间和空间的权衡列出一些可以用于Hadoop的常见压缩格式以及特性Hadoop压缩api应用实例获得具体的[编码/解码]方式egg1:通过传入压缩的方式名反射egg2:通过文件拓展名获得,通过[编码/解码]工厂CompressionCodecFactory对于工厂方法而言,用于创建多种产品原创 2015-12-11 11:08:09 · 259 阅读 · 0 评论 -
5.对于RMI的理解
下面我将介绍一个完整的实例,让初学者能快速体验RMI的功用。分为以下四个步骤1. 创建远程接口及声明远程方法(HelloInterface.java)2. 实现远程接口及远程方法(继承UnicastRemoteObject)(Hello.java)3. 启动RMI注册服务,并注册远程对象(HelloServer.java)4. 客户端查找远程对象,并调用远程方法(H原创 2015-12-11 11:08:52 · 266 阅读 · 0 评论 -
6.hadoop中rpc中的动态代理的理解
代理模式抽象角色:真实对象和代理对象的共同接口代理角色:秘书真实角色(被代理角色):局长实现代理接口&&调用转发创建动态代理步骤:1.创建一个实现接口InvocationHandler的类,它必须实现invoke方法2.创建被代理的类以及接口3.通过Proxy的静态方法 newProxyInstance(Cla原创 2015-12-11 11:09:41 · 595 阅读 · 0 评论