hadoop
文章平均质量分 79
喜笑延开
这个作者很懒,什么都没留下…
展开
-
Hadoop的RPC,Java实现动态代理
Java的动态代理 java的动态对象是编程模式的装饰者模式 可以通过包装的方式,让函数完成不同的功能 原理 1.java代码实例 1).创建服务端接口MyServer.java,创建方法method1和method2 public interface MyServer{ public void method1(); public void method2(); } ...原创 2018-09-17 22:24:13 · 347 阅读 · 0 评论 -
MapReduce高级-合并、分区
分区 多个分区,有多个文件 分区类型 范围分区 列表分区 散列分区 范围-散列 范围-列表 散列分区:(Hive 桶表) 避免热库的产生MapReduce实例 使用MR实现一个分区:根据员工的部门号,将相同部门号的员工分到一分区 要点:在Mapper的输出创建分区 即对k2 v2进行操作 创建一个序列化对象 Employee package demo.partition;...原创 2018-09-20 22:27:09 · 255 阅读 · 0 评论