![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
Oytyoht
这个作者很懒,什么都没留下…
展开
-
java.lang.IllegalArgumentException: Wrong FS: expected: file:/// – Hadoop
这个问题有两种解决办法 1. Configuration configuration = new Configuration(); configuration.addResource(new Path("/etc/hadoop/conf/core-site.xml")); configuration.addResource(new Path("/etc/hadoop/conf原创 2015-07-28 16:55:49 · 695 阅读 · 0 评论 -
MR过程
Hadoop – MapReduce过程昨天我们对MapReduce作了大概了解,知道它如何进行数据处理。今天我们走进MapReduce,分析MapReduce源代码,看看它到底是如何实现的,我们会根据数据流动的顺序来进行分析 :-)原创 2015-10-19 23:39:23 · 1073 阅读 · 0 评论 -
hadoop的RPC机制
Hadoop RPC使用方法Hadoop RPC对外主要提供了两种接口(见类org.apache.hadoop.ipc.RPC),分别是:public static ProtocolProxy getProxy/waitForProxy(…):构造一个客户端代理对象(该对象实现了某个协议),用于向服务器发送RPC请求。public static Server RPC.Builder (Confi原创 2015-10-21 15:54:30 · 317 阅读 · 0 评论 -
protocol buffer语法
概述 前两篇文章,我们概括介绍《Google Protocol Buffers 概述》以及带领大家简单的《Google Protocol Buffers 入门》,接下来,再稍微详细一点介绍Protocol Buffers书写语言。该篇文章主要讲解如何使用PB语言构建数据,包括.proto文件语法及如果使用.proto文件生成数据存取类。本篇主要包括:定义一个PB message类型 介绍PB 数据类原创 2015-10-24 20:18:54 · 351 阅读 · 0 评论