a30164-CSDN博客

转载 mapreduce中map是怎么做的？参数又是怎么解析传递给map方法的

1.首先介绍一下wordcount 早mapreduce框架中的对应关系大家都知道 mapreduce 分为 map 和reduce 两个部分，那么在wordcount例子中，很显然对文件word 计数部分为map，对 word 数量累计部分为 reduce；大家都明白 map接受一个参数，经过map处理后，将处理结果作为reduce的入参分发给reduce，然后在reduce中统计了

2015-11-04 21:27:57 1254

转载 Hadoop学习笔记，MapReduce任务Namenode DataNode Jobtracker Tasktracker之间的关系

一、基本概念　　在MapReduce中，一个准备提交执行的应用程序称为“作业（job）”，而从一个作业划分出的运行于各个计算节点的工作单元称为“任务（task）”。此外，Hadoop提供的分布式文件系统（HDFS）主要负责各个节点的数据存储，并实现了高吞吐率的数据读写。　　在分布式存储和分布式计算方面，Hadoop都是用主/从（Master/Slave）架构。在一个配置完整的集群上

2015-11-04 21:24:36 3897 1

转载 cxf+spring发布webservice和调用

项目所需jar包：http://url.cn/V6RvIw 因为我用到了httpclient，所以里面包含了httpclient的jar包。建项目什么就不说了。直接上代码说接口：写一个demo接口package cn.cxf.demo; import javax.jws.WebService; @WebService

2015-11-02 20:45:13 335

转载 CXF的三种发布方式和客户端调用方法

先定义一个web service@WebService(targetNamespace="http://www.itfad.net/queryUser")public interface IQueryUser{ String query(@WebParam(name = "user") UserInfo user);｝实现类：@WebService(endpoint

2015-11-02 20:42:12 350