![](https://img-blog.csdnimg.cn/20201014180756738.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
MapReduce
有个机车梦
喜欢充满冒险的生活节奏 在代码中沉淀下浮躁的内心
展开
-
MapReduce的测试
有两种方法第一种:弄成jar包 到Linux集群上面测试第二种: 到eclipse里面可以进行测试 第一种方法1.点击项目 -》 右键 - 》 Export (输出) -》 在JAVA目录下 选择JAR file -》 Browse (选择你要把jar到的地方 我们可以直接放到桌面) -》 选择OK即可2.启动虚拟机我们把jar包传入到Linux里面去jps - 》 start-a...原创 2018-12-05 22:03:52 · 398 阅读 · 0 评论 -
Hadoop(MapReducer)
MapReduce 进程 一个完整的 mapreduce 程序在分布式运行时有三类实例进程:1)MrAppMaster:负责整个程序的过程调度及状态协调。2)MapTask:负责 map 阶段的整个数据处理流程。3)ReduceTask:负责 reduce 阶段的整个数据处理流程。MapReduce编程规范 用户编写的程序分成三个部分:Mapper,Reducer,Driver(提交...原创 2018-12-03 22:37:15 · 328 阅读 · 0 评论