hadoop-mapreduce
刘啸尘-勤奋的小小尘
活泼开朗,
展开
-
MapReduce链接作业之预处理
环境:Vmware 8.0 和Ubuntu11.04Hadoop 实战之MapReduce链接作业之预处理第一步:首先创建一个工程命名为HadoopTest.目录结构如下图: 第二步: 在/home/tanglg1987目录下新建一个start.sh脚本文件,每次启动虚拟机都要删除/tmp目录下的全部文件,重新格式化namenode,代码如下: [pla...2012-11-29 13:42:00 · 222 阅读 · 0 评论 -
设置mapreduce的job的优先级的两种方法
直接上代码方式说明,有两种方式: #1:调用API JobConf.setJobPriority(JobPriority.NORMAL) #2:Configuration设置 Configuration c = new Configuration(); c.set(' mapred.job.priority',JobPriority. NORMAL.name()); 两种方式都可以实现,#2是#1...2012-10-09 14:15:00 · 1092 阅读 · 0 评论