初步学习MapReduce编程——编程实现文件合并和去重操作

对于两个输入文件，即文件A和文件B，编写MapReduce程序，对两个文件进行合并，并剔除其中重复的内容，得到一个新的输出文件C。

数据放TXT文件时，不能多出数据外的空行光标，不然运行程序时会显示错误：For input string: “”


直接运行Java代码得出结果

package Merge;

import java.io.IOException;
import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.Path;
import org.apache.hadoop.io.IntWritable;
import org.apache.hadoop.io.Text;
import org.apache.hadoop.mapreduce.Job;
import org.apache.hadoop.mapreduce.Mapper;
import org.apache.hadoop.mapreduce.Reducer;
import org.apache.hadoop.mapreduce.lib.input