OutputFormat 是 MapReduce 输出的基类,所有实现 MapReduce 输出的都实现了 OutputFormat 接口。下面我们介绍几种常见的OutputFormat实现类。
Hadoop 默认使用的输出类型为:TextOutputFormat。现在有以下两种情况:
- 需要将返回的数据输入到 MySQL,则需要使用
DBOutputFormat
自定义OutputFormat; - 如果需要根据数据内容,将数据输出到指定名称文件夹,则需要
FileOutPutFormat
自定义OutputFormat。
将数据输入到 MySQL,参考:使用DBOutputFormat把MapReduce产生的结果集导入到 MySQL 中。本文来介绍第二种情况。
自定义OutputFormat步骤
- 自定义一个类继承FileOutputFormat;
- 改写 RecordWriter,具体改写输出数据的方法 wr