今天在做hadoop测试时想保留map过后的中间文件，试了几次，发现通过以下设置可解决。
<property>
<name>keep.failed.task.files</name>
<value>true</value>
</property>
<property>
<name>keep.task.files.pattern</name>
<value>*</value>
</property>
这样所有中间临时文件都会被保存，map临时文件位于{hadoop.tmp.dir}/mapred/local/tasktracker/
<property>
<name>keep.failed.task.files</name>
<value>true</value>
</property>
<property>
<name>keep.task.files.pattern</name>
<value>*</value>
</property>
这样所有中间临时文件都会被保存，map临时文件位于{hadoop.tmp.dir}/mapred/local/tasktracker/
扫一扫
242
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
