Hadoop的Shuffle Error问题的解决。
今天在运行一个简单的mapred任务时, 在reduce到到16的时候老是会出Shuffle Error: Exceeded MAX_FAILED_UNIQUE_FETCHES; bailing-out.这个错误, 运行几次都不行。 网上google得知需要到hadoop-site.xml加上一个property解决。 写道secondary name node所在的机器没有配置d...
原创
2009-04-08 13:38:43 ·
2784 阅读 ·
0 评论