博客内容涉及到Hive MapReduce任务在执行时遇到错误，错误返回码为3，源于MapredLocalTask。日志显示警告关于过时的配置属性，并记录了内存使用情况和Hashtable大小。解决方案包括调整hive.mapjoin.localtask.max.memory.usage到0.99以增加内存使用限制，并考虑关闭hive.auto.convert.join以避免自动MapJoin。
Total MapReduce jobs = 1
14/08/24 20:29:11 WARN conf.Configuration: mapred.max.split.size is deprecated. Instead, use mapreduce.input.fileinputformat.split.maxsize
14/08/24 20:29:11 WARN conf.Configuration: mapred.min.split.size is deprecated. Instead, use mapreduce.input.fileinputformat.split.minsize
14/08/24 20:29:11 WARN conf.Configuration: mapred.min.split.size.per.rack is deprecated. Instead, use mapreduce.input.fileinputformat.split.minsize.per.rack
14/08/24 20:29:11 WARN conf.Configuration: mapred.min.split.size.per.node is deprecated. Instead, use mapreduce.input.fileinputformat.split.minsize.per.node
14/08/24 20:29:11 WARN conf.Configuration: mapred.reduce.tasks
最低0.47元/天 解锁文章
1191
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
