mapreduce报错

windows执行mapreduce报错信息如下

Exception in thread "main" java.net.UnknownHostException: Invalid host name: local host is: (unknown); destination host is: "hadoop1":8032; java.net.UnknownHostException;

重启下电脑没什么事了…莫名其妙

Exception message: /bin/bash: line 0: fg: no job control

Stack trace: ExitCodeException exitCode=1: /bin/bash: line 0: fg: no job control

设置Configura如下

conf.set("mapreduce.app-submission.cross-platform","true");

报错如下

Exception in thread "main" java.io.IOException: java.net.ConnectException: Call From SKY-20180605RQV/192.168.0.172 to 0.0.0.0:10020 failed on connection exception: java.net.ConnectException: Connection refused: no further information;

运行MapReduce时异常
自定义map输出对象 报错如下

java.lang.Exception: java.lang.RuntimeException: java.lang.NoSuchMethodException: com.Information.<init>()
   at org.apache.hadoop.mapred.LocalJobRunner$Job.runTasks(LocalJobRunner.java:462)
   at org.apache.hadoop.mapred.LocalJobRunner$Job.run(LocalJobRunner.java:529)

原因 没有在自定义的writeble中设置无参构造函数
2.mapreduce输出中文变成乱码
添加如下代码

 public static Text transformTextToUTF8(Text text, String encoding) {
       String value = null;
       try {
           value = new String(text.getBytes(), 0, text.getLength(), encoding);
       } catch (UnsupportedEncodingException e) {
           e.printStackTrace();
       }
       return new Text(value);
   }

复制代码map中
Text newText = transformTextToUTF8(value, “GBK”);
String a= newText.toString();

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值