sinoyang的专栏

今天看了一下启动文件“hadoop-daemon.sh”，仔细看了一下大概知道它的作用，使用“hadoop-daemon.sh“脚本启动和停止hadoop后台程序。它可以做到在A机器上启动”namenode“，B机器启动”secondarynamenode“ C机器启动”datanode“， ”tasktracker“，具体启动如下 ： ./hadoop-daemon.sh start nam

昨天下午用hive处理日志的时候，突然hive报了一个错“FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.MapRedTask”，在hive里无法查询，查看hadoop日志发现“org.apache.hadoop.mapred.TaskInProgress: Error from attempt_

刚刚试了HDFS“回收站”功能，也就是core-site.xml文件中的“fs.trash.interval”选项。    1. 在core-site.xml添加“fs.trash.interval”选项，这里配置60分钟（单位为分钟）                  fs.trash.interval          60          Number of minut

今天在eclipse里面运行M/R的时候报这个错12/09/22 12:17:53 ERROR conf.Configuration: Failed to set setXIncludeAware(true) for parser org.apache.xerces.jaxp.DocumentBuilderFactoryImpl@55571e:java.lang.UnsupportedOper

在eclipse下运行mapreduce程序的时候报这个错误。Exception in thread "main" java.io.IOException: Cannot run program "chmod": CreateProcess error=2, ?????????at java.lang.ProcessBuilder.start(Unknown Source)at org

hadoop的默认文件输出格式是“TextOutputFormat”输出的文件名是“part-r-00000”这种类型，能不能实现自定义的文件名呢？我试了一下可以，下面是代码  private static class MyMutipleTextOutputFormat extends MultipleTextOutputFormat {                private st