1. 首先配置MyEclipse上的DFS
其中,StudyHadoop为自己随意起的名字,50030是
mapred-site.xml上配置的
我的搭建步骤:
第一步:首先会出现,log4j 之类的问题,在工程src目录下添加log4j.properties文件。
# Configure logging for testing: optionally with log file
#log4j.rootLogger=debug,appender
log4j.rootLogger=info,appender
#log4j.rootLogger=error,appender
#\u8F93\u51FA\u5230\u63A7\u5236\u53F0
log4j.appender.appender=org.apache.log4j.ConsoleAppender
#\u6837\u5F0F\u4E3ATTCCLayout
log4j.appender.appender.layout=org.apache.log4j.TTCCLayout
第二步:会出现缺少winutils.exe,下载
hadoop-common-2.2.0-bin-master,将bin下的winutils.exe复制到
D:\myprogramfile\hadoop-2.5.2\bin下(此目录为本机MyEclipse-->window-->prefrences-->map/reduce-->installation目录配置的hadoop目录。)