Eclipse大数据开发环境搭建

一、安装jdk 并配置环境变量
下载安装jdk后,配置环境变量,主要配置JAVA_HOME\PATH\CLASSPATH;
如:jdk安装目录为C:\Program Files\Java\jdk1.7.0_03
JAVA_HOME配置为:C:\Program Files\Java\jdk1.7.0_03
CLASSPATH配置为:;C:\Program Files\Java\jdk1.7.0_03\lib(注意开头的分号)
PATH添加配置:C:\Program Files\Java\jdk1.7.0_03\bin;D:\BigdataSoft\hadoop-2.6.0\bin;
验证:输入java -version命令查看java版本信息
二、安装Eclipse,创建java项目,看java是否部署成功
三、构建mapreduce项目
1、安装hadoop-eclipse插件
下载对应版本的hadoop-eclipse插件,放到eclipse安装目录下的dropins目录下,重新启动eclipse。
在这里插入图片描述
构建mapreduce项目,在新建项目选择目录中会出现mapreduce项目
在这里插入图片描述
2、创建wordcount项目,配置hadoop安装目录

在这里插入图片描述
在这里插入图片描述

3、配置DFS locations
切换到页签Map/Reduce Locations,
在这里插入图片描述
如果没有在Windows —> show view----->other…中添加
在这里插入图片描述
添加及编辑按钮如下图
在这里插入图片描述
添加配置:
在这里插入图片描述

4、添加wordcount类,源码从官网上查看,自己准备源数据,验证。
5、常见错误
1)log4j问题:将log4j文件添加都项目中
2)Hadoop环境变量没有配置或者配置有问题。
在这里插入图片描述
解决方法:配置hadoop环境变量
在这里插入图片描述
3)在这里插入图片描述
4)在这里插入图片描述
5)在这里插入图片描述
6)在这里插入图片描述
7)导入jar包

在这里插入图片描述
在这里插入图片描述
6、导出jar包
右键点击要导出的类,Export---->
在这里插入图片描述
点击next
在这里插入图片描述

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值