使用Java操作Hadoop API

Hadoop的环境一旦搭建完成,我们就可以进行Hadoop应用开发了,可以进行Hadoop开发的程序语言有多种选择,比如JAVA,python,ruby等等。这里我们选择JAVA语言进行开发(语言无所谓好坏,看你擅长什么喜欢什么了)。

     因为我选择了JAVA语言,也就选择了eclipse开发工具,这里我用的是eclipse-java-oxygen-R-win32-x86_64,当然,Hadoop也为eclipse开发了一款插件,hadoop-eclipse-plugin-2.7.1.jar,我们可以下载并安装在eclipse中。

Hadoop库集成

Hadoop库已经在我们的安装目录下了,比如我的安装目录:C:\Programs\hadoop-2.7.1\share\hadoop。

  1. 打开eclipse,Window=>Preference=>Java=>Build Path=>User Libraries这里写图片描述
  2. 点击New,新建一个库,注意此处红色标注的复选框一定不要勾选,命名我就取Hadoop了。
    这里写图片描述
  3. 此时我们会看到User Libraries里面多了一个hadoop的Library,我们接下来便要向这个Library里面添加jar包了,我们点击“Add External JARs…”,会弹出文件对话框,让你选择导入的jar。这里写图片描述
  4. 添加Hadoop的common库,一共有3个这里写图片描述
  5. 添加Hadoop的common的lib库,一共有63个这里写图片描述
  6. 添加Hadoop的hdfs库,一共有3个这里写图片描述
  7. 添加Hadoop的mapreduce库,一共有8个这里写图片描述
  8. 点击Apply and Close完成Hadoop包的导入工作这里写图片描述

创建Java项目

  1. eclipse创建一个普通的Java项目,名称为HadoopDemo
  • 2
    点赞
  • 9
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值