Hadoop入门系列(3) -- Eclipse+Hadoop开发环境搭建

本文介绍了如何在Eclipse中搭建Hadoop开发环境,包括安装Hadoop插件,配置Eclipse,连接HDFS,创建MapReduce工程,以及使用Maven进行依赖管理。通过这些步骤,开发者可以方便地在Eclipse中进行Hadoop应用的开发和调试。
摘要由CSDN通过智能技术生成

Eclipse的Hadoop插件

Hadoop的安装包中包含elipse-plugin的源码,在src/contrib/eclipse-pluging目录下,我们可以自己编译生成插件,也可以使用网上别人编译好的
Eclipse的Hadoop插件 hadoop-eclipse-plugin-1.2.1.jar,放在eclipse的”plugins”目录下,重启Eclipse就可以生效。


配置eclipse

安装包插件后,就可以在Preferences中的”Hadoop Map/Reduce” 中配置Hadoop的解压路径


通过插件连接HDFS

使用插件可以在Eclipse上远程连接HDFS,也可以远程调试。由于1.2.1的插件远程调试会报用户权限的问题。所以,我们这里只配置能远程访问HDFS,远程调试需要自己修改插件源码,请另行查找资料。

安装完插件后,就会在Project Explorer中显示一个”DFS Location”。

这里写图片描述

我们只要配置好DFS,就可以在这里远程访问DFS中的内容了。首先在
Window->Show view->Other中,查找”mapreduce”:

这里写图片描述

这个view显示出来后&#x

  • 0
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值