解决win下eclipse连linux的hadoop集群连不上的问题

最新推荐文章于 2018-12-26 15:51:42 发布
最新推荐文章于 2018-12-26 15:51:42 发布
阅读量2.8k 收藏
点赞数
分类专栏： linux hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/hunkyguy/article/details/8089148
版权
本文详细介绍了在Windows上的Eclipse如何连接Linux的Hadoop集群，包括安装Hadoop Eclipse插件，配置Hadoop安装路径，解决Connection refused错误的方法，如禁用Linux的IPv6支持以确保连接成功。
摘要由CSDN通过智能技术生成

 

一、windows下的eclipse连接hadoop集群

1.加入eclipse的hadoop插件

    下载hadoop-eclipse-plugin-X.jar，并加入到eclipse安装目录的plugins文件夹下

    重启eclipse

 

2.解压hadoop的安装包到win本机

    在eclipse中做如下配置

    Window  → Preferences，找到 Hadoop Map/Reduce

    将Hadoop installation directory设置成刚才hadoop安装包的解压路径

    重启eclipse

 

3.配置hadoop连接

    选择Map/Reduce Perspective

    新建New Hadoop Locationÿ

最低0.47元/天 解锁文章
hunkyguy
关注
专栏目录
使用eclipse连接hadoop失败情况
心中永远的正能量
03-16 4万+
Mar 16, 2014 4:13:32 PM org.apache.hadoop.ipc.Client$Connection handleConnectionFailure INFO: Retrying connect to server: vincent/192.168.56.101:9000. Already tried 0 time(s); maxRetries=45 Mar 16,
eclipse无法连接hadoop
dingzhenli1993的博客
05-10 1263
An internal error occurred during: "Map/Reduce location status updater".java.lang.NullPointerException yarn-site.xml中添加如下配置即可： <property> <name>yarn.resourcemanager.resource-tracker.address</name> <value>hdfs-master:8130<
eclipse 连接不上HBase集群
weixin_30767835的博客
02-02 267
java.io.IOException:Failedtogetresultwithintimeout,timeout=60000ms 解决方案 在本地hosts文件（如C:\Windows\System32\drivers\etc\hosts）里加上HBase集群上的hosts配置即可 原因： 在 客户端里（即你的程序所在的计算机）里，要修改etc/host...
在windows 下 使用 eclipes 连接 linux下的hadoop集群
布尔值
12-15 177
           hadoop 是工作在linux下的分布式系统，做为一个开发者，对于手里资源有限，不得不使用只有终端的虚拟机来运行hadoop集群。但是，在这种环境下，开发，调试就变得那么的不容易了。那么，有没有办法在windows下发调试呢。答案是肯定的。 hadoop为我们提供了一个Eclipes插件，使用我们可以在Eclipse环境下开发，调试hadoop程序，那么，应该如何...
Hadoop在eclipse端连接不上的问题
qq_41896335的博客
07-08 2116
 检查两个配置文件检查环境配置文件启动HADOOP[root@hadoop01 sbin]# ./start-all.shThis script is Deprecated. Instead use start-dfs.sh and start-yarn.shError: Cannot find configuration directory: /home/software/hadoop-2.7....
Win10的eclipse连接CentOS的Hadoop集群.doc
06-09
通过以上步骤，你就可以在Windows 10的Eclipse环境中编写、测试和调试MapReduce程序，然后部署到远程的CentOS Hadoop集群上进行运行。记得在开发过程中，保持Hadoop版本的一致性，以及及时更新Hadoop的配置文件，以...
Linux和Win下配置eclipse开发hadoop
02-15
5. **启动Hadoop服务**: 运行`start-dfs.sh`和`start-yarn.sh`启动Hadoop集群。 6. **安装Eclipse**: 安装Eclipse IDE，推荐使用Java或Java EE版本。 7. **安装插件**: 安装Hadoop相关的Eclipse插件，如Hadoop ...
windows下用eclipse连接hadoop集群
qq_38048590的博客
07-29 1646
最近因实习需要开始摆弄起了hadoop和spark相关的，记录一下我踩过的坑。由于linux下不好调试程序，因此记录一下用windows下的eclipse调试MapReduce程序。 环境：虚拟机VMware搭建的Ubuntu16.0.4集群，一个master，两个slaves windows环境：64位，eclipse版本：Oxygen JAVA SE 准备环境：三台集群都搭好，其上能跑h...
win7-eclipse-hadoop-plugins连接Linux hadoop3.0单机伪集群
sum__mer的专栏
09-14 2290
hadoop3.0安装配置 linux下jdk的安装 说明一： 远程连接对本地hadoop版本、远程hadoop版本、eclipse版本都有严格的兼容性要求。建议本地和远程的hadoop使用相同且最新的版本，eclipse则从官网下载最新版本。我采用的版本如下： （1）本地和远程相同，hadoop版本：hadoop-3.0.0-alpha1 （2）eclipse版本：Vers
配置Eclipse连接Hadoop
04-13
NULL 博文链接：https://dacoolbaby.iteye.com/blog/1730321
Eclipse 连接不上 hadoop 的解决办法
08-12 978
先说一下我的情况，集群的 hadoop 是 1.0.4 ，之后在虚拟机上搭建了最新稳定版 1.2.1 之后，Eclipse 插件始终连接不上。 出现 Error: Call to 192.168.1.188/192.168.1.188:9001 failed on connection exception: java.net.ConnectException: Connectio...
windows下eclipse连接Hadoop，连接DFS失败
小透明-溶冰
03-22 3167
如上： 提示  failed on connection exception:java.net.ConnectException :Connection refuse: no further information.     提示的是连接211.82.83.81失败，也就是说有尝试连接，只是没有找到Hadoop，   原因是：   /etc/hosts文件中没有加入   211
hadoop与linux连接报错java.net.ConnectException: Connection refused: no further information
qq_40992762的博客
08-09 928
2018-08-09 10:13:07,745 WARN  [main] util.NativeCodeLoader (NativeCodeLoader.java:&lt;clinit&gt;(62)) - Unable to load native-hadoop library for your platform... using builtin-java classes where appli...
配置eclipse的hadoop插件时无法连接hdfs的解决办法
甘道夫的大数据进化论
06-10 2970
如果直接将下载hadoop-eclipse-plugin-0.20.203.0.jar复制到eclipse的插件目录中，在连接DFS时会出现错误，提示信息为： "error: failure to login",弹出的错误提示框内容为"An internal error occurred during: "Connecting to DFS hadoop". org/apache/common
eclipse 连接 hadoop 报refusedconnection问题
qq_22963349的博客
09-02 431
hadoop能正常运行 但是用eclipse连接就拒绝 一 问题现状 用eclipse 连接 dfs报错 但是hadoop是正常运行着的;所以可能是ip映射问题 二 解决过程 首先检查 linux : vim /etc/hosts 这里没有定义外网访问的ip映射;造成eclipse 连接不上 增加 192.168.80.50 hadoop01 同时修改第一行为 127.0.0...
hadoop集群中eclipse报连接出错
i9you9me的专栏
12-10 732
今天晚上想着将linux里面的hadoop的eclipse开发环境搭建起来。 于是我首先将linux版本的eclipse下载到linux系统里面，然后解压到/usr/local/hadoop目录下。 然后我将之前已经编译好的hadoop插件拷贝到eclipse的plugin目录下。 接下来就是配置连接的hadoop的namenode的连接了，因为我将eclipse放到了namenode里面所
hadoop报错ConnectionRefused
CherishL_的专栏
04-28 6292
执行hadoop fs -ls时 报错： ls: Call From SERVER226/10.0.0.226 to SERVER226:9000 failed on connection exception: java.net.ConnectException: Connection refused; For more details see: http://wiki.apache.org/ha
eclipse连接集群
Kimshell
12-26 523
教程hadoop的历史关于配置集群客户端eclipse操作HDFS配置环境Java API操作HDFS hadoop的历史 说道hadoop的历史，就要提到Google公布的GFS、MapReduce和BigTable三篇技术论文，它们被称为三驾马车。然后一位叫Doug Cutting的大牛对其做了主要的开源实现。再后来，Apache基金会整合Doug Cutting和一众IT公司的贡献成果，开发...
Eclipse连接远程Hadoop集群教程
在Windows环境下，可能需要对源码进行修改以解决权限问题，如文档中提到的`hadoop-eclipse-plugin-1.0.4.jar`已经解决了这类问题。 6. **开发目录建议**：为了简化权限问题，文档建议将数据临时存储在特定目录（如`...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值