IDEA连接hadoop hdfs

一、下载插件

在这里插入图片描述
进入一下界面, 搜索 big data tools

在这里插入图片描述
重启IDEA

二、本地配置

在这里插入图片描述
首先保证浏览器可以访问到
按照下述步骤创建一个HDFS连接
在这里插入图片描述

在这里插入图片描述
点击Test Connection出现报错,点击哪个报错的链接
在这里插入图片描述
https://cwiki.apache.org/confluence/display/HADOOP2/WindowsProblems
点击之后出现如下界面,点击to github
下面这个页面就是解决方案,HADOOP_HOME not found
在这里插入图片描述
https://github.com/steveloughran/winutils
在这里插入图片描述
下载解压后,放在某个路径下,并且保存该路径,并且找到对应的hadoop版本,我们要为他配置环境变量。我用的是hadoop-2.7.1
我的路径是 D:winutilswinutils-masterhadoop-2.7.1
在这里插入图片描述

在这里插入图片描述

三、配置环境变量

在桌面上,点击此电脑右键->属性 ->高级系统设置->环境变量
在这里插入图片描述
HADOOP_HOME
D:winutilswinutils-masterhadoop-2.7.1
在这里插入图片描述
点击确定。
找到Path,双击
在这里插入图片描述
新建一个 %HADOOP_HOME%in
在这里插入图片描述

四、再次连接

回到IDEA (建议重启IDEA),重新进行连接。
点击Test connection,可以连接了!!!
在这里插入图片描述
如果出现如下错误
在这里插入图片描述
在linux中随便创建一条数据即可hdfs dfs -mkdir /data/1 在这里插入图片描述
这个时候就连接成功了!
在这里插入图片描述

  • 1
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 2
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值