[hadoop笔记]使用Eclipse创建MapReduce工程A(持续更新中)

0. 准备工作:

① 正确搭建好的Hadoop伪分布式/完全分布式平台

② 需要的安装包:

​ jdk-8u181-windows-x64.exe

​ eclipse-jee-mars-1-win32-x86_64.zip

​ hadoop-2.7.3.tar.gz

​ hadoop-eclipse-plugin-2.7.3.jar

​ winutils-master.zip

1. 在Windows环境下安装JDK,配置环境变量

①双击安装包,安装路径(D:\jdk)

②配置环境变量:

JAVA_HOME

Path

2. 安装eclipse,配置环境

①解压安装包即可

② 把hadoop-eclipse-plugin-2.7.3.jar放入eclipse安装目录下的dropins,然后再运行eclipse
添加Hadoop-eclipse插件

③ 在 open perspective 添加 map/reduce.
在这里插入图片描述

3. 在eclipse中连接Hadoop

① 在map/reduce location 中右键单击,新建一个location,重点设置host(主节点ip地址,如果在Windows中设置了主机映射也可以如下图所示直接写虚拟机的主机名), port(dfs: 8020),user name(windows的用户名,建议改为跟虚拟机的用户名一致)
创建Hadoop连接

② 回到Xshell,在主节点上编辑hdfs-site.xml,添加一个跳过权限检查的属性

[hadoop@wangxin1 ~]$ vi $HADOOP_HOME/etc/hadoop/hdfs-site.xml 
	# 添加
	        <!-- 不开启权限检查 -->
        <property>
                <name>dfs.permissions.enabled</name>
                <value>false</value>
        </property>

  • 1
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值