win+idea连接Hadoop(非maven)(包含mapreduce)

4 篇文章 0 订阅
2 篇文章 0 订阅

整理一下以前的思路,自用

  1. 将Hadoop包解压到本地硬盘中

  2. 添加环境变量HADOOP_HOME
    环境变量

  3. 追加path变量
    path

  4. Windows下缺少winutils.exe和hadoop.dll文件前往GitHub下载对应Hadoop版本的文件

  5. 将下载的所有的文件放到HADOOP_HOME/bin下即可

  6. 在idea创建普通Java项目

  7. 导入\hadoop\share\hadoop文件夹下的jar包(主要为每个子文件夹中以及所有lib文件夹中)
    导入
    至此可以连接Hadoop下面是配置mapreduce

  8. 在前7步的基础上,将远端Hadoop配置文件中的以下三个文件拷贝到src文件夹中
    配置文件

9.把win中的hosts文件中的ip映射改为和远端服务器一样(也可以将配置文件中的映射改为IP,但还是建议改本地的映射。)

首先找到host文件,一般位于:C:\Windows\System32\drivers\etc
之后用记事本打开,直接修改。保存txt文件到桌面。
最后删除后缀名,再粘贴回去就可以了。
转自:https://blog.csdn.net/qq_41684261/article/details/82846955
至此就可以在win运行mapreduce程序了

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值