Windows系统用IDEA远程链接在本地虚拟机上的伪Hadoop集群

Windows系统用IDEA远程链接在本地虚拟机上的伪Hadoop集群

环境：

操作系统：win10

hadoop版本：3.3.0

需自行在本机上安装好虚拟机，并且虚拟机上还需安装好Hadoop环境

环境变量设置：

HADOOP_HOOME：解压的Hadoop下载地址（要求绝对地址无空格和中文）

%HADOOP_HOOME%/bin

%HADOOP_HOOME%/bin/winutils.exe

Hadoop配置：

Hadoop下载地址：https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/

与自己虚拟机的版本相同即可

修改hadoop-env.cmd,改为自己本机的设置jdk目录
set JAVA_HOME=C:\Program Files\Java\jdk1.8.0_221

winutils配置：

winutils的windows版本: github.com/steveloughran/winutils

如果找不到对应版本，可直接下载最近版本即可

将下载的bin文件夹与本地hadoop下的bin文件夹替换

将下载的bin文件夹下的hadoop.dll拷贝到C:\Windows\System32目录下

idea插件设置：

big data tools

打开IDEA,进入插件下载，点击左上角File->Settings-> Plugins，输入big data tools进行下载。

进行ip地址的配置.

参考文章：

• https://blog.csdn.net/weixin_45774600/article/details/105291623?utm_medium=distribute.pc_relevant.none-task-blog-2_defaultbaidujs_baidulandingword~default-4-105291623-blog-54434534.pc_relevant_paycolumn_v3&spm=1001.2101.3001.4242.3&utm_relevant_index=7

• https://blog.csdn.net/weixin_43387852/article/details/116698927?utm_medium=distribute.pc_relevant.none-task-blog-2_defaultbaidujs_utm_term~default-0.control&spm=1001.2101.3001.4242
  idujs_utm_term~default-0.control&spm=1001.2101.3001.4242