在windows系统需要配置hadoop运行环境,否则直接运行代码会出现以下问题:
Could not locate executable null\bin\winutils.exe in the hadoop binaries
原因: 缺少winutils.exe
Unable to load native-hadoop library for your platform..using builtin-Java classes where applicable
原因: 缺少hadoop.dll
解决方法:
1.根据自己电脑的操作系统拷贝对应的编译后的hadoop jar包到非中文路径(例如:D:\Develop\hadoop-2.7.7)
Windows 10 上编译 Hadoop的步骤参考
https://www.cnblogs.com/jhxxb/p/10765815.html
2.这里编译完成的文件已经上传
链接:https://pan.baidu.com/s/1feDgXPqhlEyTUbT9bGKd_A
提取码:7e56
这里解压后的文件我使用的是hadoop2.7.7
将文件放在了D盘
3.在windows上面配置hadoop的环境变量:HADOOP_HOME,并将%HADOOP_HOME%\bin添加到path中
在path中添加环境变量:
4.把hadoop2.7.7文件夹中bin目录下的hadoop.dll文件放到系统盘:C:\Windows\System32目录
5.关闭windows重启