发现一个坑:
用windows编写hadoop客户端时上传文件没问题,下载文件的时候报错,显示HADOOP_HOME问题。
解决方法:
需要在windows下解压一个hadoop的二进制文件(需要用管理员权限解压),再下载对应版本(版本号的前两位数对应即可)的winutils
https://github.com/steveloughran/winutils
将winutils的bin目录替换解压的hadoop文件下的bin目录
将bin目录下的hadoop.dill复制到C:/windows/system32
添加环境变量,%HADOOP_HOME%,指向刚才解压的目录即可;
添加Path %HADOOP_HOME%\bin 以及%HADOOP_HOME%\sbin
另外一个坑:
jdk要选择1.8版本的,