HDFS的JAVA API开发环境准备
1、修改hosts文件
- windows下修改hosts文件所在位置C:\Windows\System32\drivers\etc\hosts
- 将虚拟机中/etc/hosts文件一下内容,添加到以上hosts文件末尾
- 如果是mac,直接修改mac的/etc/hosts文件,添加如上内容即可
2、 安装jdk
-
windows安装jdk 8,我这里用的是jdk-8u241-windows-x64.exe,也可以从oracle官网下载
-
双击安装,注意:==jdk不要安装到有空格、有中文的目录==
-
配置环境变量,点击我的电脑>>>>选择属性>>>>在系统变量中加入JAVA_HOME,值为C:\Java\jdk1.8.0_172>>>>PATH中添加值
%JAVA_HOME%\bin
-
JDK 和 JRE,JRE是java运行时环境,包含了 java虚拟机 和 java基础类库。是使用java语言编写的程序运行所需要的软件环境,是提供给想运行java程序的用户使用的。JDK顾名思义是java开发工具包,是程序员使用java语言编写java程序所需的开发工具包,是提供给程序员使用的。JDK包含了JRE,同时还包含了编译java源码的编译器javac,还包含了很多java程序调试和分析的工具:jconsole,jvisualvm等工具软件,还包含了java程序编写所需的文档和demo例子程序。
mac也要安装jdk 8
3、windows中的hadoop环境配置
- 解压资料当中的
hadoop-2.6.0-cdh5.14.2_windows环境配置安装包.rar
这个压缩文件文件到一个==没有中文没有空格==的目录下 - 然后在windows当中配置hadoop的环境变量
- bin、sbin目录添加到path中
- 然后将E:\hadoop-2.6.0-cdh5.14.0\bin\hadoop.dll文件拷贝到C:\Windows\System32
- 将hadoop集群hadoop-2.6.0-cdh5.14.2/etc/hadoop的一下5个配置文件
core-site.xml、hdfs-site.xml、mapred-site.xml、yarn-site.xml、slaves
,拷贝到windows下hadoop的C:\hadoop-2.6.0-cdh5.14.0\etc\hadoop
目录下 - cmd中运行
hadoop
,出现如下效果