所需要准备的工具:
- hadoop版本:2.7.3
- Java:1.8
假如你还需要Hadoop-native的话,还需要以下这几个工具。
但是Hadoop-native不是每个用户必需的,如果不用的话,只准备上面两个就好了。
关于什么是Hadoop-native和编译Hadoop-native的方法。这里后续补上链接。。
- protoc 2.5.0(必需要是这个版本)
- cmake
- maven
1、安装Java
- 下载Java 最新的版本 https://pan.baidu.com/s/1kPDvPxpklEQ46HMBuMF6pg 密码是7yw7
- 跟着安装步骤走
- 配置环境变量 JAVA_HOME JAVA_CLASS 并加到PATH中。
- 验证java是否安装成功 java -version
2、下载Hadoop 包,并解压到自己的home目录下https://archive.apache.org/dist/hadoop/common/
- 配置四个配置文件Hadoop-env .sh hadoop-core.xml dfs-site.xml yarn-site.xml
- sbin/路径下 start-all.sh
- 查看输出信息看是否都启动成功了。或者jps查看有哪些进程在跑
这里有可能看到warning的信息:unable to load native-hadoop library
这是一开始说的Hadoop-native 问题。如果不需要可以略过这一步。
如果需要的话,链接在这(https://mp.csdn.net/mp_blog/creation/editor)