hadoop-3.3.0安装
准备工作
在虚拟机中安装好了java-jdk
没安装 jdk 怎么办?点击跳转
没虚拟机怎么办?点击跳转
开始安装hadoop
1、下载hadoop安装包并拖拽安装包到虚拟机中
无法拖拽文件?点击跳转
2、右键提取文件到此处,注意:我保存hadoop文件的路径,建议路径先和我统一,等熟练了再用自己的路径,路径相关的地方我会提示
3、这些是需要配置的文件,按照我划出的路径即可找到这些文件
我的路径是:
主文件夹>aa>hadoop3.3.0>etc>hadoop
4、这是需要你配置的第一个文件,Hadoop-env.sh
export JAVA_HOME=/usr/lib/jvm/java-8-oracle/
修改完成后保存关闭即可
5、这是你需要配置的第二个文件
core-site.xml
<property>
<name>fs.default.name</name>
<value>hdfs://localhost:9000</value>
</property>
<property>
<name>hadoop.tmp.di</name>
<value>/home/zz/aa/hadhoop-3.3.0/data/tmp</value>
</property>
注意:图中红框划出的位置为你自己的路径,其中zz为你的用户名
6、这是你需要配置的第三个文件
hdfs-rbf-site.xml
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
7、这是你刚刚配置过得第一个文件,需要再配置一处地方。
export HADOOP_HOME="/home/zz/aa/hadoop-3.3.0"
注意:此处路径相关
8、完成以上配置以后在如图所示的路径下打开终端
9、安装ssh
安装命令
sudo apt install ssh
10、生成相关内容
依次执行如下指令即可
ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa
cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys
chmod 0600 ~/.ssh/authorized_keys
ssh localhost
11、重置数据节点
bin/hdfs namenode -format
12、如果出现了下图所示的界面,则大概率是运行成功了,如果没有,那很可能是一开始的文件没配置好或者是路径不对,建议返回第一步重新开始。
13、启动集群
sbin/start-dfs.sh
注意我的命令行所在路径
14、启动成功后可以输入 jps 进行验证,如果结果和我的第二个框一样有很多行,则代表安装成功,如果只有一行,则返回第一步重新检查一遍,祝你好运。
当然,你也可以打开浏览器进行验证,启动集群以后打开浏览器,访问如图所示的网址,如果能成功找到网页,则代表安装成功
好的,hadoop 安装到此结束,点个关注不迷路。我们 下回再见。