hadoop 3.2.2在centos7上部署安装(单机版)

1.环境准备

在安装hadoop 3.2.2之前,必须先安装java环境,请各位自行去安装官网jdk。关闭防火墙,这样安装比较简单。
java下载地址


2.下载hadoop 3.2.2

hadoop下载地址
在这里插入图片描述
备注:注意是binary文件,source那个是源码


3.解压tar.gz

把下载好的tar.gz包解压到自己指定的路径

tar -zxvf hadoop-3.2.2.tar.gz -C /usr/local/hadoop-3.2.2

4.配置hadoop环境变量

vim /etc/profile

加入如下配置:

export HADOOP_HOME=/usr/local/hadoop-3.2.2
export PATH=$PATH:$HADOOP_HOME/bin

让配置生效

source /etc/profile

5.配置hadoop

准备工作做好了,接下来开始进入主题,配置hadoop


5.1配置hadoop-env.sh
 vim /usr/local/hadoop-3.2.2/etc/hadoop/hadoop-env.sh

找到# The java implementation to use. 这个注释,加入下面一行配置:

export JAVA_HOME=/usr/java/jdk1.8/
  • 0
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
以下是在 CentOS 7 上安装 Hadoop 的步骤: 1. 安装 Java: ``` sudo yum install java-1.8.0-openjdk-devel ``` 2. 下载 Hadoop: ``` wget https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/hadoop-3.3.1/hadoop-3.3.1.tar.gz ``` 3. 解压 Hadoop: ``` tar -xzf hadoop-3.3.1.tar.gz ``` 4. 设置 Hadoop 环境变量: ``` export HADOOP_HOME=/path/to/hadoop-3.3.1 export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin ``` 可以将上述命令添加到 /etc/profile 文件中,以便在每次登录时自动设置环境变量。 5. 配置 Hadoop: 进入 Hadoop 的配置目录: ``` cd $HADOOP_HOME/etc/hadoop ``` 修改 core-site.xml 文件: ``` <configuration> <property> <name>fs.defaultFS</name> <value>hdfs://localhost:9000</value> </property> </configuration> ``` 修改 hdfs-site.xml 文件: ``` <configuration> <property> <name>dfs.replication</name> <value>1</value> </property> </configuration> ``` 修改 yarn-site.xml 文件: ``` <configuration> <property> <name>yarn.nodemanager.aux-services</name> <value>mapreduce_shuffle</value> </property> <property> <name>yarn.nodemanager.aux-services.mapreduce.shuffle.class</name> <value>org.apache.hadoop.mapred.ShuffleHandler</value> </property> </configuration> ``` 修改 mapred-site.xml 文件: ``` <configuration> <property> <name>mapreduce.framework.name</name> <value>yarn</value> </property> <property> <name>mapred.job.tracker</name> <value>localhost:54311</value> </property> </configuration> ``` 6. 格式化 Hadoop 文件系统: ``` hdfs namenode -format ``` 7. 启动 Hadoop: ``` start-all.sh ``` 或者分别启动各个组件: ``` start-dfs.sh start-yarn.sh ``` 可以使用 jps 命令检查是否启动成功。 以上就是在 CentOS 7 上安装 Hadoop 的全部步骤。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Top_雨夜聆风丶

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值