Hadoop 下载

下载法一:官方下载

hadoop官网

1.选择要下载的版本,这里我以3.4.0为例进行说明;
在这里插入图片描述

2.跳转后,选择对应系统架构的,进行下载;

在这里插入图片描述

下载法二:国内镜像源下载

1.阿里云

这里我以mac m1为案例;

在这里插入图片描述
在这里插入图片描述

### Hadoop 下载与安装教程 #### 准备工作 为了顺利安装Hadoop,需先确认Java环境已正确设置。通过命令`java -version`验证JDK是否已经成功安装并可用[^1]。 #### 获取Hadoop软件包 访问Apache官方站点获取最新稳定版本的Hadoop压缩包(如hadoop-3.4.0.tar.gz),这是构建任何规模Hadoop集群的基础步骤之一[^3]。 #### 解压文件至目标路径 解压缩下载好的tarball到指定位置,通常建议放置于/home/username/software/hadoop这样的目录下以便管理和维护[^2]。 #### 设置环境变量 编辑~/.bashrc或其他shell配置文件来添加必要的PATH和HADOOP_HOME定义,确保可以从任意终端会话启动Hadoop服务。 ```bash export HADOOP_HOME=/home/user/software/hadoop export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin source ~/.bashrc ``` #### 修改SSH免密登录配置 为了让NameNode能够无需密码即可连接DataNodes,在所有节点间建立基于公钥的身份认证机制至关重要。具体操作可参照如下指令完成私钥追加动作: ```bash cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys chmod 600 ~/.ssh/authorized_keys ``` #### 调整核心参数设定 依据实际需求调整core-site.xml, hdfs-site.xml以及yarn-site.xml中的各项属性值,比如fs.defaultFS指向本地或远程Namenode地址等。 #### 启动HDFS和其他组件 利用sbin/start-dfs.sh脚本初始化namenode格式化过程,并随后开启datanodes;对于YARN则执行start-yarn.sh以激活ResourceManager及其附属容器管理器[^4]。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值