大数据入门系列 4:全网最全,伪分布式 Hadoop 在 Ubuntu 上的安装流程完整步骤及易错点分析_ubuntu下安装hadop

本文详细介绍了在Ubuntu系统上安装伪分布式Hadoop的步骤,包括解压Hadoop、转移安装路径、设置权限、配置文件修改、启动Hadoop集群和访问Web界面。通过修改core-site.xml和hdfs-site.xml文件,配置HDFS地址和端口,确保NameNode和DataNode成功启动。此外,文章还提供了错误排查和资源获取链接。
摘要由CSDN通过智能技术生成
  • x : 从 tar 包中把文件提取出来。
  • z : 表示 tar 包是被 gzip 压缩过的,所以解压时需要用 gunzip 解压。
  • v : 显示详细信息。
  • f xxx.tar.gz : 指定被处理的文件是 xxx.tar.gz。
4.3.2、查看 Hadoop 解压后目录文件

输入 ll 查看下载目录下的文件和目录,会看到多了一个目录 hadoop-3.2.1,这是安装包解压后的目录,具体如下图所示:

在这里插入图片描述

4.3.3、转移 Hadoop 安装路径

在下载目录下输入如下命令,将 hadoop-3.2.1 目录转移到 usr/local/hadoop 中:

sudo mv hadoop-3.2.1 /usr/local/hadoop

目标文件夹,具体如下图所示:

在这里插入图片描述

4.4、检查 Hadoop 目录所有者权限

我们进入 Hadoop目录,可能会发现文件带锁,输入 ll 查看所有者不是本人,具体如下图所示:

在这里插入图片描述

4.5、修改 Hadoop 目录所有者权限

这时我们就需要将 Hadoop 目录的所有者更改,根目录输入如下命令:

sudo chown bailu:bailu -R /usr/local/hadoop

具体如下图所示:

在这里插入图片描述
修改之后我们可以看到所有者已经更改,具体如下图所示:

在这里插入图片描述

4.6、查看 Hadoop 目录结构

根目录输入 cd /usr/local/hadoop 进入 Hadoop 目录,输入 ll 查看 Hadoop 下目录结构,具体如下图所示:

在这里插入图片描述

4.7、Hadoop 约定目录结构分析

  • bin:Hadoop 最基本的管理脚本和使用脚本所在目录,这些脚本是 sbin 目录下管理脚本的基础实现,用户可以直接使用这些脚本管理和使用 Hadoop。
  • etc:Hadoop 配置文件所在目录,包括 core-site.xml,hdfs-site.xml,mapred-site.xml 等从 hadoop 1.0 继承而来的配置文件和
  • 12
    点赞
  • 15
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值