hadoop伪分布式部署

本文详细介绍了在单机上进行Hadoop伪分布式部署的过程,包括环境准备、用户和文件夹创建、软件安装、配置文件修改、SSH无密码信任以及HDFS的格式化和启动。内容涵盖从JAVA_HOME配置到各个核心配置文件的设置,确保读者能够理解并实践Hadoop的伪分布式模式。
摘要由CSDN通过智能技术生成

一、环境准备

1、创建用户
[root@Hadoop01 ~]# useradd byy
[root@Hadoop01 ~]# su - byy
上一次登录:日 1月 31 14:56:56 CST 2021pts/1 上
2、创建文件夹
[byy@Hadoop01 ~]$ mkdir app data software bin log sourcecode tmp
[byy@Hadoop01 ~]$ ll
total 0
drwxrwxr-x 2 byy byy 6 Nov 27 21:32 app #解压的软件包 软连接
drwxrwxr-x 2 byy byy 6 Nov 27 21:32 data #数据
drwxrwxr-x 2 byy byy 6 Nov 27 21:32 software #软件压缩包
drwxrwxr-x 2 byy byy 6 Nov 27 21:32 bin #第三方的jar
drwxrwxr-x 2 byy byy 6 Nov 27 21:32 log #日志
drwxrwxr-x 2 byy byy 6 Nov 27 21:32 sourcecode #源代码编译
drwxrwxr-x 2 byy byy 6 Nov 27 21:32 tmp #临时文件夹
3、上传软件包
[byy@Hadoop01 ~]$ cd software
[byy@Hadoop01 software]$ rz #回车上传软件压缩包到software文件夹
[byy@Hadoop01 software]$ ll #查看是否已上传
total 424176
-rw-r--r-- 1 byy byy 434354462 Nov 27 21:35 hadoop-2.6.0-cdh5.16.2.tar.gz
4、解压软件压缩包到app中
[byy@Hadoop01 software]$ tar -zxvf hadoop-2.6.0-cdh5.16.2.tar.gz -C ../app/
[byy@Hadoop01 app]$ cd ../app
[byy@Hadoop01 app]$ ll #查看是否已解压到app文件夹
total 0
drwxr-xr-x 14 byy byy 4096 Nov 27 21:37 hadoop-2.6.0-cdh5.16.2
5、做软连接
[byy@Hadoop01 app]$ ln -s hadoop-2.6.0-cdh5.16.2 hadoop
[byy@Hadoop01 app]$ ll #查看是否已建立好软连接 
total 0
lrwxrwxrwx 1  byy byy   22 Nov 27 21:39 hadoop -> hadoop-2.6.0-cdh5.16.2
drwxr-xr-x 14 byy byy 4096 Nov 27 21:37 hadoop-2.6.0-cdh5.16.2
6、java软件安装(安装官网推荐的版本)
创建文件夹
[byy@Hadoop01 app]$ su - root
[root@Hadoop01 ~]# mkdir ../usr/java #在根目录下创建文件夹
上传软件包
[root@Hadoop01 ~] cd /usr/java
[root@Hadoop01 java] rz #上传jdk.8u45-linux-x64.gz压缩包到此目录
[root@Hadoop01 java] ll
-rw-r--r-- 1 root root 173271626 Nov 27 21:43 jdk.8u45-linux-x64.gz
解压压缩包到当前目录
[root@Hadoop01 java] tar -xzvf jdk.8u45-linux-x64.gz
[root@Hadoop01 java] ll #查看解压后的文件
总用量 169212
drwxr-xr-x 8   10  143       255 Nov 27 21:45 jdk1.8.0_45
-rw-r--r-- 1 root root 173271626 Nov 27 21:43 jdk.8u45-linux-x64.gz
修正解压后的文件夹的权限
[root@Hadoop01 java] 
  • 1
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值