Hadoop的伪分布式安装和配置

该文详细介绍了如何在Linux环境下进行Hadoop的伪分布式安装,包括JDK的安装、SSH免密码配置和Hadoop的解压、配置及启动步骤。通过格式化Namenode并启动Hadoop服务,最终通过jps命令检查服务状态。
摘要由CSDN通过智能技术生成

Hadoop的伪分布式安装和配置

一、目的

1、理解Hadoop伪分布式的安装过程;
2、学会JDK的安装和SSH免密码配置;
3、学会Hadoop的伪分布式安装和配置。

二、内容

在linux平台中安装Hadoop,包括JDK安装、SSH免密码配置和伪分布式安装。

三、过程

1、SSH免密码登录配置
(1) 创建一对密钥,命令:ssh-keygen

(2) 加入密钥授权,命令:cat ./id_rsa.pub >> ./authorized_keys

(3) 输入命令登陆即可,命令:ssh localhost

2、Hadoop的安装
(1) 找到hadoop压缩包所在的位置,命令:cd simple/soft

(2) 在soft下解压hadooop,命令为:sudo tar –zxf hadoop-2.4.1.tar.gz –C /usr/local

(3) 看是否hadoop是否解压成功,命令为:cd /usr/local/hadoop-2.4.1
检查hadoop是否可用,令为:/hadoop version

3、Hadoop伪分布式配置
(1) 修改编辑core-site.xml文件和hdfs-site.xml,命令为:vim core-site.xml

修改编辑hdfs-site.xml,命令为:vim hdfs-site.xm

(2) Namenode的格式化

(3) 启动Hadoop,命令为:./sbin/start-dfs.sh

(4) 通过命令jps判断是否启动

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值
>