Hadoop安装伪分布模式-centos7

本文详细介绍了在CentOS7上安装Hadoop伪分布模式的步骤,包括配置java环境、安装hadoop2.7.3、设置环境变量、配置HDFS、MapReduce、YARN相关文件,格式化HDFS,设置SSH免密码登录,以及启动HDFS和YARN的全过程。同时提到了Hadoop伪分布模式的特点和组成。
摘要由CSDN通过智能技术生成

如果有帮助到你,可以关注一下,不定时会更新博客~,谢谢!

Hadoop的伪分布模式

1、特点:具备Hadoop的所有功能,在单机上模拟一个分布式的环境
hadoop伪分布下主要组成
(1)HDFS:主:NameNode,数据节点:DataNode
(2)MapReduce:并行运算
(3)Yarn:容器,运行MapReduce程序
主节点:ResourceManager
从节点:NodeManager

伪分布模式的安装步骤

1)安装java环境

java -version

在这里插入图片描述

2)上传hadoop2.7.3,并且解压

tar-zxvfhadoop-2.7.3.tar.gz

3)配置hadoop

一:配置hadoop环境变量

所有hadoop相关的配置文件都在etc目录下

1)修改hadoop-env.sh 文件的java环境,将java安装路径加进去:

export JAVA_HOME=/usr/jdk/jdk1.8.0_11

2)配置环境变量

 vi /etc/profile

加上以下内容

#hadoop enviroment
export HADOOP_HOME=/usr/bigdata/hadoop2.7.3/hadoop-2.7.3
export PATH=$PATH:$HADOOP_HOME/bin

立刻生效

source /etc/profile

二:配置HDFS,修改hdfs-site.xml

<configuration>

	<!--配置是否检查权限-->
	<property>
			 <name>dfs.permissions</name>
			 <value>false
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值