hadoop2.7.3在centos7上部署安装(单机版)

本文档详述了如何在CentOS7系统上安装Hadoop2.7.3的单机版。首先确保安装了Java环境,然后从官方地址下载Hadoop的binary文件并解压。接着配置Hadoop环境,包括设置java路径、修改core-site.xml、hdfs-site.xml文件,实现SSH免密码登录。首次启动HDFS需要格式化,然后启动namenode、datanode、secondarynamenode。此外,还介绍了如何配置mapred-site.xml和yarn-site.xml以启用YARN,并启动resourcemanager和nodemanager。最后,通过jps命令检查进程,并通过指定URL查看HDFS和YARN的状态。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

(1)hadoop2.7.3下载

(前提:先安装java环境)

下载地址:http://hadoop.apache.org/releases.html


(注意是binary文件,source那个是源码)


(2)解压tar.gz 



(3)配置hadoop

1.修改/usr/hadoop/hadoop-2.7.3/etc/hadoop/hadoop-env.sh 文件的java环境,将java安装路径加进去:

export JAVA_HOME=/alidata/server/java-1.7.0


配置hadoop环境变量

vi /etc/profile

export HADOOP_HOME=/usr/hadoop/hadoop-2.7.3
export PATH=$PATH:$HADOOP_HOME/bin

有的安装介绍中说是vi ~/.bash_profile,其实也可以用这个,2个命令在不同系统用户的环境配置的作用域不一样。参考:

http://blog.csdn.net/caiwenfeng_for_23/article/details/44242961

使之生效:

source /etc/profile


2.修改/usr/hadoop/hadoop2.7.3/etc/hadoop/core-site.xml 文件,

<configuration>
    <!-- 指定HDFS老大(namenode)的通信地址 -->
    <property>
        <name>fs.defaultFS</name>
        <value>hdfs://localhost:9000</value>
    </property>
    <!-- 指定hadoop运行时产生文件的存储路径 -->
    <property>
        <name>hadoop.tmp.dir</name>
        <
评论 5
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值