Hadoop安装以及配置文件初始化修改

最新推荐文章于 2024-08-29 22:46:51 发布

前朝那些事

最新推荐文章于 2024-08-29 22:46:51 发布

阅读量4.1k

点赞数 2

分类专栏： Hadoop

本文链接：https://blog.csdn.net/A_____lan/article/details/93464346

版权

本文档详细介绍了Hadoop的安装步骤，包括在Linux环境下创建cloud目录、解压安装包，以及对hadoop-env.sh、core-site.xml、hdfs-site.xml、mapred-site.xml和yarn-site.xml等配置文件的修改，如设置默认文件系统、临时文件目录、复本数量、运行框架和辅助服务等，确保Hadoop环境的正确配置。

摘要由CSDN通过智能技术生成

一、hadoop安装

1、上传安装包

2、在家目录创建一个cloud目录
mkdir /home/cloud

3、解压
tar -zxvf hadoop-1.1.2.tar.gz -C /home/cloud/

二、hadoop配置文件修改

1、修改hadoop-env.sh
vim hadoop-env.sh

export JAVA_HOME=/usr/java/jdk1.6.0_45

2、修改core-site.xml
vim core-site.xml

<!-- 指定HDFS的老大即为namenode的通信地址 -->
<!-- itcast为主机名也可以配置IP，或者localhost -->
<property>
    <name>fs.defaultFS</name>
    <value>hdfs://itcast:9000</value>
</property>
<property>
    <name>hadoop.tmp.dir</name>
    <value>/cloud/hadoop-1.1.2/tmp</value>
</property>

fs.defaultFS：用来设置Hadoop的默认文件系统，HDFS的守护线程通过该属性项来确定HDFS namenode的主机及端口，如果没有指定，就是用默认的本地文件系统。
hadoop.tmp.dir：指定hadoop运行时产生文件的存放目录，比如当你上传文件到hdfs时&