承接hadoop伪分布式搭建01:https://blog.csdn.net/qq_19968255/article/details/82803655
3.安装Hadoop
版本 hadoop-2.4.1
3.1上传hadoop安装包
3.2解压hadoop安装包
mkdir /cloud
#解压到/cloud/目录下
tar -zxvf hadoop-2.2.0.tar.gz -C /cloud/
文件夹内容
bin:可执行的脚本
include和libexec:本地库的头文件
sbin:启动和停止相关
etc:配置文件
lib:存放本地库
share:java 用的jar
3.3修改配置文件(5个)
第一个:hadoop-env.sh
在vim hadoop-env.sh 中
:echo $JAVA_HOME 确定后,复制java路径
export JAVA_HOME=复制java路径
第二个:core-site.xml
fs.defaultFS
hdfs://itcast01:9000
hadoop.tmp.dir
/itcast/hadoop-2.4.1/tmp
第三个:hdfs-site.xml
dfs.replication
1
第四个:mapred-site.xml (mv mapred-site.xml.template mapred-site.xml)
mv mapred-site.xml.template mapred-site.xml
vim mapred-site.xml
mapreduce.framework.name
yarn
第五个:yarn-site.xml
yarn.resourcemanager.hostname
itcast01
yarn.nodemanager.aux-services
mapreduce_shuffle
3.2将hadoop添加到环境变量
vim /etc/proflie
export JAVA_HOME=/usr/java/jdk1.7.0_65
export HADOOP_HOME=/itcast/hadoop-2.4.1
export PATH=$PATH:$JAVA_HOME/bin:$HADOOP_HOME/bin:$HADOOP_HOME/sbin
#刷新配置
source /etc/profile
3.3格式化namenode(是对namenode进行初始化)
hdfs namenode -format 或者
hadoop namenode -format(过时了)
tmp :保存运行时重要的文件
未完待续!------------------------------------------------------------------------