hadoop安装包解压
tar -xvf hadoop-2.7.7.tar.gz
解压成功ll查看文件
配置环境变量
1.
vi /home/wj/hadoop-2.7.7/etc/hadoop/hadoop-env.sh
修改export JAVA_HOME={$JAVA_HOME}
为 export JAVA_HOME=/usr/java/jdk1.8.0_162/
2.
vi yarn-env.sh
找到#export JAVA_HOME=/home/y/libexec/jdk.1.6.0/
去掉#,改为
export JAVA_HOME=/usr/java/jdk1.8.0_162
3.
vi core-site.xml
fs.defaultFS
hdfs://master:9000
hadoop.tmp.dir
/home/wj/hadoopdata
4.
vi hdfs-site.xml
dfs.replication
1
5.
vi yarn-site.xml
yarn.nodemanager.aux-services
mapreduce_shuffle #洗牌,类似排序
yarn.resourcemanager.address
master:18040#主机端口
yarn.resourcemanager.scheduler.address
master:18030#调度端口
yarn.resourcemanager.resource-tracker.address
master:18025#跟踪端口
首次运行格式化
[wj@master hadoop]$ hdfs namenode -format
yarn.resourcemanager.admin.address
master:18141#管理操作端口
yarn.resourcemanager.webapp.address#监控页面
master:18088
6.
复制 mapred-site-template.xml
cp etc/hadoop/mapred-site-template.xml etc/hadoop/mapred-site.xml
vi mapred-site.xml
mapreduce.framework.name
yarn
7.
wj@master ~]$ pwd
/home/wj
[wj@master ~]$ vi ~/.bash_profile 或者vi /etc/profile
#JAVA
export JAVA_HOME=/usr/java/jdk1.8.0_162
export PATH=$JAVA_HOME/bin:$PATH
#hadoop
export HADOOP_HOME=/home/wj/hadoop2.7.7
export PATH=$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$PATH
使配置生效
[wj@master ~]$ source .bash_profile 或者source /etc/profile