Hadoop环境架设(伪分布式)

  1. Jdk(建议使用JDK 1.8.11)
  2. Tar hadoop.tar.gz

step1:解压

1、tar -zxf hadoop-2.6.0-cdh5.14.2.tar.gz
2、mv hadoop-2.6.0-cdh5.14.2 soft/hadoop260

step2:修改5个配置文件

1、进入hadoop-evn.sh配置文件,配置JAVA_HOME地址
在这里插入图片描述
2、进入core-site.xml,配置默认文件系统
fs.defaultFS = hdfs://192.168.56.116:9000 默认文件系统(本地默认 file:/位置)此处端口与HBASE端口设成一样
在这里插入图片描述
3、配置hdfs-site.xml,dfs.replication = 1 (副本个数,最少3个伪分布只写1个)
在这里插入图片描述
4、复制一份mapred-site.xml.template 命名为mapred-site.xml,然后修改配置文件
mapreduce.framewok.name=yarn (设置映射化简模型框架为yarn)
在这里插入图片描述
5、yarn-site.xml
yarn.resourcemanager.localhost=localhost(yarn站点名称)
yarn.nodemanager.aux-service=mapreduce_shuffle(辅助节点管理)
在这里插入图片描述

step3:配置全局配置文件

vi /etc/profile
export HADOOP_HOME=/opt/soft/hadoop260
export HADOOP_MAPRED_HOME=$HADOOP_HOME
export HADOOP_COMMON_HOME=$HADOOP_HOME
export HADOOP_HDFS_HOME=$HADOOP_HOME
export YARN_HOME=$HADOOP_HOME
export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native
export PATH=$PATH:$HADOOP_HOME/sbin:$HADOOP_HOME/bin
export HADOOP_INSTALL=$HADOOP_HOME

在这里插入图片描述

step4:激活该全局配置文件

source /etc/profile

step5:格式化namenode

hadoop namenode -format

step6:启动

start-all.sh

step7:查看是否安装成功

打开浏览器,输入网址http://192.168.56.116:50070,如果出现下图,则证明安装成功
在这里插入图片描述搞定!!!

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值