hadoop2.9安装指南

1、到hadoop官网下载最新的二进制版本。 
2、把压缩包上传到你的linux服务器、解压缩、配置环境变量. ps:我这里用的是centos6.9,你也可以用别的linux,譬如ubuntu。 
解压缩命令: tar -zxvf hadoop-2.9.0.tar.gz 
文件夹重命名:mv hadoop-2.9.0 hadoop 
配置环境变量:vim /etc/profile

export PATH=.:$PATH:$JAVA_HOME/bin:$HADOOP_HOME/bin
alias cdha='cd /home/hadoop'
export HADOOP_HOME=/home/hadoop
  • 1
  • 2
  • 3

让更改生效: 
source /etc/profile 
这里我们设置了一个别名 cdha,可以快速转到hadoop 的目录。 
(注意你需要事先已经安装好了java8哦!) 
3、 修改hadoop配置文件 
需要修改的配置文件都位于$HADOOP_HOME/etc/hadoop目录下。 
1) vim hadoop-env.sh

export JAVA_HOME=/usr/java/jdk1.8.0_131
  • 1

注意这里一定要是java的绝对路径,不可以用$JAVA_HOME代替。 
2)vim core-site.xml 
这里写图片描述 
3)vim hdfs-site.xml 
这里写图片描述 
4、配置文件修改说明: 
Hadoop 的运行方式是由配置文件决定的(运行 Hadoop 时会读取配置文件),因此如果需要从伪分布式模式切换回非分布式模式,需要删除 core-site.xml 中的配置项。 
此外,伪分布式虽然只需要配置 fs.defaultFS 和 dfs.replication 就可以运行(官方教程如此),不过若没有配置 hadoop.tmp.dir 参数,则默认使用的临时目录为 /tmp/hadoo-hadoop,而这个目录在重启时有可能被系统清理掉,导致必须重新执行 format 才行。所以我们进行了设置,同时也指定 dfs.namenode.name.dir 和 dfs.datanode.data.dir,否则在接下来的步骤中可能会出错。 
5、配置完成后,执行以下语句格式化NameNode: 
./bin/hdfs namenode –format 
成功会看到如下提示: 
这里写图片描述 
6、接着执行以下命令开启 NameNode 和 DataNode 守护进程: 
./sbin/start-dfs.sh 
若ssh提示连接,输入yes即可 
启动完成后,输入命令jps来判断是否启动成功. 
若成功启动则会列出如下进程: “NameNode”、”DataNode” 和 “SecondaryNameNode” 
成功启动后,可以访问 Web 界面 http://localhost:50070 查看 NameNode 和 Datanode 信息,还可以在线查看 HDFS 中的文件。 
若有如下页面,恭喜安装成功 ! 

这里写图片描述


http://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-common/SingleCluster.html

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值