Linux中Hadoop的安装及环境变量配置

Hadoop的运行需要Java环境,请确保在jdk安装成功的情况下安装Hadoop
第一步:从官网下载Hadoop
网址:http://hadoop.apache.org/releases.html

本文以2.7.6版本为例,作简单介绍
第二步,解压并配置环境
解压命令:tar -zxvf hadoop-2.7.6.tar.gz
配置环境变量:
export HADOOP_HOME=/home/xxx/software/hadoop-2.7.6
export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin
第三步:修改配置文件
1、修改hadoop中 etc/hadoop/core-site.xml 文件,如图所示:

2、修改hadoop中 etc/hadoop/hdfs-site.xml 文件,将数据的副本数由默认的3改成1。修改后如下图所示:

第四步:格式化文件系统,并启动hdfs系统
格式化命令:hdfs namenode –format
启动命令:start-dfs.sh(停止命令:start-dfs.sh
查看进程:jps,如果如下图所示,则hdfs成功

第五步:关闭Linux防火墙
命令: ufw disable
第六步:免密登录
1、切换到普通用户,执行命令:ssh-keygen –t rsa,然后一直按回车键
2、用户目录会产生.ssh文件夹,其下有id_rsa、id_rsa.pub三个文件,执行以下命令 cp id_rsa.pub authorized_keys
3、重启Linux即可实现免密登录Hadoop
第七步:添加映射
在C:\Windows\System32\drivers\etc目录下的hosts文件中添加如下内容:
格式:Linux的IP地址 ubuntu
第八步:通过网页查看Hadoop文件
Linux的IP地址:50070
已经修改映射,所以可以直接下载并查看Hadoop文件

评论 4
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值