linux的hadoop安装,Linux下的Hadoop安装

Hadoop的安装:

1.sudo cp hadoop-2.6.0-cdh5.6.0.tar.gz /usr

将Hadoop安装包移到usr下

fbbc0121cd17

将Hadoop安装包移到usr下

2.sudo tar zxvf hadoop-2.6.0-cdh5.6.0.tar.gz

解压缩

fbbc0121cd17

解压缩

3.sudo chown -R hadoop:hadoop hadoop-2.6.0-cdh5.6.0

修改所有者为hadoop

fbbc0121cd17

修改所有者

4.sudo mv hadoop-2.6.0-cdh5.6.0 hadoop

修改名字为hadoop

fbbc0121cd17

修改名字

5.vi ~/.bashrc

修改配置文件

将以下内容写在最后一行

export HADOOP_INSTALL=/usr/hadoop

export PATH=

math?formula=PATH%3AHADOOP_INSTALL/bin

export PATH=

math?formula=PATH%3AHADOOP_INSTALL/sbin

export HADOOP_MAPRED_HOME=

math?formula=HADOOP_INSTALL%20export%20HADOOP_COMMON_HOME%3DHADOOP_INSTALL

export HADOOP_HDFS_HOME=

math?formula=HADOOP_INSTALL%20export%20YARN_HOME%3DHADOOP_INSTALL

export HADOOP_COMMON_LIB_NATIVE_DIR=

math?formula=HADOOP_INSTALL%2Flib%2Fnative%20export%20HADOOP_OPTS%3D%22-Djava.library.path%3DHADOOP_INSTALL/lib"

fbbc0121cd17

写入

写完后:wq!保存退出编辑模式

6.source ~/.bashrc

重新载入配置文件

fbbc0121cd17

重新载入

7.cd /hadoop/etc/hadoop/

进入etc下的hadoop目录下

fbbc0121cd17

进入目录

8.vi hadoop-env.sh

配置hadoop-env.sh文件内容

fbbc0121cd17

注释掉

将上面这句话前面加#注释掉

fbbc0121cd17

加入

在后面加上如下语句

export JAVA_HOME=/usr/jdk18

export HADOOP_PREFIX=/usr/hadoop

export HADOOP_OPTS="-Djava.library.path=

math?formula=HADOOP_PREFIX%2Flib%3AHADOOP_PREFIX/lib/nativ"

后保存退出

9.vi core-site.xml

打开这个文件

fbbc0121cd17

打开文件

加入如下语句:

hadoop.tmp.dir

/usr/hadoop/tmp

Abase?for?other temporary directories.

fs.defaultFS

hdfs://localhost:9000

fbbc0121cd17

加入后

10.cp mapred-site.xml.template mapred-site.xm

将mapred-site.xml.template文件复制一份名为mapred-site.xml的文件

修改mapred-site.xml文件

fbbc0121cd17

复制

fbbc0121cd17

打开文件

加入以下语句:

mapreduce.framework.name

yarn

fbbc0121cd17

添加后

11.vi yarn-site.xml

打开文件

fbbc0121cd17

打开

加入以下语句

yarn.nodemanager.aux-services

mapreduce_shuffle

fbbc0121cd17

修改

12.vi hdfs-site.xml

进入文件

fbbc0121cd17

进入

添加以下内容:

dfs.replication

3

dfs.namenode.name.dir

file:/usr/hadoop/dfs/name

dfs.datanode.data.dir

file:/usr/hadoop/dfs/data

fbbc0121cd17

修改后

13. ./bin/hdfs namenode -format

后退两个目录格式化

fbbc0121cd17

格式化

fbbc0121cd17

格式化成功

14. ./sbin/start-all.sh

启动Hadoop用户命令

fbbc0121cd17

启动

fbbc0121cd17

过程

15 jps

查看进程

fbbc0121cd17

六个进程

如果显示6个进程则说明配置成功

把localhost换成自己的IP地址查看虚拟机状态

(此文章仅作为个人学习笔记使用,如有错误欢迎指正~)

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值