CentOS7 Hadoop 伪分布式环境搭建以及Hadoop格式化,讲的真详细

解压java压缩包到指定路径

rpm -ivh /software/oracle-j2sdk1.8-1.8.0+update181-1.x86_64.rpm -C /usr/java

在根目录下创建hadoop文件夹,解压hadoop压缩包到指定路径

tar -zxvf /software/hadoop-2.6.0-cdh5.5.5.tar.gz -C /hadoop

配置java、Hadoop路径:

配置 /etc/profile文件:vi /etc/profile

按i进入编辑模式,移动光标至最下方,添加如下代码


export JAVA_HOME=/usr/java/jdk1.8.0_181-cloudera

export PATH=$JAVA_HOME/bin:$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin  #添加java和hadoop环境变量

export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar

export HADOOP_HOME=/hadoop/hadoop-2.6.0-cdh5.5.5 

按esc退出编辑模式,输入   :wq  保存编辑(此处要输入英文冒号)

输入source /etc/profile   重启配置,使之生效

在线安装rsync

yum install rsync

安装ssh

yum install ssh

设置ssh免密

ssh localhost   #检查是否设置免密,如果提示需要你输入密码,则说明没有配置免密

ssh-keygen -t rsa -P ‘’ -f ~/.ssh/id_rsa

cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys

chmod 0600 ~/.ssh/authorized_keys

到这里就配置成功了,可以再输入ssh localhost检查一遍

配置Hadoop

cd /hadoop/hadoop-2.6.0-cdh5.5.5/etc/hadoop

修改 core-site.xml

添加:


<configuration>

    <property>

        <name>fs.defaultFS</name>

        <value>hdfs://localhost:9000</value>

    </property>

</configuration>

:wq    保存(注意,这里最好不要使用xftp编辑文件,可能会出现修改不成功的问题,建议还是使用xshell进行编辑)

修改hdfs-site.xml

添加:


<configuration>

    <property>

        <name>dfs.replication</name>

        <value>1</value>     #一个节点

    </property>

</configuration>

:wq     保存退出

这里就已经配置完了。

格式化(不要重复格式化 容易出错):

总结

至此,文章终于到了尾声。总结一下,我们谈论了简历制作过程中需要注意的以下三个部分,并分别给出了一些建议:

CodeChina开源项目:【一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频】

  1. 技术能力:先写岗位所需能力,再写加分能力,不要写无关能力;
  2. 项目经历:只写明星项目,描述遵循 STAR 法则;
  3. 简历印象:简历遵循三大原则:清晰,简短,必要,要有的放矢,不要海投;

以及最后为大家准备的福利时间:简历模板+Java面试题+热门技术系列教程视频

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

要,要有的放矢,不要海投;

以及最后为大家准备的福利时间:简历模板+Java面试题+热门技术系列教程视频

[外链图片转存中…(img-Tb7dP0iH-1630459135173)]

[外链图片转存中…(img-XpERrvNi-1630459135175)]

[外链图片转存中…(img-gDKf0eZB-1630459135176)]

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值