CentOS7 Hadoop 伪分布式环境搭建以及Hadoop格式化

总结

我们总是喜欢瞻仰大厂的大神们，但实际上大神也不过凡人，与菜鸟程序员相比，也就多花了几分心思，如果你再不努力，差距也只会越来越大。

面试题多多少少对于你接下来所要做的事肯定有点帮助，但我更希望你能透过面试题去总结自己的不足，以提高自己核心技术竞争力。每一次面试经历都是对你技术的扫盲，面试后的复盘总结效果是极好的！

本文已被CODING开源项目：【一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码】收录

需要这份系统化的资料的朋友，可以点击这里获取

在根目录下创建hadoop文件夹，解压hadoop压缩包到指定路径

tar -zxvf /software/hadoop-2.6.0-cdh5.5.5.tar.gz -C /hadoop

配置java、Hadoop路径：

配置 /etc/profile文件：vi /etc/profile

按i进入编辑模式，移动光标至最下方，添加如下代码

export JAVA_HOME=/usr/java/jdk1.8.0_181-cloudera

export PATH=$JAV{A}_{H}OME/bin:$PATH:$HADOO{P}_{H}OME/bin:$HADOOP_HOME/sbin #添加java和hadoop环境变量

export CLASSPATH=.:$JAV{A}_{H}OME/lib/dt.jar:$JAVA_HOME/lib/tools.jar

export HADOOP_HOME=/hadoop/hadoop-2.6.0-cdh5.5.5

按esc退出编辑模式，输入   :wq  保存编辑（此处要输入英文冒号）

输入source /etc/profile   重启配置，使之生效

在线安装rsync

yum install rsync

安装ssh

yum install ssh

设置ssh免密

ssh localhost   #检查是否设置免密，如果提示需要你输入密码，则说明没有配置免密

ssh-keygen -t rsa -P ‘’ -f ~/.ssh/id_rsa

cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys

chmod 0600 ~/.ssh/authorized_keys

到这里就配置成功了，可以再输入ssh localhost检查一遍

配置Hadoop

cd /hadoop/hadoop-2.6.0-cdh5.5.5/etc/hadoop

修改 core-site.xml

添加：

fs.defaultFS

hdfs://localhost:9000

:wq    保存（注意，这里最好不要使用xftp编辑文件，可能会出现修改不成功的问题，建议还是使用xshell进行编辑）

修改hdfs-site.xml

添加：

dfs.replication

1 #一个节点

:wq     保存退出

这里就已经配置完了。

格式化（不要重复格式化 容易出错）：

总结

面试建议是，一定要自信，敢于表达，面试的时候我们对知识的掌握有时候很难面面俱到，把自己的思路说出来，而不是直接告诉面试官自己不懂，这也是可以加分的。

以上就是蚂蚁技术四面和HR面试题目，以下最新总结的最全，范围包含最全MySQL、Spring、Redis、JVM等最全面试题和答案，仅用于参考

本文已被CODING开源项目：【一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码】收录

需要这份系统化的资料的朋友，可以点击这里获取

18634783)]

本文已被CODING开源项目：【一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码】收录

需要这份系统化的资料的朋友，可以点击这里获取