Hadoop的安装方式
单机:所有的服务运行在一个进程里面,开发阶段才会使用
分布式:将多个服务(JVM),分别运行在多台机器上。
伪分布式:将多个服务(JVM)运行在一台机器上
Hadoop伪分布式安装
文档:http://hadoop.apache.org/docs/r2.7.6/hadoop-project-dist/hadoop-common/SingleCluster.html
安装过程:
(1)上传解压
tar -zxvf hadoop-2.7.3.tar.gz -C /opt/modules/
rm -rf sbin/*.cmd
(3)修改配置文件(安装模块来配置)
-》*-env.sh 环境变量文件
hadoop-env.sh
yarn-env.sh
修改JAVA_HOME=/opt/modules/jdk1.8.0_91
-》common
core-site.xml
<!--指定文件系统HDFS的主节点NameNode运行的 主机名 和 端口 -->
<property>
<name>fs.defaultFS</name>
<value>hdfs://bigdata-hpsk01.huadian.com:8020</value>