hadoop完全分布式部署及相应脚本

最新推荐文章于 2022-08-21 17:11:00 发布
最新推荐文章于 2022-08-21 17:11:00 发布
阅读量265 收藏 2
点赞数 1
分类专栏： 大数据 文章标签： hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_47932841/article/details/107860700
版权

一：模板机的配置

1、必要的硬件和软件配置

内存4G，硬盘50G，网段均为192.168.6.X

保证Linux虚拟机可以联网

1.虚拟网络编辑器种VMnet8中子网IP为192.168.6.X
2.window系统中网络连接中VMnet8的IPv4为192.168.6.X
3.vim /etc/sysconfig/network-scripts/ifcfg-ens33
中添加静态IP为192.168.6.X

安装必要环境

[root@hadoop100 ~]# yum install -y epel-release
[root@hadoop100 ~]# yum install -y psmisc nc net-tools rsync vim lrzsz ntp libzstd openssl-static tree iotop git

卸载虚拟机自带的JDK

[root@hadoop100 ~]# rpm -qa | grep -i java | xargs -n1 rpm -e --nodeps

二：克隆虚拟机

1、克隆hadoop

克隆三台虚拟机hadoop102，hadoop103，hadoop104

2、修改克隆机的IP

以hadoop102为例

[root@hadoop100 ~]# vim /etc/sysconfig/network-scripts/ifcfg-ens33
改为：
==========================
DEVICE=ens33
TYPE=Ethernet
ONBOOT=yes
BOOTPROTO=static
NAME="ens33"
IPADDR=192.168.1.102
PREFIX=24
GATEWAY=192.168.1.2
DNS1=192.168.1.2

3、修改克隆机的主机名

以hadoop102为例

[root@hadoop100 ~]# vim /etc/hostname
=======================
hadoop102

4、修改克隆机的映射

以hadoop102为例

[root@hadoop100 ~]# vim /etc/hosts
=======================
192.168.1.100 hadoop100
192.168.1.101 hadoop101
192.168.1.102 hadoop102
192.168.1.103 hadoop103
192.168.1.104 hadoop104
192.168.1.105 hadoop105
192.168.1.106 hadoop106
192.168.1.107 hadoop107
192.168.1.108 hadoop108

5、修改window系统的映射

（a）进入C:\Windows\System32\drivers\etc路径
（b）拷贝hosts文件到桌面
（c）打开桌面hosts文件并添加如下内容
========================
192.168.1.100 hadoop100
192.168.1.101 hadoop101
192.168.1.102 hadoop102
192.168.1.103 hadoop103
192.168.1.104 hadoop104
192.168.1.105 hadoop105
192.168.1.106 hadoop106
192.168.1.107 hadoop107
192.168.1.108 hadoop108

6、安装JDK

以hadoop102为例

通过工具将JDKjar包导入到/opt/software

tar xxx -C xxx

-C<目录>：切换工作目录，先进入指定目录再执行压缩/解压缩操作，可用于仅压缩特定目录里的内容或解压缩到特定目录；

[lu@hadoop102 software]$ tar -zxvf jdk-8u212-linux-x64.tar.gz -C /opt/module/

配置JDK环境变量:

新建/etc/profile.d/my_envsh

[lu@hadoop102 ~]$ sudo vim /etc/profile.d/my_env.sh
======================
#JAVA_HOME
export JAVA_HOME=/opt/module/jdk1.8.0_212
export PATH=$PATH:$JAVA_HOME/bin

source一下/etc/profile文件，让新的环境变量PATH生效

---->执行文件并从文件中加载变量及函数到执行环境

[lu@hadoop102 ~]$ source /etc/profile

测试JDK是否安装成功

[lu@hadoop102 ~]$ java -version
=====================
java version "1.8.0_212"

7、安装hadoop

以hadoop102为例

通过工具将hadoopjar包导入到/opt/software

[lu@hadoop102 software]$ tar -zxvf hadoop-3.1.3.tar.gz -C /opt/module/

配置环境变量

sudo vim /etc/profile.d/my_env.sh
==========================
#HADOOP_HOME
export HADOOP_HOME=/opt/module/hadoop-3.1.3
export PATH=$PATH:$HADOOP_HOME/bin
export PATH=$PATH:$HADOOP_HOME/sbin

使文件生效

[lu@hadoop102 hadoop-3.1.3]$ source /etc/profile

测试是否安装成功

[lu@hadoop102 hadoop-3.1.3]$ hadoop version
=======================
Hadoop 3.1.3

三：分发脚本xsync

rsync远程同步工具

rsync主要用于备份和镜像。具有速度快、避免复制相同内容和支持符号链接的优点
rsync和scp区别：用rsync做文件的复制要比scp的速度快，rsync只对差异文件做更新。scp是把所有文件都复制过去。

[lu@hadoop102 opt]$ rsync -av /opt/software/* atguigu@hadoop103:/opt/software

1、xsync脚本实现

[lu@hadoop102 opt]$ cd /home/atguigu
[lu@hadoop102 ~]$ mkdir bin
[lu@hadoop102 ~]$ cd bin
[lu@hadoop102 bin]$ vim xsync
==================================
#!/bin/bash
#1. 判断参数个数
if [ $# -lt 1 ]
then
  echo Not Enough Arguement!
  exit;
fi
#2. 遍历集群所有机器
for host in hadoop102 hadoop103 hadoop104
do
  echo ====================  $host  ====================
  #3. 遍历所有目录，挨个发送
  for file in $@
  do
    #4. 判断文件是否存在
    if [ -e $file ]
    then
      #5. 获取父目录
      pdir=$(cd -P $(dirname $file); pwd)
      #6. 获取当前文件的名称
      fname=$(basename $file)
      ssh $host "mkdir -p $pdir"
      rsync -av $pdir/$fname $host:$pdir
    else
      echo $file does not exists!
    fi
  done
done

修改脚本的执行权限并复制到/bin中全局使用

[lu@hadoop102 bin]$ chmod +x xsync
[lu@hadoop102 bin]$ sudo cp xsync /bin/

测试

[lu@hadoop102 ~]$ xsync /home/atguigu/bin
[lu@hadoop102 bin]$ sudo xsync /bin/xsync

2、ssh免密登录配置

首先先相互认识一下

[lu@hadoop102 ~]$ ssh hadoop102 ls
[lu@hadoop102 ~]$ ssh hadoop103 ls
[lu@hadoop102 ~]$ ssh hadoop104 ls

就会出现/home/atguigu/.ssh

然后生成公钥和私钥

[lu@hadoop102 .ssh]$ ssh-keygen -t rsa

将公钥拷贝到要免密登录的目标机器上

[lu@hadoop102 .ssh]$ ssh-copy-id hadoop102
[lu@hadoop102 .ssh]$ ssh-copy-id hadoop103
[lu@hadoop102 .ssh]$ ssh-copy-id hadoop104

使用root重复以上动作

使得root也会免密登录

四：集群配置

1、部署规划

hadoop102hadoop103hadoop104
HDFSNameNode DataNodeDataNodeSecondaryNameNode DataNode
YARNNodeManagerResourceManager NodeManagerNodeManager

2、修改自定义配置文件

Hadoop配置文件分两类：默认配置文件和自定义配置文件，只有用户想修改某一默认配置值时，才需要修改自定义配置文件，更改相应属性值

DaemonAppHadoop2Hadoop3
NameNode PortHadoop HDFS NameNode8020 / 90009820
Hadoop HDFS NameNode HTTP UI500709870
Secondary NameNode PortSecondary NameNode500919869
Secondary NameNode HTTP UI500909868
DataNode PortHadoop HDFS DataNode IPC500209867
Hadoop HDFS DataNode500109866
Hadoop HDFS DataNode HTTP UI500759864

3、配置集群

（1）配置core-site.xml

[lu@hadoop102 ~]$ cd $HADOOP_HOME/etc/hadoop
[lu@hadoop102 hadoop]$ vim core-site.xml
========================================
<?xml version="1.0" encoding="UTF-8"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>

<configuration>
	<!-- 指定NameNode的地址 -->
    <property>
        <name>fs.defaultFS</name>
        <value>hdfs://hadoop102:9820</value>
</property>
<!-- 指定hadoop数据的存储目录 -->
    <property>
        <name>hadoop.tmp.dir</name>
        <value>/opt/module/hadoop-3.1.3/data</value>
</property>

<!-- 配置HDFS网页登录使用的静态用户为atguigu -->
    <property>
        <name>hadoop.http.staticuser.user</name>
        <value>atguigu</value>
</property>

<!-- 配置该atguigu(superUser)允许通过代理访问的主机节点 -->
    <property>
        <name>hadoop.proxyuser.atguigu.hosts</name>
        <value>*</value>
</property>
<!-- 配置该atguigu(superUser)允许通过代理用户所属组 -->
    <property>
        <name>hadoop.proxyuser.atguigu.groups</name>
        <value>*</value>
</property>
<!-- 配置该atguigu(superUser)允许通过代理的用户-->
    <property>
        <name>hadoop.proxyuser.atguigu.groups</name>
        <value>*</value>
</property>
</configuration>

（2）HDFS配置文件

配置hdfs-site.xml

[lu@hadoop102 hadoop]$ vim hdfs-site.xml
================================================
<?xml version="1.0" encoding="UTF-8"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>

<configuration>
	<!-- nn web端访问地址-->
	<property>
        <name>dfs.namenode.http-address</name>
        <value>hadoop102:9870</value>
    </property>
	<!-- 2nn web端访问地址-->
    <property>
        <name>dfs.namenode.secondary.http-address</name>
        <value>hadoop104:9868</value>
    </property>
</configuration>

（3）YARN配置文件

配置yarn-site.xml

[lu@hadoop102 hadoop]$ vim yarn-site.xml
===========================================
<?xml version="1.0" encoding="UTF-8"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>

<configuration>
	<!-- 指定MR走shuffle -->
    <property>
        <name>yarn.nodemanager.aux-services</name>
        <value>mapreduce_shuffle</value>
</property>
<!-- 指定ResourceManager的地址-->
    <property>
        <name>yarn.resourcemanager.hostname</name>
        <value>hadoop103</value>
</property>
<!-- 环境变量的继承 -->
    <property>
        <name>yarn.nodemanager.env-whitelist</name>
        <value>JAVA_HOME,HADOOP_COMMON_HOME,HADOOP_HDFS_HOME,HADOOP_CONF_DIR,CLASSPATH_PREPEND_DISTCACHE,HADOOP_YARN_HOME,HADOOP_MAPRED_HOME</value>
</property>
<!-- yarn容器允许分配的最大最小内存 -->
    <property>
        <name>yarn.scheduler.minimum-allocation-mb</name>
        <value>512</value>
    </property>
    <property>
        <name>yarn.scheduler.maximum-allocation-mb</name>
        <value>4096</value>
</property>
<!-- yarn容器允许管理的物理内存大小 -->
    <property>
        <name>yarn.nodemanager.resource.memory-mb</name>
        <value>4096</value>
</property>
<!-- 关闭yarn对物理内存和虚拟内存的限制检查 -->
    <property>
        <name>yarn.nodemanager.pmem-check-enabled</name>
        <value>false</value>
    </property>
    <property>
        <name>yarn.nodemanager.vmem-check-enabled</name>
        <value>false</value>
    </property>
</configuration>

配置日志的聚集

配置yarn-site.xml

[lu@hadoop102 hadoop]$ vim yarn-site.xml
===================================
<!-- 开启日志聚集功能 -->
<property>
    <name>yarn.log-aggregation-enable</name>
    <value>true</value>
</property>
<!-- 设置日志聚集服务器地址 -->
<property>  
    <name>yarn.log.server.url</name>  
    <value>http://hadoop102:19888/jobhistory/logs</value>
</property>
<!-- 设置日志保留时间为7天 -->
<property>
    <name>yarn.log-aggregation.retain-seconds</name>
    <value>604800</value>
</property>

（4）MapReduce配置文件

配置mapred-site.xml

[lu@hadoop102 hadoop]$ vim mapred-site.xml
======================================================
<?xml version="1.0" encoding="UTF-8"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>

<configuration>
	<!-- 指定MapReduce程序运行在Yarn上 -->
    <property>
        <name>mapreduce.framework.name</name>
        <value>yarn</value>
    </property>
</configuration>

配置历史服务器

[lu@hadoop102 hadoop]$ vim mapred-site.xml
==============================================
<!-- 历史服务器端地址 -->
<property>
    <name>mapreduce.jobhistory.address</name>
    <value>hadoop102:10020</value>
</property>

<!-- 历史服务器web端地址 -->
<property>
    <name>mapreduce.jobhistory.webapp.address</name>
    <value>hadoop102:19888</value>
</property>

配置workers

[lu@hadoop102 hadoop]$ vim /opt/module/hadoop-3.1.3/etc/hadoop/workers
===========================================
hadoop102
hadoop103
hadoop104

4）在集群上分发配置好的Hadoop配置文件

[lu@hadoop102 hadoop]$ xsync /opt/module/hadoop-3.1.3/etc/hadoop/

[lu@hadoop103 ~]$ cat /opt/module/hadoop-3.1.3/etc/hadoop/core-site.xml
[lu@hadoop104 ~]$ cat /opt/module/hadoop-3.1.3/etc/hadoop/core-site.xml

同步所有节点配置文件

[lu@hadoop102 hadoop]$ xsync /opt/module/hadoop-3.1.3/etc

关闭NodeManager 、ResourceManager和HistoryServer

[lu@hadoop103 ~]$ stop-yarn.sh
[lu@hadoop102 ~]$ mapred --daemon stop historyserver

启动NodeManager、ResourceManage和HistoryServer

[lu@hadoop103 ~]$ start-yarn.sh
[lu@hadoop102 ~]$ mapred --daemon start historyserver

!如果集群是第一次启动

如果集群是第一次启动

[lu@hadoop102 ~]$ hdfs namenode -format

启动HDFS

[lu@hadoop102 hadoop-3.1.3]$ sbin/start-dfs.sh

**在配置了ResourceManager的节点（hadoop103）**启动YARN

[lu@hadoop103 hadoop-3.1.3]$ sbin/start-yarn.sh

五：编写hadoop集群常用脚本

1、查看三台服务器java进程脚本：jpsall

[lu@hadoop102 ~]$ cd /home/atguigu/bin
[lu@hadoop102 ~]$ vim jpsall
===================================
#!/bin/bash
for host in hadoop102 hadoop103 hadoop104
do
        echo =============== $host ===============
        ssh $host jps $@ | grep -v Jps
done

保存后退出，然后赋予脚本执行权限

[ul@hadoop102 bin]$ chmod +x jpsall

2、hadoop集群启停脚本

（包含hdfs，yarn，historyserver）：myhadoop.sh**

[lu@hadoop102 ~]$ cd /home/atguigu/bin
[ul@hadoop102 ~]$ vim myhadoop.sh
========================================
#!/bin/bash
if [ $# -lt 1 ]
then
    echo "No Args Input..."
    exit ;
fi
case $1 in
"start")
        echo " =================== 启动 hadoop集群 ==================="

        echo " --------------- 启动 hdfs ---------------"
        ssh hadoop102 "/opt/module/hadoop-3.1.3/sbin/start-dfs.sh"
        echo " --------------- 启动 yarn ---------------"
        ssh hadoop103 "/opt/module/hadoop-3.1.3/sbin/start-yarn.sh"
        echo " --------------- 启动 historyserver ---------------"
        ssh hadoop102 "/opt/module/hadoop-3.1.3/bin/mapred --daemon start historyserver"
;;
"stop")
        echo " =================== 关闭 hadoop集群 ==================="

        echo " --------------- 关闭 historyserver ---------------"
        ssh hadoop102 "/opt/module/hadoop-3.1.3/bin/mapred --daemon stop historyserver"
        echo " --------------- 关闭 yarn ---------------"
        ssh hadoop103 "/opt/module/hadoop-3.1.3/sbin/stop-yarn.sh"
        echo " --------------- 关闭 hdfs ---------------"
        ssh hadoop102 "/opt/module/hadoop-3.1.3/sbin/stop-dfs.sh"
;;
*)
    echo "Input Args Error..."
;;
esac

保存后退出，然后赋予脚本执行权限

[lu@hadoop102 bin]$ chmod +x myhadoop.sh

[lu@hadoop102 ~]$ xsync /home/atguigu/bin/
少年郎の洛亚
关注
  • 1
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
hadoop完全分布式一键安装、启动、停止脚本
一只闪闪发光的少爷爷
05-24 2000
hadoop完全分布式一键安装脚本 #!/bin/bash #配置HADOOP的安装目录 修改的地方1 脚本可以自己创建 ##在windows编写的代码可能运行有问题执行以下 1>vim redisshell.sh 2>:set ff=unix echo -e "请输入hadoop的安装目录,不存在脚本自动创建,最后一个/不要写 /bigdata/install" read ...
Hadoop部署脚本
03-14
Apache Hadoop软件库是一个框架，它允许使用简单的编程模型跨计算机群集分布式处理大型数据集。它旨在从单个服务器扩展到数千台机器，每台机器提供本地计算和存储。该库本身不是依靠硬件来提供高可用性，而是设计用于在应用层检测和处理故障，从而在一组计算机之上提供高可用性服务，每个计算机都可能出现故障。 该项目包括这些模块： Hadoop Common：支持其他Hadoop模块的常用工具。 Hadoop分布式文件系统（HDFS™）：一种分布式文件系统，可提供对应用程序数据的高吞吐量访问。 Hadoop YARN：作业调度和集群资源管理的框架。 Hadoop MapReduce：一种用于并行处理大型数据集的基于YARN的系统。
hadoop全分布式-脚本一键安装
09-14
将文件中的hadoop配置文件、自动安装脚本，自己下载的jdk、hadoop文件放于同一目录下，（注jdk、hadoop文件名中要包含关键字jdk、hadoop），然后运行脚本。详细请看说明。
【Hadoop完全分布式】编写 Hadoop 集群常用脚本
风口IT猪的成长录
09-05 796
编写 Hadoop 集群常用脚本1. 集群启动/停止方式总结1）各个模块分开启动/停止2）各个服务组件逐一启动/停止2. 编写 Hadoop 集群常用脚本1）Hadoop 集群启停脚本2）查看三台服务器 Java 进程脚本：jpsall3）分发/home/atguigu/bin 目录，保证自定义脚本在三台机器上都可以使用3. 常用端口号说明 1. 集群启动/停止方式总结 1）各个模块分开启动/停止 （配置 ssh 是前提）常用 （1）整体启动/停止 HDFS start-dfs.sh/stop-dfs.sh
Hadoop配置脚本
坐公交也用券
02-24 332
#!/bin/bash read -p "请输入master节点IP地址：" masterip read -p "请输入slave1节点IP地址：" slave1ip read -p "请输入centosYUM源地址：" yumc read -p "请输入ambariYUM源地址：" yuma read -p "这是master节点?[y/n]" hostname read -p "本机是否已存.
Hadoop完全分布式 大数据 入门 学习
03-09
本文将深入探讨Hadoop完全分布式环境的搭建，这对于初学者掌握大数据处理技术至关重要。 首先，Hadoop分布式环境的构建通常涉及多台机器，这在描述中提到了node01至node04。为了实现这些节点间的无密码登录，我们...
Hadoop分布式部署配置文件
最新发布
10-03
Hadoop分布式部署涉及到多个组件的配置，包括NameNode、DataNode、ResourceManager、NodeManager等，以及相关的配置文件。下面将详细介绍Hadoop分布式部署中的关键知识点。 1. **Hadoop架构基础** Hadoop的核心由...
【Hadoop篇02】Hadoop完全分布式环境搭建1
08-04
在本文中，我们将深入探讨如何搭建一个Hadoop完全分布式环境，这是Hadoop篇的第二部分。Hadoop是一个开源的分布式计算框架，它允许在大规模集群上处理和存储大量数据。本文将介绍如何配置和部署Hadoop的各个组件，...
hadoop环境部署自动化shell脚本（伪分布式、完全分布式集群搭建）.docx
04-18
4. **Hadoop完全分布式集群安装**：在多台机器上搭建真正的分布式集群，适用于大规模数据处理。 5. **Hadoop初始化**：格式化NameNode，为Hadoop集群做好准备。 6. **SSH免密登录配置**：通过SSH密钥对，实现集群内...
hadoop-2.8.1完全分布式搭建脚本和配置文件
08-24
这个压缩包文件"hadop-2.8.1完全分布式搭建脚本和配置文件"提供了在集群环境中搭建Hadoop 2.8.1版本的详细步骤，特别强调了高可用性和自动化配置。 1. **Hadoop 2.8.1**：这是Hadoop的一个稳定版本，它包含了对HDFS...
HadoopDeployScripts:Hadoop一键部署脚本
05-14
CentOS 7 下的 Hadoop 一键脚本 使用方法 脚本完成的是Hadoop分布式集群配置 包含wordcount例子 (在wordcount文件夹下面) 单机版配置方法请看下面的注意事项 前提条件： 登录用户具有sudo权限（root也可） 具有网络连接 安装了git 如果服务器上没有git，可以把文件复制到服务器上。 使用 sudo yum install git 安装git 运行方式 运行脚本安装 git clone https://github.com/enihsyou/HadoopDeployScripts.git cd HadoopDeployScripts chmod +x hadoop.sh ./hadoop.sh 运行wordcount测试 cd wordcount chmod +x wordcount.sh ./wordcount.sh wordcount 统计性
hadoop环境部署自动化shell脚本（伪分布式、完全分布式集群搭建）
weixin_42011520的博客
07-25 2928
本文旨在提供一个hadoop环境部署脚本帮助读者更快速地搭建用于学习和开发的hadoop环境，节省大数据技术入门时间和成本。
CentOS7一键搭建Hadoop完全分布式集群环境脚本
m0_51069940的博客
04-15 1336
大纲一、前情提要1、已集成的环境2、必要准备3、必须提前获取的参数！！！！特别注意！二、 一键搭建hadoop集群脚本1、将脚本导入CentOS7里面2、给脚本赋予执行权限3、执行脚本4、脚本源码三、一键启动和关闭hadoop脚本1、给脚本赋予执行权限2、源码——启动hadoop所有服务脚本3、源码——停止hadoop所有服务四、查看web端五、Xshell控制集群终端1、安装Xshell2、新建hadoop1、hadoop2、hadoop3会话3、登录结束！ 一、前情提要 1、已集成的环境 java1
写几个Hadoop部署用到的小脚本
tuzhen007的专栏
03-11 472
最近抛弃非ssh连接的hadoop集群部署方式了，还是回到了用ssh key 验证的方式上了。这里面就有些麻烦，每台机器都要上传公钥。恰恰我又是个很懒的人，所以写几个小脚本完成，只要在一台机器上面就可以做公钥的分发了。 首先是生成ssh key脚本 1 2 3 #!/bin/sh ssh-key
Hadoop-2.7.3完全分布式环境搭建及环境部署脚本编写
呼呼的小窝
03-04 1444
完全分布式搭建注：hadoop启动之后生成的文件均保存在了临时目录/tmp下，因此每次重新启动之前就需要格式化一回；可在配置文件里配置，这里并没有配置，在后续的文章里会进行介绍 在虚拟机中选择创建5台Ubuntu来进行完全分布式环境的搭建，使用工具SecureCRT 7.3，具体如何配置每台机器的IP地址，并实现联网，参考我的前序文章：VMware虚拟网络配置及原理；环境变量的设置也请参考我的前
Hadoop集群部署(附集群启停脚本)
zhaozhufeng的博客
12-08 2329
集群部署规划(Hadoop3.1.3)
原生Hadoop、spark集群一键部署脚本
Alan3344的博客
09-29 534
#!/bin/bash ############################################################# #############脚本使用说明#################################### #1、使用脚本前需要弄好服务器的基础环境####################### #2、在hadoop的每个节点需要手动创建如下目录：/data/hdfs/tmp### #3、修改下面的配置参数#########################.
【大数据】搭建Hadoop集群（附一键部署脚本）
纯码农的博客
08-21 1576
汝之观览，吾之幸也！本文主要讲解Hadoop运行环境的搭建（三台虚拟机），一键脚本部署，全自动化，不再需要按照文档一个一个进行配置，脚本执行后就可登录hadoop集群。
Hadoop集群搭建（完全分布式）
qq_45537574的博客
03-21 586
文章目录一、安装准备工作二、安装1.关闭防火墙2、修改主机名和hosts3、安装包解压4.配置环境变量5、修改Hadoop配置6、同步slave1节点和slave2节点三、启动准备四、启动访问 一、安装准备工作 1、虚拟机准备（centos7） master : 192.168.220.134 slave1 : 192.168.220.135 slave2 : 192.168.220.136 2、安装包准备（百度网盘下载） Jdk1.8安装包 Hadoop安装包(版本2.9.2--稳定) 链接：ht
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值