hadoop（九）hadoop+zookeeper集群搭建

最新推荐文章于 2022-04-22 18:53:12 发布
最新推荐文章于 2022-04-22 18:53:12 发布
阅读量300 收藏
点赞数
分类专栏： hadoop

zookeeper搭建

zookeeper命令

第6步不同

修改zoo.cfg,修改

vi zoo.cfg

tickTime=2000
dataDir=/usr/local/zookeeper-3.4.6/data
dataLogDir=/usr/local/zookeeper-3.4.6/logs        
clientPort=2181				                  
initLimit=5 					      
syncLimit=2 				    		     
server.1=hadoop:2888:3888 		               	     
server.2=hadoop2:2888:3888

zookeeper的默认配置文件为zookeeper/conf/zoo_sample.cfg，需要将其修改为zoo.cfg。其中各配置项的含义，解释如下：

1.tickTime：CS通信心跳时间
Zookeeper 服务器之间或客户端与服务器之间维持心跳的时间间隔，也就是每个 tickTime 时间就会发送一个心跳。tickTime以毫秒为单位。
tickTime=2000  

2.initLimit：LF初始通信时限
集群中的follower服务器(F)与leader服务器(L)之间初始连接时能容忍的最多心跳数（tickTime的数量）。
initLimit=5  

3.syncLimit：LF同步通信时限
集群中的follower服务器与leader服务器之间请求和应答之间能容忍的最多心跳数（tickTime的数量）。
syncLimit=2  
 
4.dataDir：数据文件目录
Zookeeper保存数据的目录，默认情况下，Zookeeper将写数据的日志文件也保存在这个目录里。
dataDir=/home/michael/opt/zookeeper/data  

5.clientPort：客户端连接端口
客户端连接 Zookeeper 服务器的端口，Zookeeper 会监听这个端口，接受客户端的访问请求。
clientPort=2181 

6.服务器名称与地址：集群信息（服务器编号，服务器地址，LF通信端口，选举端口）
这个配置项的书写格式比较特殊，规则如下：
server.N=YYY:A:B 

server.1=itcast05:2888:3888
server.2=itcast06:2888:3888
server.3=itcast07:2888:3888

 

hadoop集群搭建

 

hadoop2.0已经发布了稳定版本了，增加了很多特性，比如HDFS HA、YARN等。最新的hadoop-2.4.1又增加了YARN HA

注意：apache提供的hadoop-2.4.1的安装包是在32位操作系统编译的，因为hadoop依赖一些C++的本地库，
所以如果在64位的操作上安装hadoop-2.4.1就需要重新在64操作系统上重新编译
（建议第一次安装用32位的系统，我将编译好的64位的也上传到群共享里了，如果有兴趣的可以自己编译一下）

前期准备就不详细说了，课堂上都介绍了
1.修改Linux主机名
2.修改IP
3.修改主机名和IP的映射关系
    ######注意######如果你们公司是租用的服务器或是使用的云主机（如华为用主机、阿里云主机等）
    /etc/hosts里面要配置的是内网IP地址和主机名的映射关系    
4.关闭防火墙
5.ssh免登陆
6.安装JDK，配置环境变量等

集群规划：
    主机名        IP                安装的软件                    运行的进程
    weekend01    192.168.1.201    jdk、hadoop                    NameNode、DFSZKFailoverController(zkfc)
    weekend02    192.168.1.202    jdk、hadoop                    NameNode、DFSZKFailoverController(zkfc)
    weekend03    192.168.1.203    jdk、hadoop                    ResourceManager
    weekend04    192.168.1.204    jdk、hadoop                    ResourceManager
    weekend05    192.168.1.205    jdk、hadoop、zookeeper        DataNode、NodeManager、JournalNode、QuorumPeerMain
    weekend06    192.168.1.206    jdk、hadoop、zookeeper        DataNode、NodeManager、JournalNode、QuorumPeerMain
    weekend07    192.168.1.207    jdk、hadoop、zookeeper        DataNode、NodeManager、JournalNode、QuorumPeerMain
    
说明：
    1.在hadoop2.0中通常由两个NameNode组成，一个处于active状态，另一个处于standby状态。Active NameNode对外提供服务，而Standby NameNode则不对外提供服务，仅同步active namenode的状态，以便能够在它失败时快速进行切换。
    hadoop2.0官方提供了两种HDFS HA的解决方案，一种是NFS，另一种是QJM。这里我们使用简单的QJM。在该方案中，主备NameNode之间通过一组JournalNode同步元数据信息，一条数据只要成功写入多数JournalNode即认为写入成功。通常配置奇数个JournalNode
    这里还配置了一个zookeeper集群，用于ZKFC（DFSZKFailoverController）故障转移，当Active NameNode挂掉了，会自动切换Standby NameNode为standby状态
    2.hadoop-2.2.0中依然存在一个问题，就是ResourceManager只有一个，存在单点故障，hadoop-2.4.1解决了这个问题，有两个ResourceManager，一个是Active，一个是Standby，状态由zookeeper进行协调
安装步骤：
    1.安装配置zooekeeper集群（在weekend05上）
        1.1解压
            tar -zxvf zookeeper-3.4.5.tar.gz -C /weekend/
        1.2修改配置
            cd /weekend/zookeeper-3.4.5/conf/
            cp zoo_sample.cfg zoo.cfg
            vim zoo.cfg
            修改：dataDir=/weekend/zookeeper-3.4.5/tmp
            在最后添加：
            server.1=weekend05:2888:3888
            server.2=weekend06:2888:3888
            server.3=weekend07:2888:3888
            保存退出
            然后创建一个tmp文件夹
            mkdir /weekend/zookeeper-3.4.5/tmp
            再创建一个空文件
            touch /weekend/zookeeper-3.4.5/tmp/myid
            最后向该文件写入ID
            echo 1 > /weekend/zookeeper-3.4.5/tmp/myid
        1.3将配置好的zookeeper拷贝到其他节点(首先分别在weekend06、weekend07根目录下创建一个weekend目录：mkdir /weekend)
            scp -r /weekend/zookeeper-3.4.5/ weekend06:/weekend/
            scp -r /weekend/zookeeper-3.4.5/ weekend07:/weekend/
            
            注意：修改weekend06、weekend07对应/weekend/zookeeper-3.4.5/tmp/myid内容
            weekend06：
                echo 2 > /weekend/zookeeper-3.4.5/tmp/myid
            weekend07：
                echo 3 > /weekend/zookeeper-3.4.5/tmp/myid
    
    2.安装配置hadoop集群（在weekend01上操作）
        2.1解压
            tar -zxvf hadoop-2.4.1.tar.gz -C /weekend/
        2.2配置HDFS（hadoop2.0所有的配置文件都在$HADOOP_HOME/etc/hadoop目录下）
            #将hadoop添加到环境变量中
            vim /etc/profile
            export JAVA_HOME=/usr/java/jdk1.7.0_55
            export HADOOP_HOME=/weekend/hadoop-2.4.1
            export PATH=$PATH:$JAVA_HOME/bin:$HADOOP_HOME/bin
            
            #hadoop2.0的配置文件全部在$HADOOP_HOME/etc/hadoop下
            cd /home/hadoop/app/hadoop-2.4.1/etc/hadoop
            
            2.2.1修改hadoo-env.sh
                export JAVA_HOME=/home/hadoop/app/jdk1.7.0_55
                
            2.2.2修改core-site.xml
                <configuration>
                    <!-- 指定hdfs的nameservice为ns1 -->
                    <property>
                        <name>fs.defaultFS</name>
                        <value>hdfs://ns1/</value>
                    </property>
                    <!-- 指定hadoop临时目录 -->
                    <property>
                        <name>hadoop.tmp.dir</name>
                        <value>/home/hadoop/app/hadoop-2.4.1/tmp</value>
                    </property>
                    
                    <!-- 指定zookeeper地址 -->
                    <property>
                        <name>ha.zookeeper.quorum</name>
                        <value>weekend05:2181,weekend06:2181,weekend07:2181</value>
                    </property>
                </configuration>
                
            2.2.3修改hdfs-site.xml
                <configuration>
                    <!--指定hdfs的nameservice为ns1，需要和core-site.xml中的保持一致 -->
                    <property>
                        <name>dfs.nameservices</name>
                        <value>ns1</value>
                    </property>
                    <!-- ns1下面有两个NameNode，分别是nn1，nn2 -->
                    <property>
                        <name>dfs.ha.namenodes.ns1</name>
                        <value>nn1,nn2</value>
                    </property>
                    <!-- nn1的RPC通信地址 -->
                    <property>
                        <name>dfs.namenode.rpc-address.ns1.nn1</name>
                        <value>weekend01:9000</value>
                    </property>
                    <!-- nn1的http通信地址 -->
                    <property>
                        <name>dfs.namenode.http-address.ns1.nn1</name>
                        <value>weekend01:50070</value>
                    </property>
                    <!-- nn2的RPC通信地址 -->
                    <property>
                        <name>dfs.namenode.rpc-address.ns1.nn2</name>
                        <value>weekend02:9000</value>
                    </property>
                    <!-- nn2的http通信地址 -->
                    <property>
                        <name>dfs.namenode.http-address.ns1.nn2</name>
                        <value>weekend02:50070</value>
                    </property>
                    <!-- 指定NameNode的元数据在JournalNode上的存放位置 -->
                    <property>
                        <name>dfs.namenode.shared.edits.dir</name>
                        <value>qjournal://weekend05:8485;weekend06:8485;weekend07:8485/ns1</value>
                    </property>
                    <!-- 指定JournalNode在本地磁盘存放数据的位置 -->
                    <property>
                        <name>dfs.journalnode.edits.dir</name>
                        <value>/home/hadoop/app/hadoop-2.4.1/journaldata</value>
                    </property>
                    <!-- 开启NameNode失败自动切换 -->
                    <property>
                        <name>dfs.ha.automatic-failover.enabled</name>
                        <value>true</value>
                    </property>
                    <!-- 配置失败自动切换实现方式 -->
                    <property>
                        <name>dfs.client.failover.proxy.provider.ns1</name>
                        <value>org.apache.hadoop.hdfs.server.namenode.ha.ConfiguredFailoverProxyProvider</value>
                    </property>
                    <!-- 配置隔离机制方法，多个机制用换行分割，即每个机制暂用一行-->
                    <property>
                        <name>dfs.ha.fencing.methods</name>
                        <value>
                            sshfence
                            shell(/bin/true)
                        </value>
                    </property>
                    <!-- 使用sshfence隔离机制时需要ssh免登陆 -->
                    <property>
                        <name>dfs.ha.fencing.ssh.private-key-files</name>
                        <value>/home/hadoop/.ssh/id_rsa</value>
                    </property>
                    <!-- 配置sshfence隔离机制超时时间 -->
                    <property>
                        <name>dfs.ha.fencing.ssh.connect-timeout</name>
                        <value>30000</value>
                    </property>
                </configuration>
            
            2.2.4修改mapred-site.xml
                <configuration>
                    <!-- 指定mr框架为yarn方式 -->
                    <property>
                        <name>mapreduce.framework.name</name>
                        <value>yarn</value>
                    </property>
                </configuration>    
            
            2.2.5修改yarn-site.xml
                <configuration>
                        <!-- 开启RM高可用 -->
                        <property>
                           <name>yarn.resourcemanager.ha.enabled</name>
                           <value>true</value>
                        </property>
                        <!-- 指定RM的cluster id -->
                        <property>
                           <name>yarn.resourcemanager.cluster-id</name>
                           <value>yrc</value>
                        </property>
                        <!-- 指定RM的名字 -->
                        <property>
                           <name>yarn.resourcemanager.ha.rm-ids</name>
                           <value>rm1,rm2</value>
                        </property>
                        <!-- 分别指定RM的地址 -->
                        <property>
                           <name>yarn.resourcemanager.hostname.rm1</name>
                           <value>weekend03</value>
                        </property>
                        <property>
                           <name>yarn.resourcemanager.hostname.rm2</name>
                           <value>weekend04</value>
                        </property>
                        <!-- 指定zk集群地址 -->
                        <property>
                           <name>yarn.resourcemanager.zk-address</name>
                           <value>weekend05:2181,weekend06:2181,weekend07:2181</value>
                        </property>
                        <property>
                           <name>yarn.nodemanager.aux-services</name>
                           <value>mapreduce_shuffle</value>
                        </property>
                </configuration>
            
                
            2.2.6修改slaves(slaves是指定子节点的位置，因为要在weekend01上启动HDFS、在weekend03启动yarn，所以weekend01上的slaves文件指定的是datanode的位置，weekend03上的slaves文件指定的是nodemanager的位置)
                weekend05
                weekend06
                weekend07

            2.2.7配置免密码登陆
                #首先要配置weekend01到weekend02、weekend03、weekend04、weekend05、weekend06、weekend07的免密码登陆
                #在weekend01上生产一对钥匙
                ssh-keygen -t rsa
                #将公钥拷贝到其他节点，包括自己
                ssh-coyp-id weekend01
                ssh-coyp-id weekend02
                ssh-coyp-id weekend03
                ssh-coyp-id weekend04
                ssh-coyp-id weekend05
                ssh-coyp-id weekend06
                ssh-coyp-id weekend07
                #配置weekend03到weekend04、weekend05、weekend06、weekend07的免密码登陆
                #在weekend03上生产一对钥匙
                ssh-keygen -t rsa
                #将公钥拷贝到其他节点
                ssh-coyp-id weekend04
                ssh-coyp-id weekend05
                ssh-coyp-id weekend06
                ssh-coyp-id weekend07
                #注意：两个namenode之间要配置ssh免密码登陆，别忘了配置weekend02到weekend01的免登陆
                在weekend02上生产一对钥匙
                ssh-keygen -t rsa
                ssh-coyp-id -i weekend01                
        
        2.4将配置好的hadoop拷贝到其他节点
            scp -r /weekend/ weekend02:/
            scp -r /weekend/ weekend03:/
            scp -r /weekend/hadoop-2.4.1/ hadoop@weekend04:/weekend/
            scp -r /weekend/hadoop-2.4.1/ hadoop@weekend05:/weekend/
            scp -r /weekend/hadoop-2.4.1/ hadoop@weekend06:/weekend/
            scp -r /weekend/hadoop-2.4.1/ hadoop@weekend07:/weekend/
        ###注意：严格按照下面的步骤
        2.5启动zookeeper集群（分别在weekend05、weekend06、tcast07上启动zk）
            cd /weekend/zookeeper-3.4.5/bin/
            ./zkServer.sh start
            #查看状态：一个leader，两个follower
            ./zkServer.sh status
            
        2.6启动journalnode（分别在在weekend05、weekend06、tcast07上执行）
            cd /weekend/hadoop-2.4.1
            sbin/hadoop-daemon.sh start journalnode
            #运行jps命令检验，weekend05、weekend06、weekend07上多了JournalNode进程
        
        2.7格式化HDFS
            #在weekend01上执行命令:
            hdfs namenode -format
            #格式化后会在根据core-site.xml中的hadoop.tmp.dir配置生成个文件，这里我配置的是/weekend/hadoop-2.4.1/tmp，然后将/weekend/hadoop-2.4.1/tmp拷贝到weekend02的/weekend/hadoop-2.4.1/下。
            scp -r tmp/ weekend02:/home/hadoop/app/hadoop-2.4.1/
            ##也可以这样，建议hdfs namenode -bootstrapStandby
        
        2.8格式化ZKFC(在weekend01上执行即可)
            hdfs zkfc -formatZK
        
        2.9启动HDFS(在weekend01上执行)
            sbin/start-dfs.sh

        2.10启动YARN(#####注意#####：是在weekend03上执行start-yarn.sh，把namenode和resourcemanager分开是因为性能问题，因为他们都要占用大量资源，所以把他们分开了，他们分开了就要分别在不同的机器上启动)
            sbin/start-yarn.sh

        
    到此，hadoop-2.4.1配置完毕，可以统计浏览器访问:
        http://192.168.1.201:50070
        NameNode 'weekend01:9000' (active)
        http://192.168.1.202:50070
        NameNode 'weekend02:9000' (standby)
    
    验证HDFS HA
        首先向hdfs上传一个文件
        hadoop fs -put /etc/profile /profile
        hadoop fs -ls /
        然后再kill掉active的NameNode
        kill -9 <pid of NN>
        通过浏览器访问：http://192.168.1.202:50070
        NameNode 'weekend02:9000' (active)
        这个时候weekend02上的NameNode变成了active
        在执行命令：
        hadoop fs -ls /
        -rw-r--r--   3 root supergroup       1926 2014-02-06 15:36 /profile
        刚才上传的文件依然存在！！！
        手动启动那个挂掉的NameNode
        sbin/hadoop-daemon.sh start namenode
        通过浏览器访问：http://192.168.1.201:50070
        NameNode 'weekend01:9000' (standby)
    
    验证YARN：
        运行一下hadoop提供的demo中的WordCount程序：
        hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.4.1.jar wordcount /profile /out
    
    OK，大功告成！！！

    
            
        
测试集群工作状态的一些指令 ：
bin/hdfs dfsadmin -report     查看hdfs的各节点状态信息


bin/hdfs haadmin -getServiceState nn1         获取一个namenode节点的HA状态

sbin/hadoop-daemon.sh start namenode  单独启动一个namenode进程


./hadoop-daemon.sh start zkfc   单独启动一个zkfc进程
            
            
                
            
            
    
            
        
    

 

一点寒芒先至
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
一手教你如何搭建Hadoop基于Zookeeper的集群(5台主机)
太白_猿的博客
02-16 1345
centOS7搭建hadoop基于zookeeper集群(5台主机)详解
hadoop+Zookeeper集群安装配置高可用-HadoopHA
sxj的专栏
01-05 4399
1、请看：https://blog.csdn.net/sunxiaoju/article/details/85222290，此处只是配置系统的：硬件配置以及操作系统、节点需要安装的工具、安装JDK环境、创建hadoop用户、建立ssh无密码登录本机前五部分，第6部分的hadoop安装在此博文中需要重新配置，所以不需要查看，在此处博文中需要添加一个master1的namenode节点要结合前五部分一...
Zookeeper、hadoop集群搭建详细过程
我可能在扯淡
07-17 5089
一、概述 学校安排的大数据实训课程刚结束,当时是跟着老师傻瓜式搭建的,遇到问题大多也是他帮忙解决的。然后自己开始学习一个电商项目,里面用到了集群的知识,于是得自己搭建一个集群,便于项目开发。至于他们的作用就不多少了,直接开始吧 二、安装前环境准备 集群规划：（安装集群之前，先规划下集群，考虑配置,ip，内存硬盘，cpu） 主机名 IP 运行的进程 liquanhong1 192.1
Hadoop+Zookeeper分布式集群搭建
Lazyafei's Blog
11-20 750
之前从未接触过Hadoop，本次搭建对于很多细节理解并不深刻，仅作为操作记录； 本次环境为Centos7，使用Virtualbox实例的四台主机作为集群，相关网络配置自行百度，多个节点免密跳转参考我另一篇文章：SSH免密登陆、跳板； Hadoop集群部署至少需要四个节点：mater、slave1、slave2、slave3，需要两个namenode节点（master - active namenode, slave1 - stand by namenode）防止单点故障，master外的slave1、s
大数据系列（hadoop） Hadoop+Zookeeper 3节点高可用集群搭建
weixin_34174132的博客
10-29 263
---恢复内容开始--- 一、集群规划 主机名 ip NameNode DataNode　 Yarn ZooKeeper JournalNode node01 192.168.1.201 是 是 否 是 是 node02 192.168.1.202 是 是 否 是 是 node03 192.168.1.203 否...
hadoop+hbase+zookeeper集群配置流程及文件
08-28
hadoop集群配置流程以及用到的配置文件，hadoop2.8.4、hbase2.1.0、zookeeper3.4.12
hadoop+zookeeper+hbase集群搭建配置说明
06-22
数据仓库hadoop+zookeeper+hbase集群安装方法记录，自己搭建纯手写的记录。相关软件请自行下载
hadoop+zookeeper集群整合
04-24
hadoop+zookeeper集群整合，后续会有更多的大数据部署相关资料。
徐老师大数据培训Hadoop+HBase+ZooKeeper+Spark+Kafka+Scala+Ambari
01-26
徐老师大数据培训Hadoop+HBase+ZooKeeper+Spark+Kafka+Scala+Ambari
Hadoop集群+Zookeeper+HBase环境搭建
03-29
Hadoop+Zookeeper+HBase环境搭建,详细步骤和实例,从零开始搭建Hadoop集群
Zookeeper和Hadoop分布式集群搭建
weixin_44468025的博客
04-22 1652
Zookeeper和Hadoop分布式集群搭建 用三台虚拟机搭建如上集群 Zookeeper下载地址： https://www.apache.org/dyn/closer.lua/zookeeper/zookeeper-3.5.8/apache-zookeeper-3.5.8-bin.tar.gz Hadoop下载地址： https://archive.apache.org/dist/hadoop/common/hadoop-3.1.3/ 环境配置：JDK1.8+Zookeeper3.5.8+hadoo
Hadoop+Zookeeper搭建集群
weixin_42167918的博客
08-27 369
  前期准备 1.修改Linux主机名，每台都得配置 vim /etc/sysconfig/network NETWORKING=yes HOSTNAME=hadoop-server1 2.修改IP /etc/sysconfig/network-scripts/ifcfg-eth0 3.修改主机名和IP的映射关系 vim /etc/hosts 192.168.146.181 hadoo...
hadoop+zookeeper实现高可用集群
qq_42711214的博客
11-16 1659
在上一篇博客的基础上做这次实验 系统环境:RHEL6.5 selinux and iptables is disabled Hadoop 、jdk、zookeeper 程序使用 nfs 共享同步配置文件 软件版本:hadoop-2.7.3.tar.gz zookeeper-3.4.9.tar.gz jdk-7u79-linux-x64.tar.gz    hbase-1.2.4-bin.tar....
zookeeper集群部署
m0_54346661的博客
12-05 1196
前提：关闭防火墙 1、解压 cd /opt/module/ tar -zxvf apache-zookeeper-3.5.5-bin.tar.gz 2、创建数据文件和目录文件 在zookeeper的跟目录下创建两个文件夹data和log cd /opt/module/apache-zookeeper-3.5.5-bin/ mkdir data mkdir log 3、拷贝配置文件 cd /opt/module/apache-zookeeper-3.5.5-bin/conf/ cp zoo_sample.cf
（超详细）基于Zookeeper的Hadoop HA集群的搭建
JunLeon的博客
10-10 9090
基于Zookeeper的Hadoop HA集群的搭建 JunLeon——go big or go home 前言： 高可用（high availability，HA）指的是若当前工作中的机器宕机了，系统会自动处理异常，并将工作无缝地转移到其他备用机器上，以保证服务的高可靠性与可用性。 Hadoop HA是hadoop2.0后新添加的特性，包括NameNode HA和ResourceManager HA。 NameNode HA采用双Na...
Hadoop+zookeeper集群环境搭建步骤(百分百安装，亲测有效)
dsafds123的博客
05-05 3875
Hadoop+zookeeper集群环境搭建步骤(百分百安装，亲测有效) 使用的软件 hadoop-2.7.5 zookeeper-3.4.5 安装hadoop，需要多台机器构建集群(最少3台) 这里我使用三台机器搭建hadoop伪分布式集群以及zookeeper 主机名 ip地址 bigdata1 192.168.100.7 bigdata1 192.168.100.8 ...
Hadoop的HA机制(Zookeeper集群+Hadoop集群)配置记录
BD的笔记
04-12 1万+
博主：hadoop_version=2.4.1 java_version=1.7 zooKeeper_version=3.4.5 Linux =CentOs 6.5 1.首先说明HA是什么？ HA意为High Available，高可用性集群，是保证业务连续性的有效解决方案，一般有两个或两个以上的节点，且分为活动节点及备用节点。通
Hadoop2.7.3+HBase1.2.5+ZooKeeper3.4.6搭建分布式集群环境
热门推荐
reblue520的专栏
04-28 1万+
Hadoop2.7.3+HBase1.2.5+ZooKeeper3.4.6搭建分布式集群环境 一、环境说明 集群环境至少需要3个节点（也就是3台服务器设备）：1个Master，2个Slave，节点之间局域网连接，可以相互ping通，下面举例说明，配置节点IP分配如下： IP     角色 10.10.50.133 master 10.10.125.156 slav
Hadoop之分布式集群高可用性(HA)模式部署详解与Zookeeper
ZG_24的博客
06-16 789
1  分布式协调技术      提到zookeeper，首先需要理解什么是分布式协调技术。分布式协调技术主要用来解决分布式环境当中多个进程之间的同步控制，让他们有序的去访问某种临界资源，防止造成"脏数据"的后果，如下图所示：                            在这图中有三台机器，每台机器各跑一个应用程序。然后我们将这三台机器通过网络将其连接起来，构成一个系统来为用户提供服务，对...
hadoop+zookeeper+hbase+hive集群安装配置的作用
最新发布
03-23
Hadoop是一个分布式计算框架，可以处理大规模数据集，Zookeeper是一个分布式协调服务，可以管理Hadoop集群中的节点，HBase是一个分布式NoSQL数据库，可以存储海量数据，Hive是一个数据仓库工具，可以将结构化数据...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值