hdfs
ccx_jy
这个作者很懒,什么都没留下…
展开
-
使用QJM(Quorum Journal Manager)的HDFS高可用集群搭建
1、目的本文主要是HDFS高可用性(HA)功能以及如何使用Quorum Journal Manager(QJM)功能配置和管理HA HDFS群集。2、背景在Hadoop 2.0.0之前,NameNode是HDFS集群中的单点故障(SPOF)。每个群集都有一个NameNode,如果该机器或 进程变得不可用,整个群集将无法使用,直到NameNode重新启动或在单独...原创 2018-10-31 13:41:00 · 792 阅读 · 0 评论 -
hadoop hdfs 全分布式(Fully-Distributed Operation) 部署
一、 架构简介: 本文档介绍如何设置和配置单节点Hadoop安装,以便您可以使用Hadoop MapReduce和Hadoop分布式文件系统(HDFS)快速执行简单操作。 使用hadoop版本:Apache Hadoop 2.6.5 使用4个虚拟机节点以及角色: hadoop01(192.168.92.66) nam...原创 2018-10-30 17:27:40 · 249 阅读 · 0 评论 -
hadoop hdfs 伪分布式(Pseudo-Distributed Operation) 部署
一、 架构简介: 本文档介绍如何设置和配置单节点Hadoop安装,以便您可以使用Hadoop MapReduce和Hadoop分布式文件系统(HDFS)快速执行简单操作。 使用hadoop版本:Apache Hadoop 2.6.5 使用1个虚拟机节点以及角色: hadoop01(192.168.92.66) 将namen...原创 2018-10-30 17:55:27 · 623 阅读 · 0 评论 -
hbase 高可用 全分布式集群 搭建以及原理分析
1、HBase简介HBase hadoop database 是一个高可靠性、高性能、面向列、可伸缩、实时读写的分布式数据库利用hadoop hdfs作为其文件存储系统利用hadoop MapReduce来处理HBase中的海量数据利用Zookeeper作为分布式协同服务主要用来存储非结构化和半结构化的松散数据 比如图片、文件等2、架构 各个环...原创 2019-03-01 16:05:40 · 2230 阅读 · 0 评论