Jaleel的博客

欢迎来到Jaleel的博客

部署Hadoop环境(四)HBase分布式集群部署与设计

HBase是一个高可靠、高性能、面向列、可伸缩的分布式存储系统,利用Hbase技术可在廉价PC Server上搭建 大规模结构化存储集群。 HBase 是Google Bigtable 的开源实现,与Google Bigtable 利用GFS作为其文件存储系统类似, HBase 利用Hadoop...

2019-01-10 12:50:21

阅读数 21

评论数 0

部署Hadoop环境(三)HA架构与部署

1.HDFS-HA架构原理介绍 hadoop2.x之后,Clouera提出了QJM/Qurom Journal Manager,这是一个基于Paxos算法实现的HDFS HA方案,它给出了一种较好的解决思路和方案,示意图如下: 1)基本原理就是用2N+1台 JN 存储EditLog,每次写...

2019-01-10 12:45:45

阅读数 47

评论数 0

部署Hadoop环境(二)Hadoop2.X分布式集群部署

一、hadoop2.x版本下载及安装 Hadoop 版本选择目前主要基于三个厂商(国外)如下所示: 1.基于Apache厂商的最原始的hadoop版本, 所有发行版均基于这个版本进行改进。 2.基于HortonWorks厂商的开源免费的hdp版本。 3.基于Cloudera厂商的cdh版本...

2019-01-10 12:40:59

阅读数 18

评论数 0

部署Hadoop环境(一)linux环境准备与设置

Linux系统常规设置 Linux系统安装这里就不再详细讲解,不熟悉的同学可以参考VMware12安装Centos7超详细过程,接下来我们重点了解Linux系统常规设置。 1、设置ip地址 刚安装的centos7,一开始是dhcp但是由于重启机器ip可能会变,所以想使用静态ip,查了一...

2019-01-10 11:36:43

阅读数 87

评论数 0

基于Hadoop分布式存储平台搭建与验证

摘要 随着云时代的来临,大数据也吸引越来越多的关注,企业在日常运营中生成、积累的用户网络行为数据。这些数据是如此庞大,计量单位通常达到了PB、EB甚至是ZB。Hadoop作为一个开源的分布式文件系统和并行计算编程模型得到了广泛的部署和应用。本文将介绍Hadoop完全分布式集群的具体搭建过程与验证...

2019-01-16 13:47:00

阅读数 183

评论数 0

VMware12安装Centos7超详细过程

本文转载自:https://www.jianshu.com/p/ce08cdbc4ddb?utm_source=tuicool&utm_medium=referral 本篇文章主要介绍了VMware12安装Centos7详细过程,具有一定的参考价值,感兴趣的小伙伴们可以参...

2018-12-17 16:49:51

阅读数 374

评论数 0

centos7 搭建ngrok服务器实现内网穿透

一、内网穿透概要 为了理解内网穿透我们先来了解几个概念: 1.1、IP地址 网络中唯一定位一台设备的逻辑地址,类似我们的电话号码,在互联网中我们访问一个网站或使用一个网络服务最终都需要通过IP定位到每一台主机,IP地址是IP协议提供的一种统一的地址格式,它为互联网上的每一个网络和每一台主机分...

2018-12-11 11:12:51

阅读数 846

评论数 1

提示
确定要删除当前文章?
取消 删除
关闭
关闭