【云计算】GFS思想优势以及架构

已于 2022-06-25 00:21:09 修改
阅读量945 收藏 2
点赞数 2
分类专栏： # 云计算 文章标签： 云计算 架构 服务器
于 2022-06-21 19:39:40 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_50927106/article/details/125281821
版权

GFS

1.GFS核心的思想

是硬盘横向扩展以及数据冗余

  • 全球化。这意味着任何客户端都可以访问（读写）任何文件，允许在不同的应用程序之间共享数据。
  • 支持在多台机器上自动分片大文件。这可以通过允许对每个文件快进行并行处理来提高性能，并且还可以处理无法放入单个磁盘的大文件。
  • 支持故障自动恢复。
  • 针对大文件的顺序访问以及最常见的读取和追加操作进行了优化

2. GFS的优点

  • 理论上能存储无限数据，因为硬盘可以横向扩展。
  • 容错性，数据冗余多份，多份数据同时损坏的概念几乎为零。
  • 存储大数据的性能比传统关系型数据库好

3.GFS架构(含GFS特点)

在这里插入图片描述

司六米希
关注
  • 2
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 2
    评论
专栏目录
云计算三大论文(GFS,MapReduce,BigTable)，中文及英文
11-12
云计算三大论文(GFS,MapReduce,BigTable)，中文及英文
分布式系统工程实现：GFS&Bigtable设计的优势，互联网营销
weixin_34034670的博客
09-02 90
　　目前，知名度比较高的通用存储系统包括：Google GFS&Bigtable，Amazon Dynamo，Microsoft Azure存储系统及Yahoo PNUTS。其中，GFS&Bigtable，Azure存储系统及Yahoo PNUTS都有总控节点，Amazon Dynamo采用去中心化的P2P设计。 　　Amazon Dynamo看起来很优美，比如Dynamo论文中提...
【大数据】GFS，大数据技术的基石，分布式文件系统的鼻祖
最新发布
Joker_ZJN的博客
04-05 1319
一文聊明白大数据技术的基石，分布式文件系统的始祖GFS
[转]GFS架构分析
silentime的专栏
10-20 286
原文地址：http://www.nosqlnotes.net/archives/237   Google文件系统（Google File System，GFS）是构建在廉价的服务器之上的大型分布式系统。它将服务器故障视为正常现象，通过软件的方式自动容错，在保证系统可靠性和可用性的同时，大大减少了系统的成本。 GFS是Google云存储的基石，其它存储系统，如Google Bigt...
云计算—GFS文件系统架构分析
u010911350的专栏
06-04 8008
Google文件系统（Google File System，GFS）是构建在廉价的服务器之上的大型分布式系统。它认为组件失效（注：可理解为服务器故障）是常态事件，而不是意外事件，通过自身对可能失效组件的持续的监控、错误侦测、灾难冗余以及自动恢复的机制，保证系统的可靠性，也降低了系统的设计成本。 系统架构            一个GFS集群包含三个角色：一个单独的GF
GFS架构
hancc_824的博客
10-09 1336
GFS（Google File System）Google早期研发的分布式文件系统。 画外音：与分布式文件系统对应的，是单机文件系统，Windows和Linux操作系统都有文件系统。
GFS架构分析
01-31
Google文件系统（GoogleFileSystem，GFS）是构建在廉价的服务器之上的大型分布式系统。它将服务器故障视为正常现象，通过软件的方式自动容错，在保证系统可靠性和可用性的同时，大大减少了系统的成本。 GFS是Google...
GFS(Google File System)架构
02-27
GFS的架构，体现了很多经典的设计实践： • 简化系统角色，单点master降低系统复杂度 • 不管是文件还是服务，均通过“冗余+故障自动转移”保证高可用 • 由于存在单点master，GFS将“降低与单点master的交互”作为...
谷歌云计算架构详解.docx
09-12
谷歌云计算架构详解docx,提供“谷歌云计算架构详解”免费资料下载，主要包括外部网络系统介绍、内部网络架构介绍、大规模IDC部署战略、自己设计的服务器机架架构、操作系统与云计算文件系统GFS/GFSII、并行计算架构...
Google云计算经典论文 GFS BigTable MapReduce
06-26
We have designed and implemented the Google File Sys- tem, a scalable distributed file system for large distributed data-intensive applications. It provides fault tolerance while running on ...
【分布式系统工程实现】GFS&Bigtable设计的优势
xgbjmxn的专栏
02-22 1256
【分布式系统工程实现】GFS&Bigtable设计的优势<br />目前，知名度比较高的通用存储系统包括：Google GFS&Bigtable，Amazon Dynamo，Microsoft Azure存储系统及Yahoo PNUTS。其中，GFS&Bigtable，Azure存储系统及Yahoo PNUTS都有总控节点，Amazon Dynamo采用去中心化的P2P设计。<br />Amazon Dynamo看起来很优美，比如Dynamo论文中提到的技术比较酷，Dynamo没有中心
Google云计算之GFS
ProChick's Blog
04-04 2358
GFS1.什么是GFS？2.有哪些特点3.它的容错机制4.它的相关技术 1.什么是GFS？ Google文件系统（Google File System，GFS）是一个大型的分布式文件系统。它为 Google云计算提供海量存储，并且与Chubby、MapReduce及Bigtable等技术结合十分紧 密，处于所有核心技术的底层。 Google GFS 不是一个开源的系统，我们仅能从Google公布的技术 文档来获得相关知识。 Google GFS 的新颖之处在于它采用廉价的商用机器构建分布式文件系
云计算（1.1）Google云计算三大核心技术 - 分布式文件系统GFS
key_768的博客
02-17 6099
前言 Google云计算有三大核心技术：分布式文件系统GFS、 分布式处理模型MapReduce、分布式结构化表Bigtable GFS Google File System(GFS) 存储海量数据的分布式文件系统 GFS是基于数据块存储的大型分布式文件存储系统 分布式存储系统 分布式存储系统，是将数据分散存储在多台独立的设备上 传统的网络存储系统采用集中的存储服务器存放所有数据，存储服务器成为系...
论文学习笔记：GFS
依然的专栏
10-22 7691
前言：Google大数据处理的3篇核心论文 《The Google File System》：http://research.google.com/archive/gfs.html 《MapReduce: Simplified Data Processing on Large Clusters 》：http://research.google.com/archive/mapreduce.htm
云计算读书笔记（一）之Google云计算技术GFS
XD阿灿的专栏
08-10 3294
Google云计算技术包括： Google文件系统GFS、分布式计算编程模型MapReduce、分布式锁服务Chubby、分布式结构化数据表Bigtable、分布式存储系统和Megastore以及分布式监控系统Dapper等。 其中GFS提供了海量数据的存储和访问的能力，MapReduce使得海量信息的并行处理变得简单易行，Chubby保证了分布式环境下并发操作的同步问题，Bigtable使得
云计算——Google云计算原理与应用（Google文件系统GFS）
123rx123的博客
05-15 3383
1.Google文件系统GFS Google文件系统（GoogleFile System，GFS）是一种大型的分布式文件系统。 它为Google云计算提供海量存储，并与Chubby、MapReduce及Bigtable等技术结合十分紧密，处于所有核心技术的底层。 GFS不是开源系统。 GFS采用廉价的商业机器构建分布式系统，同时将GFS的设计与Google应用的特点紧密结合。 GFS将容错的任务交给文件系统完成，利用软件的方法解决系统可靠性问题，使存储的成本成倍下降。 GFS将服务器故障视为正.
Google云计算GFS+MapReduce
wuyanlinwangli的专栏
01-10 1178
云计算的特点 1、超大规模 2、虚拟化 3、高可靠性 4、通用性 5、高可伸缩性 6、按需服务 7、极其廉价 云计算的分类 lIaaS：Infras tructure as a Service               将基础设施作为服务 lPaaS：Platform as a Service                将平台作为服务 l
分布式文件系统Google File System（GFS）
weixin_43829117的博客
01-15 1871
Google File System（GFS）是一个经典的面向大规模数据的分布式文件系统。它具有高性能、可拓展、可靠的特性。GFS在分布式领域的江湖地位相信不用多谈。BigTable，MapReduce和GFS向来有谷歌三驾马车之说。今天就来简单聊聊GFS的系统架构、以及谷歌针对Fault-tolerance、Consistency、Garbage collection、Balance、Recovery等一系列问题是如何提出合理解决方案的。 一、系统架构 GFS系统的参与者有包括了发起读写请求的客户端Cli
移动云计算gfs的了解_移动云计算
cusi77914的博客
06-23 585
当卡特琳娜（Katerina）的Apple iPhone发出哔哔声表示消息已到达时，她正在当地一家餐馆里享用美食。 她检查从公司的移动云中找到一条推文，说：“紧急！Dief3 Chilis60201需要水！” 位于埃文斯顿（Evanston）的奇利餐厅（Chili's restaurant）的一棵铁皮面包需要浇水，并已通过该餐厅与Cardoon，LLC的Wi-Fi连接发布了其状态。 Cardo...
在当前的云计算领域谷歌gfs
09-16
在当前的云计算领域，谷歌GFS（Google File System）是一个重要的存储系统。GFS是谷歌自行开发的分布式文件系统，它被设计用于处理大规模数据集的存储和访问。 GFS的设计目标是支持大规模的数据处理任务和高可靠性...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

司六米希

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值