分布式系统
张某人ER
学习IT的学生
展开
-
ODPS技术架构及应用实践
原文链接:http://www.csdn.net/article/2014-10-20/2822184作者张云远,李妹芳初识ODPSODPS是分布式的海量数据处理平台,提供了丰富的数据处理功能和灵活的编程框架,主要的功能组件有如下几个。Tunnel服务:数据进出ODPS的唯一通道,提供高并发、高吞吐量的数据上传和下载服务。SQL:基于SQL92并进行了本转载 2015-06-30 19:09:20 · 561 阅读 · 0 评论 -
RabbitMQ消息队列(一): Detailed Introduction 详细介绍
原文地址:http://blog.csdn.net/anzhsoft/article/details/195630911. 历史 RabbitMQ是一个由erlang开发的AMQP(Advanced Message Queue )的开源实现。AMQP 的出现其实也是应了广大人民群众的需求,虽然在同步消息通讯的世界里有很多公开标准(如 COBAR的 IIOP转载 2016-07-12 14:36:14 · 544 阅读 · 0 评论 -
分布式系统(Distributed System)资料
原文地址:https://github.com/ty4z2008/Qix/blob/master/ds.md#分布式系统distributed-system资料分布式系统(Distributed System)资料希望转载的朋友,你可以不用联系我.但是一定要保留原文链接,因为这个项目还在继续也在不定期更新.希望看到文章的朋友能够学到更多.《Rec转载 2015-10-16 09:44:01 · 3706 阅读 · 0 评论 -
分布式与集群的区别
原文地址:http://blog.csdn.net/bluishglc/article/details/5483162简单说,分布式是以缩短单个任务的执行时间来提升效率的,而集群则是通过提高单位时间内执行的任务数来提升效率。例如:如果一个任务由10个子任务组成,每个子任务单独执行需1小时,则在一台服务器上执行改任务需10小时。采用分布式方案,提供10台服转载 2015-10-16 09:37:56 · 538 阅读 · 0 评论 -
分布式服务框架的4项特性
原文地址 :http://timyang.net/distributed/service-architecture/在移动及云时代,尽管大部分可扩展的问题可以通过云平台解决,但是服务本身的扩展性挑战仍然存在。比如一个新的项目,用PHP或JSP实现了基本功能,部署在Apache或Tomcat等容器上,在业界这种部署在一个容器内的功能模块通常可以称为一个service。服务容器转载 2015-10-16 09:06:15 · 957 阅读 · 0 评论 -
分布式系统的事务处理
原文地址:http://coolshell.cn/articles/10910.html当我们在生产线上用一台服务器来提供数据服务的时候,我会遇到如下的两个问题:1)一台服务器的性能不足以提供足够的能力服务于所有的网络请求。2)我们总是害怕我们的这台服务器停机,造成服务不可用或是数据丢失。于是我们不得不对我们的服务器进行扩展,加入更多的机器来分担性能上的转载 2015-10-16 08:21:03 · 461 阅读 · 0 评论 -
并发模型
原文地址:并发编程虽不是新的概念,最近却逐渐热门起来。一些编程语言,如Erlang、Haskell、Go、Scala、Clojure,也因对并发编程提供了良好的支持,而受到广泛关注。并发编程复兴的主要驱动力来自于所谓的“多核危机”。正如摩尔定律①所预言的那样,芯片性能仍在不断提高,但相比加快CPU的速度,计算机正在向多核化方向②发展。正如Herb Sutter所说,“免转载 2015-06-11 10:21:18 · 3025 阅读 · 0 评论 -
Apache Hadoop 和Hadoop生态圈
Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS。HDFS有高容错性的特点,并且设计用来部署在低廉的(low-cost)硬件上;而且它提供高吞吐量(high throughput)来访问应用程序的数据,适合那些有着超大数据集(large data set)的应用程序。HDFS放宽了(relax)POSIX的要求,可以以流的形式访问(streaming access)文件系统中的数据。Hadoop的框架最核心的设计就是:HDFS和MapRedu原创 2015-06-10 17:33:08 · 1207 阅读 · 0 评论 -
Hadoop概述
原文地址:http://blog.csdn.net/kkdelta/article/details/7696025hadoop是什么:Hadoop是一个开发和运行处理大规模数据的软件平台,是Appach的一个用java语言实现开源软件框架,实现在大量计算机组成的集群中对海量数据进行分布式计算.Hadoop框架中最核心设计就是:HDFS和MapReduce.HDFS提供了海量数据转载 2015-06-10 17:31:36 · 565 阅读 · 0 评论 -
RabbitMQ消息队列(二):”Hello, World“
原文地址:http://blog.csdn.net/anzhsoft/article/details/19570187 本文将使用Python(pika 0.9.8)实现从Producer到Consumer传递数据”Hello, World“。 首先复习一下上篇所学:RabbitMQ实现了AMQP定义的消息队列。它实现的功能”非常简单“:从Producer接收数据然转载 2016-07-12 14:38:04 · 511 阅读 · 0 评论