- 博客(5)
- 收藏
- 关注
RSS订阅原创 有关Map-Reduce的基础理论
一、背景Map-Reduce是一种计算模型，能够实现多个大规模并行计算过程，并能够保障对硬件故障的容错性；google在计算pagerank中遇到难题后，将其发扬光大，并进行简化。当前在很多框架下，我们只需要编写Map-Reduce函数，系统能够管理Map或者Reduce并行任务的执行及任务间的协调，计算过程如下：1、多个Map任务，每个任务的输入是DFS的一个或者多个文件块，Map任务将
2014-11-25 22:28:21
861
转载 Hbase基本原理、及存储知识
1HBase是一个针对结构化数据的可伸缩、高可靠、高性能、分布式和面向列的动态模式数据库。和传统关系数据库不同，HBase采用了BigTable的数据模型：增强的稀疏排序映射表（Key/Value），其中，键由行关键字、列关键字和时间戳构成。HBase提供了对大规模数据的随机、实时读写访问，同时，HBase中保存的数据可以使用MapReduce来处理，它将数据存储和并行计算完美地结合在一起
2014-11-13 22:12:21
1394
原创 大二层网络技术背景及主要技术方向
一、为什么需要大二层传统的三层数据中心架构结构的设计是为了应付服务客户端-服务器应用程序的纵贯式大流量，同时使网络管理员能够对流量流进行管理。工程师在这些架构中采用生成树协议(STP)来优化客户端到服务器的路径和支持连接冗余。 虚拟化从根本上改变了数据中心网络架构的需求。最重要的一点就是，虚拟化引入了虚拟机动态迁移技术。从而要求网络支持大范围的二层域。从根本上改变了传统三层网络统治数据中心
2014-11-06 20:49:06
20852
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人