分布式
文章平均质量分 94
PeakCrosser
Rise and Cross.
展开
-
[论文笔记] In Search of an Understandable Consensus Algorithm (Extended Version)
Raft 是一个用于管理复制日志的共识算法Raft 更易于理解, 且为构建实际的系统提供了更好的基础.Raft分离了共识的关键要素, 如领导者选举、日志复制、安全性;并通过更强的一致性来减少状态数量.Raft 包括一个使用重叠多数(overlapping majorities)保证安全性的新机制来更改集群成员.共识算法(consensus algorithms) 让一组机器作为一个协调的整体进行工作, 并在一些成员机器出现故障时也能继续运行.原创 2023-05-02 13:47:21 · 741 阅读 · 0 评论 -
[论文笔记] MapReduce: Simplified Data Processing on Large Clusters
MapReduce 是一种用于处理和生成大型数据集的编程模型和相关实现 .用户指定一个处理键值对以生成一组中间键值对的mapmapmap函数, 以及一个合并与同一中间键关联的所有中间值的reducereducereduce函数.特点: 自动并行化并在大型集群上执行. 运行时系统负责对输入数据进行分区、调度程序执行、处理机器故障以及管理所需的机器间通信等细节.分布式计算的输入数据很大, 处理并行计算、分发数据和处理故障等分布式所具有的问题掩盖了原本问题的简单计算....原创 2022-08-04 19:16:10 · 984 阅读 · 2 评论