Vasto：分布式高性能键值存储系统

Vasto：分布式高性能键值存储系统

vastoA distributed key-value store. On Disk. Able to grow or shrink without service interruption.项目地址:https://gitcode.com/gh_mirrors/va/vasto

项目介绍

Vasto 是一款分布式高性能键值存储系统，专为需要大规模数据存储和高可用性的应用场景设计。Vasto 基于 RocksDB 构建，通过添加分片、复制和支持操作，实现了无服务中断的扩展和缩减功能。Vasto 不仅提供了简单的 API 接口，还支持自动管理客户端连接配置，使得开发者能够像创建一个本地 map 对象一样轻松地搭建分布式键值存储系统。

项目技术分析

架构设计

Vasto 的架构由一个主节点（Vasto Master）和多个存储节点（Vasto Stores）组成。主节点负责管理所有存储节点和客户端连接，而存储节点则是 RocksDB 的简单封装，负责数据的存储和读写操作。客户端通过主节点连接到正确的存储节点，而 Vasto 网关则使用客户端库来支持不同的 API。

一致性哈希算法

Vasto 采用 Jumping Consistent Hash 算法来分配数据，该算法具有以下特点：

• 无存储需求：主节点仅需要软状态来管理所有存储服务器，重启后可恢复。
• 均匀分布：数据均匀分布在各个桶中。
• 灵活扩展：当桶的数量变化时，能够均匀地分配工作负载。

最终一致性与主动-主动复制

Vasto 支持最终一致性和主动-主动复制，所有存储节点均可用于读写操作。数据变更会在几毫秒内传播到其他副本。只有主副本参与正常操作，当主副本失效时，其他副本会接管。

项目及技术应用场景

Vasto 适用于以下场景：

• 大规模数据存储：适用于需要存储海量数据的应用，如日志存储、用户行为分析等。
• 高可用性需求：适用于对数据可用性要求极高的场景，如金融交易、在线游戏等。
• 动态扩展需求：适用于需要根据业务需求动态扩展或缩减存储容量的场景，如电商平台的促销活动、社交媒体的突发流量等。

项目特点

• 高性能：基于 RocksDB 构建，提供高效的读写性能。
• 高可用性：支持无服务中断的扩展和缩减，确保系统的高可用性。
• 简单易用：提供简单的 API 接口，开发者可以轻松上手。
• 灵活扩展：支持动态调整分片和副本数量，满足不同业务需求。
• 最终一致性：支持最终一致性和主动-主动复制，确保数据的一致性和可用性。

总结

Vasto 作为一款分布式高性能键值存储系统，凭借其简单易用的 API、灵活的扩展性和高可用性，为开发者提供了一个强大的数据存储解决方案。无论是大规模数据存储、高可用性需求，还是动态扩展需求，Vasto 都能完美胜任。如果你正在寻找一个高效、可靠的分布式键值存储系统，Vasto 绝对值得一试。

vastoA distributed key-value store. On Disk. Able to grow or shrink without service interruption.项目地址:https://gitcode.com/gh_mirrors/va/vasto