基于微内核的分布式键值存储系统
知识产权简介
本发明提供了一种基于微内核的分布式键值存储系统及访问方法,包括:模块M1:节点路由模块,部署于客户端,根据存储节点负载能力构建分片映射关系,并基于键的哈希值实现数据分片定位与目标节点寻址,从而实现去中心化的数据路由;模块M2:网络通信模块,建立客户端与各存储节点间轻量化TCP通信连接,支持并发通信和数据访问操作;模块M3:数据存储模块,部署于服务端,采用分片索引层与分片数据层的分层结构,并通过可扩展哈希表与日志结构相结合的非对称存储方式,实现高效的数据组织与并发访问;模块M4:数据共识模块,用于构建由主节点和副节点组成的一致性组,通过组成员管理、跨节点能力控制及副本同步机制,实现分片内多副本数据一致性维护及节点动态变化下的数据迁移与主从切换。本发明能够在保证数据安全隔离和一致性的前提下,实现高并发访问、低开销一致性维护以及高效的动态扩展能力。
转化前景
现有的分布式键值存储系统大多基于宏内核环境构建,各组件缺乏安全的物理隔离,一致性维护开销高,扩缩容过程易引发性能波动。本方案依托微内核组件化隔离与细粒度能力控制,通过非对称存储模型、桶内指纹表加速查询、乐观读机制及基于日志的懒迁移策略,在保障数据安全与一致性的前提下,有效提升了系统并发访问性能,降低了节点动态扩缩容的影响,具备良好的应用前景。