基于RDMA的持久键值存储系统和设备
知识产权简介
本发明提供了一种基于RDMA的持久键值存储系统,包括:模块M1:请求处理模块,请求处理模块对客户端连接请求和数据请求进行处理,并为每个客户端分配资源;模块M2:内存数据模块,内存数据模块对键值数据进行整理,并以内存格式进行存储;模块M3:持久化数据模块,持久化数据模块接收传输模块发送的数据,并将其存储于持久化介质中;模块M4:数据压缩模块,数据压缩模块将内存数据模块的数据进行整理,并将其交由数据传输模块;根据元数据管理模块提供的信息,定期对持久化数据进行压缩,去除过时的重复数据;模块M5:数据传输模块,数据传输模块将数据压缩模块整理好的数据进行拆分,并使用RDMA传输到存储节点;根据计算节点需求,将持久化数据模块中的数据传输到计算节点;模块M6:元数据管理模块,元数据管理模块对内存数据和持久化数据进行记录和管理;模块M7:日志模块,日志模块在对数据和元数据进行实质更新前记录客户端的数据请求和对于元数据的更改,为系统提供可靠性保证。本发明针对分布式数据存储的问题,提出了一种基于RDMA的持久键值存储系统,所述的系统和方法能够很好地提高数据吞吐量并降低延迟,具有良好的市场前景和应用价值。