一种基于rockadb存储引擎增大内存的方法及系统_CN114218274A_上海沄熹科技有限公司.pdf
免费下载
(19)中华人民共和国国家知识产权局
(12)发明专利申请
(10)申请公布号
(43)申请公布日
(21)申请号 202111499906.9
(22)申请日 2021.12.09
(71)申请人 浪潮云信息技术股份公司
地址 250100 山东省济南市高新区浪潮路
1036号浪潮科技园S01号楼
(72)发明人 王泽坤
(74)专利代理机构 济南信达专利事务所有限公
司 37100
代理人 姜鹏
(51)Int.Cl.
G06F
16/2455
(2019 .01)
G06F
16/22
(2019 .01)
G06F
12/0877
(2016 .01)
(54)发明名称
一种基于rockadb存储引擎增大内存的方法
及系统
(57)摘要
本发明公开了一种基于rockadb存储引擎增
大内存的方法及系统，属于云计算存储领域；所
述的S1利用内存池和内存池管理机制维护内存
中的数据；S2利用自适应基数树索引将内存存储
区中的数据替换原有的索引结构；S3利用修改后
的预写管理系统对多日志文件进行管理实现其
恢复功能；S4将内存存储区的数据进行落盘操作
的功能，并对生成的SST文件进行管理；本发明的
目的是提供一种基于rockadb存储引擎增大内存
的方法及系统，在增大rocksdb存储引擎中内存
的存储数据量的同时，要对rocksdb系统中的各
个子系统进行适配和调整，以实现增大内存，提
高存储引擎性能的目标。
权利要求书2页 说明书6页 附图2页
CN 114218274 A
2022.03.22
CN 114218274 A
1 .一种基于rockadb存储引擎增大内存的方法，其特征是所述的方法具体步骤如下：
S1利用内存池和内存池管理机制维护内存中的数据；
S2利用自适应基数树索引将内存存储区中的数据替换原有的索引结构；
S3利用修改后的预写管理系统对多日志文件进行管理实现其恢复功能；
S4将内存存储区的数据进行落盘操作的功能，并对生成的SST文件进行管理。
2.根据权利要求1所述的方法，其特征是所述S1利用内存池和内存池管理机制维护内
存中的数据的具体步骤如下：
S101通过内存池根据数据库当前的数据量进行自适应；
S102通过内存存储区对内存池的数据进行存储管理。
3 .根据权利要求2所述的方法，其特征是所述S2利用自适应基数树索引将内存存储区
中的数据替换原有的索引结构的具体步骤如下：
S201利用自适应基数树的数据结构作为内存存储区数据的索引；
S202将内存存储区的每条数据的地址和长度作为自适应基数树索引的叶子节点；
S203通过索引找到对应的叶子节点，通过叶子节点找到数据；
S204使用数据库通用的结构对自适应基数树的进行适配。
4 .根据权利要求3所述的方法，其特征是所述S3利用修改后的预写管理系统对多日志
文件进行管理实现其恢复功能的具体步骤如下：
S301通过部件改造对多预写日志文件进行管理；
S302将预写日志系统的全部文件恢复到内存存储区中。
5 .根据权利要求4所述的方法，其特征是所述S4将内存存储区的数据进行落盘操作的
功能，并对生成的SST文件进行管理的具体步骤如下：
S401内存存储区中的数据按照顺序落盘到SST并对SST进行切分，将SST加入到level1
中；
S402将增大内存的存储引擎切换为rocksdb存储引擎。
6 .一种基于rockadb存储引擎增大内存的系统，其特征是所述的系统具体包括内存存
储模块、ART索引模块、预写日志模块和SST数据落盘模块：
内存存储模块：利用内存池和内存池管理机制维护内存中的数据；
ART索引模块：利用自适应基数树索引将内存存储区中的数据替换原有的索引结构；
预写日志模块：利用修改后的预写管理系统对多日志文件进行管理实现其恢复功能；
SST数据落盘模块：将内存存储区的数据进行落盘操作的功能，并对生成的SST文件进
行管理。
7 .根据权利要求6所述的系统，其特征是所述内存存储模块具体包括自适应模块和存
储管理模块：
自适应模块：通过内存池根据数据库当前的数据量进行自适应；
存储管理模块：通过内存存储区对内存池的数据进行存储管理。
8.根据权利要求7所述的系统，其特征是所述ART索引模块具体包括索引建立模块、节
点建立模块、数据索引模块和索引适配模块：
索引建立模块：利用自适应基数树的数据结构作为内存存储区数据的索引；
节点建立模块：将内存存储区的每条数据的地址和长度作为自适应基数树索引的叶子
权 利 要 求 书
1/2 页
2
CN 114218274 A
2
of 11
免费下载
【版权声明】本文为墨天轮用户原创内容，转载时必须标注文档的来源（墨天轮），文档链接，文档作者等基本信息，否则作者和墨天轮有权追究责任。如果您发现墨天轮中有涉嫌抄袭或者侵权的内容，欢迎发送邮件至：contact@modb.pro进行举报，并提供相关证据，一经查实，墨天轮将立刻删除相关内容。
下载排行榜
评论