一种适用于时序存储的动态时间分区方法及系统_CN118445329A__上海沄熹科技.pdf

迹部景吾

13页

0次

2025-03-06

免费下载

(19)国家知识产权局

(12)发明专利申请

(10)申请公布号

(43)申请公布日

(21)申请号 202410517849 .X

(22)申请日 2024 .04 .28

(71)申请人上海沄熹科技有限公司

地址 200120 上海市浦东新区中国（上海）

自由贸易试验区张东路1158号、丹桂

路1059号2幢305-22室

(72)发明人李盟　贾德星　

(74)专利代理机构济南信达专利事务所有限公

司 37100

专利代理师陈婷婷

(51)Int.Cl.

G06F

16/2458

(2019 .01)

G06F

16/22

(2019 .01)

(54)发明名称

一种适用于时序存储的动态时间分区方法

及系统

(57)摘要

本发明公开了一种适用于时序存储的动态

时间分区方法及系统，属于时序存储优化技术领

域，通过时间分区计算算法，在不同分区时间间

隔情况下，将时序数据进行动态分区，进而落盘

到对应的分区存储空间中；实现包括：时序表分

区时间间隔设置；时序数据的分区数据写入，计

算时序数据所属分区信息，并将时序数据写入对

应的分区；时序数据的分区数据读取，根据数据

时间范围计算起始时间和终止时间所在分区信

息，对所述分区进行数据查询；时间分区计算算

法：该算法根据给定时间戳，判断该时间戳属于

哪个时间分区，并做到以存储记录的分区时间间

隔为单位，进行动态分配时间分区。本发明能够

在合理调整时间分区间隔的情况下，提升时间范

围查询性能。

权利要求书3页说明书6页附图3页

CN 118445329 A

2024.08.06

CN 118445329 A

1 .一种适用于时序存储的动态时间分区方法，其特征在于，通过时间分区计算算法，在

不同分区时间间隔情况下，将时序数据进行动态分区，进而落盘到对应的分区存储空间中；

该方法的实现包括：

1)时序表分区时间间隔设置；

2)时序数据的分区数据写入，计算时序数据所属分区信息，并将时序数据写入对应的

分区；

3)时序数据的分区数据读取，根据数据时间范围计算起始时间和终止时间所在分区信

息，对所述分区进行数据查询；

4)时间分区计算算法：该算法根据给定时间戳，判断该时间戳属于哪个时间分区，并做

到以存储记录的分区时间间隔为单位，进行动态分配时间分区。

2 .根据权利要求1所述的一种适用于时序存储的动态时间分区方法，其特征在于，所述

时序表分区时间间隔设置；

1 .1)数据库在创建时序数据表时设置分区时间间隔；

1 .2)数据库修改该表分区时间间隔时，存储会相应修改保存的分区时间间隔数据。

3 .根据权利要求1所述的一种适用于时序存储的动态时间分区方法，其特征在于，所述

时序数据的分区数据写入，

2 .1)当有一条时序数据进入存储层时，存储会解析该条时序数据的时间戳信息，通过

分区时间计算模块，得到时间分区信息；

2 .2)计算得到分区信息后，检查该分区数据目录是否存在，若不存在，则进行数据目录

创建，然后将分区信息按照分区开始时间从小到大保存在内存中以便查询使用；

2 .3)分区数据目录创建完成后，调用数据写入接口进行持久化落盘，进而完成数据写

入。

4 .根据权利要求1所述的一种适用于时序存储的动态时间分区方法，其特征在于，所述

时序数据的分区数据读取，

3 .1)首先，执行层发送执行计划到存储层，存储对该计划进行解析，得到需要查询的数

据时间范围；

3 .2)其次，对数据查询时间范围的起始时间和终止时间，调用分区时间计算模块，计算

出起始时间所在分区信息和终止时间所在分区信息；

3 .3)然后，读取数据写入时保存在内存中的所有时间分区信息，遍历判断哪些分区是

处于上一步计算出两个分区之间，然后对这些分区进行数据查询返回。

5 .根据权利要求1所述的一种适用于时序存储的动态时间分区方法，其特征在于，所述

时间分区计算算法，

4 .1)首先，判断存储是否已经有创建好的分区，如果没有分区目录，则表示需要创建出

第一个时间分区；那么从0时间开始，以存储记录的分区时间间隔为分区单位，向后查找出

哪个分区包含给定时间戳，然后返回该分区信息；

4 .2)如果存储已经有创建好的分区，那么通过内存中现有的所有时间分区信息，对给

定时间戳进行二分法判断，确定出该时间戳所属分区是否已存在，若已存在，直接返回分区

信息；

4 .3)若给定时间戳不存在现有的时间分区中，则需要判断两种情况：

权　利　要　求　书

1/3 页

CN 118445329 A

第一种，给定时间戳大于现有的最大时间分区结束时间，那么需要从现有最大时间分

区的结束时间开始，以存储记录的分区时间间隔为分区单位，向后查找出哪个分区包含给

定时间戳，然后返回该分区信息；

第二种，给定时间戳小于现有的最大时间分区结束时间，通过二分法拿到第一个开始

时间比给定时间戳大的分区信息，然后将这个分区信息的开始时间作为起始时间，以存储

记录的分区时间间隔为分区单位，向前查找哪个分区包含给定时间戳，并且该分区的范围

不能与现有分区重叠，如果重叠则截断重叠部分，然后返回该分区信息。

6 .一种适用于时序存储的动态时间分区系统，其特征在于，包括

时序表分区时间间隔设置模块，用于设置修改时序数据表的分区时间间隔；

时序数据分区数据写入模块，用于实现时序数据分区落盘；

时序数据分区数据读取模块，用于实现时序数据分区数据读取；

时间分区计算模块，用于提供计算给定时间戳所属分区的算法。

7 .根据权利要求6所述的一种适用于时序存储的动态时间分区系统，其特征在于，所述

时序数据分区数据写入模块，包括以下步骤：

2 .1)获取数据的时间戳信息，然后根据分区时间间隔，调用时间分区计算模块，得到所

属分区信息；

2 .2)根据分区信息判断该分区是否已创建，若未创建，则需要创建出新的分区，然后将

该行数据进行写入到该分区；

所述时序数据分区数据读取模块，包括以下步骤：

3 .1)根据执行层传入的查询时间范围条件，调用时间分区计算模块，确定出这个时间

范围的起始时间和终止时间各自所处的时间分区，这两个时间分区组成一个时间范围；

3 .2)根据现有的所有时间分区，从小到大判断当前时间分区是否处于上述时间范围，

如果处于，则对该时间分区进行查询。

8 .根据权利要求6所述的一种适用于时序存储的动态时间分区系统，其特征在于，所述

时间分区计算模块，包括以下步骤：

4 .1)首先判断存储是否已经有创建好的分区，如果没有分区目录，则表示需要创建出

第一个时间分区；那么从0时间开始，以存储记录的分区时间间隔为分区单位，向后查找出

哪个分区包含给定时间戳，然后返回该分区信息；

4 .2)如果存储已经有创建好的分区，则需要通过内存中现有的所有时间分区信息，对

给定时间戳进行二分法判断，确定出该时间戳所属分区是否已存在，若已存在，直接返回该

分区信息；

4 .3)若给定时间戳不存在现有的时间分区中，则需要判断两种情况：

第一种，给定时间戳大于现有的最大时间分区结束时间，则需要从现有最大时间分区

的结束时间开始，以存储记录的分区时间间隔为分区单位，向后查找出哪个分区包含给定

时间戳，然后返回该分区信息；

第二种，给定时间戳小于现有的最大时间分区结束时间，通过二分法拿到第一个开始

时间比给定时间戳大的分区信息，然后将这个分区信息的开始时间作为起始时间，向前以

存储记录的分区时间间隔为分区单位，向前查找哪个分区包含给定时间戳，并且该分区的

范围不能与现有分区重叠，如果重叠则截断重叠部分，然后返回该分区信息。

权　利　要　求　书

2/3 页

CN 118445329 A

of 13

免费下载

相关文档

评论