暂无图片
暂无图片
暂无图片
暂无图片
暂无图片
文档 / 一种跨公有云平台的数据仓库系统及其设计方法_徐辛_CN 114466068 A_石原子科技.pdf
一种跨公有云平台的数据仓库系统及其设计方法_徐辛_CN 114466068 A_石原子科技.pdf
StoneDB
152
11页
0次
2022-11-28
25墨值下载
(19)国家知识产权局
(12)发明专利申请
(10)申请公布号
(43)申请公布日
(21)申请号 202210123903 .3
(22)申请日 2022 .02 .10
(71)申请人 杭州石原子科技有限公司
地址 310000 浙江省杭州市余杭区五常街
道西坝路51号B座203、204室
(72)发明人 徐辛　
(74)专利代理机构 沈阳工匠智诚知识产权代理
事务所(普通合伙) 21256
专利代理师 孙楠
(51)Int.Cl.
H04L
67/563
(2022 .01)
H04L
67/10
(2022 .01)
H04L
67/1074
(2022 .01)
H04L
67/1097
(2022 .01)
H04L
67/12
(2022 .01)
(54)发明名称
一种跨公有云平台的数据仓库系统及其设
计方法
(57)摘要
本发明属于平台数据管理技术领域，具体为
一种跨公有云平台的数据仓库系统及其设计方
法，包括数据迁移模块和数据处理任务迁移模
块，所述数据迁移模块包括用户数据动态监听单
元、数据错误判断单元、未使用数据迁移单元、数
据使用完毕信息传送单元、数据使用完毕迁移单
元和存储资源释放单元，该数据仓库系统让用户
有了更多的选择自由，促进技术的良性发展，促
进了数据的跨云流动，可以产生更大的数据价
值，通过创新性的技术对数据以及数据处理任务
进行跨云迁移，为用户屏蔽所有的复杂工作，用
户拥有更多的主动权和话语权，可随时将自己的
数据和任务跨云迁移，借此获得最高的产品性价
比。
权利要求书1页 说明书4页 附图5页
CN 114466068 A
2022.05.10
CN 114466068 A
1 .一种跨公有云平台的数据仓库系统，包括数据迁移模块(1)和数据处理任务迁移模
块(2)，其特征在于，所述数据迁移模块(1)包括用户数据动态监听单元(3)、数据错误判断
单元(4)、未使用数据迁移单元(5)、数据使用完毕信息传送单元(6)、数据使用完毕迁移单
元(7)和存储资源释放单元(8) ，所述数据处理任务迁移模块(2)包括运行任务运行单元
(9)、新任务分配单元(10)、新任务执行单元(11)、计算资源释放单元(12)。
2 .根据权利要求1所述的一种跨公有云平台的数据仓库系统，其特征在于：所述用户数
据动态监听单元(3)的输出端连接设置有数据错误判断单元(4)，所述数据错误判断单元
(4)的输出端连接设置有未使用数据迁移单元(5)，所述未使用数据迁移单元(5)的输出端
连接设置有数据使用完毕信息传送单元(6)，所述数据使用完毕信息传送单元(6)的输出端
连接设置有数据使用完毕迁移单元(7)，所述数据使用完毕迁移单元(7)的输出端连接设置
有存储资源释放单元(8)。
3 .根据权利要求1所述的一种跨公有云平台的数据仓库系统，其特征在于：所述运行任
务运行单元(9)的输出端连接设置有新任务分配单元(10)，所述新任务分配单元(10)的输
出端连接设置有新任务执行单元(11)，所述新任务执行单元(11)的输出端连接设置有计算
资源释放单元(12)。
4 .根据权利要求1所述的一种跨公有云平台的数据仓库系统，其特征在于：所述用户数
据动态监听单元(3)、数据错误判断单元(4)、未使用数据迁移单元(5)、数据使用完毕信息
传送单元(6)和数据使用完毕迁移单元(7)组成不可迁移池。
5 .根据权利要求1所述的一种跨公有云平台的数据仓库系统，其特征在于：所述新任务
分配单元(10)、新任务执行单元(11)组成任务池。
6 .一种如权利要求1‑5任意一项所述的跨公有云平台的数据仓库系统的设计方法，其
特征在于：该跨公有云平台的数据仓库系统的设计方法中云的整体构架分为3层，由下至上
分别是IaaS层、PaaS层、SaaS层，IaaS层是位于最底层的基础设施，如物理服务器；PaaS层是
无业务属性的平台服务组件，位于中间层，对下与IaaS层进行互通，对上与SaaS层进行互
通；SaaS层是面向最终使用者的软件服务，也是用户最终使用产品的交互界面；
该跨公有云平台的数据仓库系统的设计方法包括两种：
第一种：首先需要提供数据迁移的工具，实现数据在两种公有云之间的搬迁，其次还要
保证用户正常使用产品，通过用户数据动态监听单元(3)对用户数据动态进行监听，在监听
用户所有的数据中，通过数据错误判断单元(4)判断哪些用户数据正在使用，哪些用户数据
不在使用，然后对当面没有在使用的数据通过未使用数据迁移单元(5)进行迁移，在正在使
用的数据使用结束后，通过数据使用完毕信息传送单元(6)传递结束信息，然后通过数据使
用完毕迁移单元(7)将使用后的数据进行迁移，直到所有的数据全部迁移后，通过存储资源
释放单元(8)释放所有的存储资源；
第二种：首先通过运行任务运行单元(9)对正在运行中的任务保证其正常的运行，并通
过新任务分配单元(10)继续为用户提供服务，对于用户新下发的任务，由SaaS层自动将任
务分配至新的目的地，在新的共有云中，通过新任务执行单元(11)执行，直到原有的公有云
中的任务全部执行完毕，通过计算资源释放单元(12)释放所有的计算资源。
权　利　要　求　书
1/1 页
2
CN 114466068 A
2
一种跨公有云平台的数据仓库系统及其设计方法
技术领域
[0001]
本发明涉及平台数据管理技术领域，具体为一种跨公有云平台的数据仓库系统及
其设计方法。
背景技术
[0002]
随着数据量越来越大，数据种类越来越多，各种结构化数据、半结构化数据、非结
构化数据，数据仓库成为在大数据处理中不可或缺的一环。根据不同公司或组织的需求不
同，数据仓库的部署环境也会不同，总体可分为三类：私有化部署的数据仓库、公有云部署
的数据仓库、混合云部署的数据仓库。其中在公有云部署环境中又可以细分为多种形态：1)
公有云厂商提供纯粹的数据仓库SaaS服务；2)公有云厂商仅提供IaaS层服务，由使用公司
(或组织)自行在其上部署数据仓库产品。以上为数据仓库产品整体的行业现状。
[0003]
数据仓库作为一种大数据时代不可或缺的产品，可以为企业(或组织)提供深入的
商业洞察力，对企业(或组织)的重要性不言而喻。目前在公有云种的数据仓库SaaS服务因
其成本节约，使用便捷，无需运维管理，开箱即用等优点被越来越多的中小企业(组织)所接
受，但随着SaaS化数仓产品使用企业越来越多，用户发现了新的问题，那便是云锁定。云锁
定通俗的解释便是当选择了某一家公有云厂商的产品之后，如果想要更换至另外一家公有
云厂商的产品，其成本非常高昂，这便导致了后续只能继续使用这一家公有云厂商的产品
和服务。因此，公有云厂商对其定价有着完全的话语权，企业(或组织)没有了任何再选择的
权力，这便是云锁定。云锁定状况不止出现在数据仓库产品中，所有由公有云厂商所提供的
SaaS产品均存在相同的问题。只是因为数据仓库本身的产品特性导致了云锁定问题体现的
更加明显，其根源是数据仓库产品中同时存在这数据以及数据处理任务，想要将数据和数
据处理任务由一家公有云迁移到另一家公有云是根本不可能实现的。
发明内容
[0004]
本发明的目的在于提供一种跨公有云平台的数据仓库系统及其设计方法，以解决
上述背景技术中提出的目前的数据仓局在使用时，当选择了某一家公有云厂商的产品之
后，如果想要更换至另外一家公有云厂商的产品，其成本非常高昂，这便导致了后续只能继
续使用这一家公有云厂商的产品和服务的问题。
[0005]
为实现上述目的，本发明提供如下技术方案：一种跨公有云平台的数据仓库系统，
包括数据迁移模块和数据处理任务迁移模块，所述数据迁移模块包括用户数据动态监听单
元、数据错误判断单元、未使用数据迁移单元、数据使用完毕信息传送单元、数据使用完毕
迁移单元和存储资源释放单元，所述数据处理任务迁移模块包括运行任务运行单元、新任
务分配单元、新任务执行单元、计算资源释放单元。
[0006]
优选的，所述用户数据动态监听单元的输出端连接设置有数据错误判断单元，所
述数据错误判断单元的输出端连接设置有未使用数据迁移单元，所述未使用数据迁移单元
的输出端连接设置有数据使用完毕信息传送单元，所述数据使用完毕信息传送单元的输出
说　明　书
1/4 页
3
CN 114466068 A
3
of 11
25墨值下载
stonedbpatent
【版权声明】本文为墨天轮用户原创内容，转载时必须标注文档的来源（墨天轮），文档链接，文档作者等基本信息，否则作者和墨天轮有权追究责任。如果您发现墨天轮中有涉嫌抄袭或者侵权的内容，欢迎发送邮件至：contact@modb.pro进行举报，并提供相关证据，一经查实，墨天轮将立刻删除相关内容。

文档被以下合辑收录

StoneDB学术分享会（共19篇）
解读最新的前沿数据库论文，重点关注HTAP相关学术进展

相关文档

【GoldenDB】一种分布式数据库变更数据检索方法、装置、设备及介质_CN202411914568.4_金篆信科有限责任公司.pdf
7浏览
【GoldenDB】一种请求处理方法、装置、电子设备和存储介质_​​​202311871049.X_金篆信科有限责任公司.PDF
3浏览
【GoldenDB】分布式数据库主备数据同步方法、装置、设备及存储介质_​​​202311796002.1_金篆信科有限责任公司.PDF
8浏览
【GoldenDB】一种测试报告生成方法、装置、设备及存储介质_​​​202311872998.X_金篆信科有限责任公司.PDF
6浏览
【GoldenDB】​一种优化云数据节点调度的方法、装置、设备及存储介质_​​​202311852008.6_金篆信科有限责任公司.PDF
6浏览
【GoldenDB】一种数据采集方法、装置、设备及存储介质_​​​202311835185.3_金篆信科有限责任公司.PDF
5浏览

评论