人大金仓数据库KESSharding数据迁移介绍

关键字：

存量迁移、增量迁移、数据校验、流量切换

数据迁移使用背景

随着业务持续发展，数据量和并发量达到一定程度，传统数据库可能面临性能、可扩展性、可用性等问题。通过 KESSharding 提供的数据迁移方案可以助力传统数据库平滑切换到 KESSharding，内置于KESSharding-Proxy。

目前支持的数据库类型

1. KES

2. MySQL

3. PostgreSQL

4. openGauss

除此之外，也支持 Oracle 到 MySQL/PostgreSQL/KES 的异构迁移。

数据迁移相关概念

源端：原始数据所在的存储集群

目标端：原始数据将要迁移的目标存储集群

存量数据：在数据迁移开始前，数据节点中已有的数据

增量数据：在数据迁移执行过程中，业务系统产生的新数据

数据迁移流程

目前的数据迁移解决方案为：使用一个全新的数据库集群作为迁移目标库。

这种实现方式有以下优点：

1. 迁移过程中，原始数据没有任何影响；
2. 迁移失败无风险；
3. 不受分片策略限制。

同时也存在一定的缺点：

1. 在一定时间内存在冗余服务器；
2. 所有数据都需要移动。

一次数据迁移包括以下几个主要阶段：

1. 准备阶段
2. 存量数据迁移阶段
3. 增量数据同步阶段
4. 流量切换阶段

数据迁移阶段

参考资料

《KesSharding 使用指南》