
高性能:系统必须保证批处理作业能在 2 小时内完成,数据卸载作业则需在半小时内完成,以确保数据处理的时效性。
高可用:数据库应具备原生的高可用性,即便在硬件发生单点故障时,也能无感知地继续提供服务。此外,应具备跨数据中心的容灾方案,以灵活适应不同业务场景下对高可用性的需求。
高扩展性:满足业务系统数据合规的要求和海量在线数据的服务能力:数据库需具备透明横向扩展能力,可根据业务需求灵活弹性扩展计算或存储能力,数据可实现自动透明再平衡。
安全可控:满足生产安全及行业合规需求:可实现灵活的权限管理,并满足行业合规要求,具备国产化上下游兼容能力。


上层应用由广发银行自主研发,数据库采用 TiDB,服务器为海光服务器的全栈国产化解决方案;
每日的数据入库包括离线和实时两部分,离线入库采用 Lightning local 模式完成数据快速入库;
批处理作业采用流式处理方式,利用并行能力满足数据加工需求;
下游平台的数据卸载采用 dumpling +SQL;
Oracle 历史数据迁移采用 Lightning 加载;
引入的 Lightning local 模式入库方案,相较于传统逻辑数据导入方式,实现了约 8 倍的性能飞跃;
创新的自定义分页并行数据删除方法,将删除效率提升了 70%,显著优化了数据处理流程;
批处理时间缩短至大约 1 小时,数据卸载仅需 7 分钟左右,大幅提高了数据处理速度。


/ 阅读推荐 /
银行核心背后的落地工程体系丨Oracle - TiDB 数据迁移详解


文章转载自PingCAP,如果涉嫌侵权,请发送邮件至:contact@modb.pro进行举报,并提供相关证据,一经查实,墨天轮将立刻删除相关内容。
评论
相关阅读
史诗级革新 | Apache Flink 2.0 正式发布
严少安
158次阅读
2025-03-25 00:55:05
NineData 社区版:从 MySQL 到 TiDB 数据复制新选择
严少安
144次阅读
2025-03-13 17:27:45
PingCAP 2025 校园招聘 | 开源领航,星耀前程
PingCAP
111次阅读
2025-03-27 09:55:55
2025w11 | 图数据库了解一下
严少安
62次阅读
2025-03-21 16:51:24
【TiDB 深圳地区交流回顾】大规模 TiDB 国产化替代在金融、跨境电商企业的最新实践!
TiDB Club
38次阅读
2025-03-10 10:29:44
国产数据库如何赋能智慧医疗?3.28 TiDB 与您相约宜昌 “医院云数智技术实践研讨及成果展示交流会”
PingCAP
32次阅读
2025-03-25 18:14:39
DBdoctor v3.3.0.2版本发布,新增Oracle索引推荐,强化TiDB审计日志功能
DBdoctor
32次阅读
2025-03-07 10:29:31
TiDB 观测性解读(一)丨索引观测:快速识别无用索引与低效索引
PingCAP
29次阅读
2025-03-12 10:23:21
国产数据库再获资本赋能,「九有数据库」完成A轮融资
严少安
26次阅读
2025-03-31 13:00:54
4月12日 TiDB 社区活动在南京!传统技术栈替换和 AI 浪潮正当时,面向未来的国产数据库如何选择?
小周的数据库进阶之路
24次阅读
2025-03-25 10:37:57