暂无图片
暂无图片
暂无图片
暂无图片
暂无图片
浙江电信 Apache Doris 实战之路 - 喻志强.pdf
45
14页
10次
2025-04-03
免费下载
喻志强
浙江电信 大数据中
2024年10月
浙江电信 Doris 实战之路
2
浙江电信大数据平台建设历
2004 2010 2017 2021 2022
TD B
数据仓库数据集市应用
规模:20台
支持存储:400TB
建设DB2
数据挖掘集市应用
规模:8 台(IBM小型机)+18天玑
存储阵列:456TB
2016
建设内容:实时经分和网络大数据集群,
基于 CDH 构建人力、业务稽核、网管、
端到端应用、跨域分析等应用。
规模:700+
支持存储:20PB
建设内容: 由 Vertica 承接 TDDB2
的 B域数据仓库与数据集市应用。
规模:108 台
支持存储:2.5PB
日处理数据量:1.3TB
于中台开展作业、模型、报表迁移,
广
开发运营模式优化。
规模:20+ 台
建设内容:基于 SR 构建实时数仓,
提升实时战报、反欺诈等应用时效性,
OLAP
查询库。
规模:69 台
支持存储:1PB
2023
建设内容:基于电信自研 PaaS 翼
MR/TDP+Iceberg+Doris
仓一体架构进行 BMO 域数据统
汇聚。逐步转型为以自有人员为主。
规模:640+
3
MPP建设历程
Teradata DB2 Vertica
浙江电信2004 年建
数据仓库起,便开始采用
MPP 数据库
2010 年开始考虑建设
数据集市,同时因成本
等因素,建设 DB2 数
据库
2017 年因行式存储的 IO
瓶颈,对高性能 MPP 的
需求,引入 Vertica
(Teradata 和 DB2 随即
改造下线)
Impala
2019 因 Vertica 对实
时类应用支撑能力有限,
加上资源拥挤,开始尝
试开源 MPP 组件
浙江电信作为国内较早构建数据仓库系统的企业,是深度 MPP 数据库的使用者,商业化数据库产品从
Teradata 到 DB2 再到 Vertica,再到开源 Impala 组件。
of 14
免费下载
【版权声明】本文为墨天轮用户原创内容,转载时必须标注文档的来源(墨天轮),文档链接,文档作者等基本信息,否则作者和墨天轮有权追究责任。如果您发现墨天轮中有涉嫌抄袭或者侵权的内容,欢迎发送邮件至:contact@modb.pro进行举报,并提供相关证据,一经查实,墨天轮将立刻删除相关内容。