暂无图片
暂无图片
暂无图片
暂无图片
暂无图片

数据架构(Data Architecture)

大数据真有意思 2021-08-18
2631

数据架构组成

  • 数据源、数据集成
  • 存储:分析型、消息系统
  • 计算:批处理、流处理
  • 调度:资源、作业
  • 业务流程

通用大数据架构

传统批处理架构

实时流处理架构

Lambda架构

Kappa架构

混合架构

批处理的结果汇聚到实时预测模型,除此之外和Lambda类似

流批统一

一套代码逻辑,一个7*24小时,一个对“历史数据”重算,除了代码或逻辑(API)统一之外,变化不大

文章转载自大数据真有意思,如果涉嫌侵权,请发送邮件至:contact@modb.pro进行举报,并提供相关证据,一经查实,墨天轮将立刻删除相关内容。

评论