网站大量收购闲置独家精品文档,联系QQ:2885784924

2024准实时数据平台架构.docx

  1. 1、本文档共23页,其中可免费阅读7页,需付费69金币后方可阅读剩余内容。
  2. 2、本文档内容版权归属内容提供方,所产生的收益全部归内容提供方所有。如果您对本文有版权争议,可选择认领,认领后既往收益都归您。
  3. 3、本文档由用户上传,本站不保证质量和数量令人满意,可能有诸多瑕疵,付费之前,请仔细先通过免费阅读内容等途径辨别内容交易风险。如存在严重挂羊头卖狗肉之情形,可联系本站下载客服投诉处理。
  4. 4、文档侵权举报电话:400-050-0827(电话支持时间:9:00-18:30)。
查看更多

准实时数据平台架构演进

2024

目录

准实时数据平台

架构演进实践

实时数据湖架构

数据服务总线实践

未来规划

准实时数据平台

准实时数据平台

特点 ?问题

Kafka存储分层

(贴源、标准、发布)

内置了很多业务的数据处理逻辑

(Spark、Flink、MR)

实时数据平台计算资源平台

维护了过多的业务处理逻辑(需要了解不同业务的逻辑,无法在平台建设上投入更多的精力)

平台组件过多,涵盖了数据的导入、消息存储、计算、调度等方面,导致平台定位不够清晰

架构演进实践

架构演进实践

架构演进实践

实时数据湖

实时数据湖

数据服务总线

Schema解耦

SDK封装

可观测性可视化

文档评论(0)

互联网资料整理 + 关注
实名认证
服务提供商

企业信息管理师持证人

新能源集控中心项目 智慧电厂建设项目 智慧光伏 智慧水电 智慧燃机 智慧工地 智慧城市 数据中心 电力行业信息化

版权声明书
用户编号:6011145050000024
领域认证该用户于2023年02月15日上传了企业信息管理师

1亿VIP精品文档

相关文档