- 1、本文档共39页,可阅读全部内容。
- 2、有哪些信誉好的足球投注网站(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
查看更多
FastData DLink
实时湖仓引擎
架构设计与实践
QCon 2023全球软件开发北京大会
滴普科技 DLink SE / 杨维亮
Will
自我介绍
杨维亮
@Deepexi-FastData产品线-DLink SE
专注于大数据与数据库内核领域。曾在华为2012实验室高斯部参与
QCon 2023全球软件开发北京大会
自研分布式内存数据库的架构设计与开发。对分布式架构、数据库
内核、云原生数仓有深入的理解和实践
当前负责DLink产品的架构设计以及核心技术的预研工作
目录
1)DLink 架构介绍
2 ) DLink 核心功能
QCon 2023全球软件开发北京大会
3 ) DLink 落地实践
4 ) DLink 未来规划
DLink 架构介绍
QCon 2023全球软件开发北京大会
DLink 产品架构
数据工程师 数据分析师
数据源 DLink 实时湖仓引擎 分析和应用
服务层 用户空间 数据探查 数据开发 数据分析
业务库
计算层 OLAP引擎 BI
流批一体引擎
(联邦查询/多维分析/物化视图 )
事件流
数据 技术
统一Catalog 分享服务 数据安全/权限
QCon 2023全球软件开发北京大会
集成 元数据
报表
DCT
API/SDK
文件/块 语义 中间结果 索引 冷热
加速层
缓存 缓存 缓存 缓存 加速
数据科学
图形/视频/音频 存储层 开放数据格式 索引 多级分区
物联网IOT 云端 机器学习
S3/OSS
• 实时获取 + 事件订阅
DLink 实时湖仓架构 • 湖仓实时/流式 join
• 分钟级数据延迟
实时数仓 / 离线数仓
您可能关注的文档
- Android大型原生应用性能优化实践.pdf
- CLIP 模型在线上大规模部署的最佳实践.pdf
- Cloud IDE 在美团从 0 到 1 落地实践.pdf
- EtLT场景下的数据集成平台Apache SeaTunnel.pdf
- FinOPS 从概念到落地.pdf
- KMM 技术在移动 App 开发中的探索与实践.pdf
- OPPO 全球混合云建设之路 .pdf
- Prometheus大规模业务监控实战.pdf
- QCon 大会内容策划思路.pdf
- QCon-OpenSumi 演进之路-云研发背景下的应用与实践.pdf
- 2024年江西省寻乌县九上数学开学复习检测模拟试题【含答案】.doc
- 2024年江西省省宜春市袁州区数学九上开学学业水平测试模拟试题【含答案】.doc
- 《GB/T 44275.2-2024工业自动化系统与集成 开放技术字典及其在主数据中的应用 第2部分:术语》.pdf
- 中国国家标准 GB/T 44275.2-2024工业自动化系统与集成 开放技术字典及其在主数据中的应用 第2部分:术语.pdf
- GB/T 44285.1-2024卡及身份识别安全设备 通过移动设备进行身份管理的构件 第1部分:移动电子身份系统的通用系统架构.pdf
- 《GB/T 44285.1-2024卡及身份识别安全设备 通过移动设备进行身份管理的构件 第1部分:移动电子身份系统的通用系统架构》.pdf
- 中国国家标准 GB/T 44285.1-2024卡及身份识别安全设备 通过移动设备进行身份管理的构件 第1部分:移动电子身份系统的通用系统架构.pdf
- GB/T 44275.11-2024工业自动化系统与集成 开放技术字典及其在主数据中的应用 第11部分:术语制定指南.pdf
- 中国国家标准 GB/T 44275.11-2024工业自动化系统与集成 开放技术字典及其在主数据中的应用 第11部分:术语制定指南.pdf
- 《GB/T 44275.11-2024工业自动化系统与集成 开放技术字典及其在主数据中的应用 第11部分:术语制定指南》.pdf
最近下载
- 消防控制室工作方案与消防流程.doc
- 幼儿园课件:《食品安全我懂得》.pptx
- 金融投资证券 - 金融投资证券 - 期权、期货和其他衍生品第十版答案手册Options,Futures,andOtherDerivatives-10th-JohnHull&Solutions.pdf
- ×××工程项目建设监理规划(房建).doc
- 脱硫脱硝设备现场安装方案.pdf
- 增强驾驭风险能力_提高科学执政本领(ppt46页).ppt
- 体操头手倒立教学教案.doc VIP
- 242个国家中英文名称对照.xls VIP
- 毕业设计(论文)--某商住楼工程量清单与招标控制价编制.doc
- 毕业设计(论文)--学生公寓楼工程量清单和招标控制价编制.doc
文档评论(0)