第七期 湖仓一体引擎 DLH-5W101-整本手册.pdf

大数据平台探索之旅

第七期：湖仓一体引擎DLH

背景：某企业希望把自己生产经营中的所有相关数据都完整保存下来，方便后续进行分析、挖掘和利

用，为此公司大牛针对此项业务分析，经过一番探讨，湖仓一体是大家一致认同的最佳选择，让我们

一起看看他们说了什么……

20:135G

大数据技术交流群（237）

数据开发工程师Mary

数据仓库仅支持批及交互式数据处理方式，不支持混合负载及

存算分离，且采用SharedStorage架构，扩展性差。

数据开发工程师Bob

数据湖无统一设计Schema模型，且不支持SQL及事务。

数据开发工程师Jon

湖仓一体支持批、交互式、流处理、AI多样化数据处理；统一元

数据管理；统一SQL接口，支持ACID事务；支持混合负载及存

算分离，资源按需分配，可扩展至上万台规模。

什么是湖仓一体

定义：可扩展的大数据存储、处理、分析的基础设施；以数据为导向，实现任意来源、任意规模、

任意类型数据的全量获取、全量存储、多模式处理与全生命周期管理；并通过与各类外部异构数据

源的交互集成，支持各类企业级应用。

可扩展的大数

据处理能力

足够数据存

储能力

多样化的

分析能力

数据维持原

始格式

具备完善的

数据获取/发

存储任意类布能力

型数据

具备完善的数

据生命周期管

理能力

湖仓一体

H3C湖仓一体化引擎

新华三在湖仓一体领域深入探索，结合离线分析、实时分析、流式分析、机器学习、图计算等技术，

自研DLH湖仓一体化引擎，可通过单一组件满足多种不同查询场景。

UIJDBCODBC管理

数据目录

统一SQL入口

查

RBOCBO

询SQL语法解析SQL语义分析基于规则优化基于成本优化安全管理