【精品】数据中台促进企业数字化转型.docx

智慧

智慧IT

数据中台促进企业数字化转型

技术创新，变革未来

什么是数据中台

企业数字化转型解决方案

解决数据“存”、“通”、“用”、“智”难题

一分宿式据计算懂控术+十年经分远淀，

一

根据密户行业是身完制一站式当唇中台方，基于“互联网+”时代的据价值愿考，助方企业

数字化，提升企业竞争力!“让藜国产生价值化

什么是数据中台

数据治理数据中台定位：做为企业全域数据的共享能力中心，旨在提供数据采集、数据模型、数据计算和萃取、数据治理、数据资产、数据服务等全链路的一站式产品+技术+方法论服务，构建面向业务应用的数据智能平台

数据治理

数据计算和萃取

数据资产

数据服务

数据中台

数据采集

数据模型

数据中台的价值

全面梳理企业数据，构建全域数据中心

数据资产管理在线化，盘活企业数据资产

落地战略和组织保障，培养业务创新的土壤

通过业务的不断滋养

打造业务和数据的闭环

数据中台的架构

战略决心

●决策管理层“大中台、小前台”战略创新的决心

●驱动组织和流程进化，构建全域打通的数据中台

●协调业务部门和技术部门，中台战略的落地重于设计

人才●降低大数据的技术门槛投入●在线化知识沉淀和传承

人才

●降低大数据的技术门槛投入

●在线化知识沉淀和传承

●“方法论+工具保障+合作厂商”降低对高端人才的依赖

工具

保障数据

开发套件

●分布式计算存储调度架构

●企业级数据仓库+实时流计算

●覆盖大数据全生命周期的一站式可视化平台

DI应用

数据

数据治理套件

实时流计算●事件驱动●毫秒级

企业级数据仓库

智能计算

●机器学习

●深度学习

数据应用层ADS

●公共维度模型层CDM

●操作数据层ODS

分布式大数据计算引擎

数据中台的实施

方法论产品+工具实施流程

整体规划，分步实施，数据中台是一个不断循环、反馈而使系统不断增长与完善的过程，这是区别于系统生命周期法的主要特点

大数据分布式计算引擎、实时流计算引擎、多租户安全隔离、多集群统一管理、数据开发套件、数据治理套件、数据应用引擎等

一整套体系化的数据中台建设实施流程，包括需求调研、需求分析、架构设计、数据与应用开发、部署和测试运维等

数据中台与数据仓库

数据开发一站式

数据开发一站式传统数仓往往将ODS、EDW和ETL开发切割到不同厂商工具实现；数据中台则主张一站式可视化数据开发，借助分布式技术的力量简化数据加工处理的过程

传统数仓以单机关系型数据库离线分析为

主；数据中台以分布式引擎架构，同时支持离线计算/实时计算/即时计算/智能计算

数据资产在线化传统数仓的数据管理和治理，往往花费

数据资产在线化传统数仓的数据管理和治理，往往花费大量精力，最终形成的是离线的规范和文档；数据中台则强调元数据管理统一入口的自动化和数据资产管理的在线化

2传统数仓以业务数据库的结构化数据为主；数据中台涵盖业务数据、日志数

2

据、行为埋点数据、loT数据、爬虫数据、外部数据等

数据应用创新

数据应用创新传统数仓以某个业务主题的BI报表和决策支持为主，目的性单一，烟囱式建设；数据中台则主张全域数据打通数据孤岛，释放业务方数据应用创新的能量

3传统数仓往往采用自顶向下的建设模式，以明确的业务分析驱动，延续性低；数据中台采用自底向上的方式，结合业务需求变化不断迭代升级

3

数据中台模型

数据中心架构

数据中心架构

数据应用数据化运营可视化大屏舆情监控精准营销个性化推荐

基础服务分析引擎大屏引擎数据应用引擎

基础服务

分析引擎大屏引擎

集群部署

智能数据仓库主题域用户主题域交易主题域商品主题域

智能

数据仓库主题域

用户主题域

交易主题域

商品主题域

数据治理套件

数据质量

数据地图

数据模型

运维监控

数据集成实时任务开发

业务中台实时数据无缝接入

业务中台

实时

任务运维离线任务开发

多集群管理

全域

数据计算引擎数加Hortonworks

数据计算引擎

数加HortonworksEMR

数据源RDBMS日志文件FTPHBaseDT.Trace爬虫

基于企业级CDH版本数据中心集群平台--集群监控，预警，开发，任务调度

clouderamanagerCl