数据中台架构规划方案.pptx

数据中台架构规划方案;

企业数据应用趋势及愿景;;;;;

多维视角看数据中台架构规划;;

数据产生

数据连接

信息流

价值链

数据采集清洗

数据定义

数据消费;;;;;;;;;;;;;;;

数仓

规划

建模

架构

指标

构建;;;;;

数据应用;;;;;;

存储策略;

集群位置;

集群位置;

集群位置;

CDH5;

两种方案的区别：在性能都能保证的情况下，20节点以上规模集群比20个节点以下规模集群多了1个工作节点，1个管理节点。

建议使用20个节点部署配置的理由：

1.提前超配，并不能带来显著的性能提升，但是成本会增加很多（3个集群需要增加6个节点，含硬件+软件License成本）；

2.后续随着集群规模扩大，可以非常容易的增加主节点和管理节点。

20个节点内的CDH集群的配置（建议配置）20~200个节点内的CDH集群的配置;

两种方案的区别：在功能满足的情况下，单Master集群只部署1台主节点进行容器管理和编排

建议使用多Master部署配置的理由：

1.在生产环境需要更充分考虑性能因素，比如稳定性和高可用性，所以建议采用多Master节点部署方案；

单Master集群部署多Master集群部署（建议方案）;

非功能性需求;

汇报目录

企业数据应用趋势及愿景

多维视角看数据中台架构规划;;;;

谢谢