经分数据模型层.ppt

数据分层架构-Modified 数据架构—数据分层说明-Modified 经营分析系统数据模型层级 2009年12月 （二）数据模型完善1-Modified 修订目标 规划：将ODS与DWD分离，明确ODS为生产系统模型，统一各数据源数据口径 目标：在现有数据模型的基础上，完善数据模型，明确数据模型对3G、固网、融合业务的支撑，加强数据约束 STAGE ODS/DWD MID DM 生产系统 生产系统 ODS EDW DWA DM STAGE 现有数据模型层级 专题规划中数据模型层级 DWD 轻度汇总层 明细数据层 数据集市 运营数据存储 DW * 明确各层名称及功能 （二）数据模型完善2-Modified 修订目标 规划：将ODS与DWD分离，明确ODS为生产系统模型，统一各数据源数据口径 目标：在现有数据模型的基础上，完善数据模型，明确数据模型对3G、固网、融合业务的支撑，加强数据约束 STAGE ODS/DWD MID DM 生产系统 生产系统 ODS EDW DWA DM 现有数据模型层级 专题规划中数据模型层级 DWD 轻度汇总层 明细数据层 数据集市 运营数据存储 DW * 明确各层名称及功能 （二）数据模型完善3-Modified 修订目标 规划：将ODS与DWD分离，明确ODS为生产系统模型，统一各数据源数据口径 目标：在现有数据模型的基础上，完善数据模型，明确数据模型对3G、固网、融合业务的支撑，加强数据约束 STAGE ODS/DWD MID DM 生产系统 生产系统 ODS EDW DWA DM 现有数据模型层级 专题规划中数据模型层级 DWD 轻度汇总层 明细数据层 数据集市 运营数据存储 DW * 明确各层名称及功能 支撑DW的明细数据层 支撑准实时的跨系统查询与统计 支撑跨系统数据的批量计算 客户资料永久 详单1～3个月（如果承担详单查询,则需6个月） 其他12+1月 数据整合：统一数据模型、统一数据标准、统一数据视图 数据共享：统一准实时共享数据接口、对外数据提供 数据质量：数据稽核、质量管控 数据获取时间间隔：准实时/天/月 ODS 日：7+1日 月：1+1月 客户资料永久 详单24+1个月 其它36+1个月 月、年汇总5年，超期离线存储 日汇总36+1个月 衍生数据12+1个月 同应用生命周期 在线存储周期 （省分参考） 与业务系统保持一致 临时存储从源系统抽取的数据 数据获取时间间隔：准实时/天/月 STAGE 支撑DW的轻度汇总层 支撑专业人员自助取数 作为焦点应用的数据源 支撑趋势分析与问题发现 支撑深度数据挖掘和统计分析 明细数据，与ODS粒度相同 统一数据模型 统一数据标准（维度/指标等） 明细数据的长期存储，满足最细粒度的查询需要 数据获取时间间隔：天/月 明细 数据层 (DWD) 支撑DM数据集市 支撑业务人员自助取数 作为焦点应用的数据源 支撑趋势分析与问题发现 支撑深度数据挖掘和统计分析 与源系统的业务互动 统一数据模型，按分析主题域划分 数据按分析主题域进行多维度汇总 扩展核心业务实体的衍生信息，如客户视图、产品视图、渠道视图、流失预测等 统一数据标准（维度/指标） 轻度汇总数据的长期存储，满足用户粒度的查询需要 数据获取时间间隔：天/月 轻度 汇总层 (DWA) DW 支持KPI（如总部上传日月报）、省分或集团报表、多维分析等经分应用 支撑部门和地市分析应用需求 面向经分应用构建数据模型 具有独立的存储区域，支撑经分应用开发 固化成熟经分应用数据模型 部门和地市级数据集市 数据获取时间间隔：天/月 数据集市 (DM) 支撑应用 分层特征 　 CRM PRM Billing 综合结 算系统 OCS 综合缴费 卡系统 客服 系统 集成定单 管理系统 服务开 通系统 ……. 源系统 STAGE 数据仓库 DWD DWA DM 业务应用 报表 KPI 指标 焦点 应用 集市 应用 …… ETL ETL ETL ODS ETL DW 数据集市 数据接口 运营数据存储 ODS 明细数据层 (DWD) 轻度汇总层 (DWA) 数据集市 (DM) 多维应用数据 发展类 收入类 使用类 服务类 结算类 衍生数据 财务类 客户分群 流失预测 渠道视图 …… DW 信息层 汇总数据 发展类 使用类 收入类 财务类 结算类 服务类 客户视图 产品视图 KPI指标 上报指标 指标库 本地报表数据 集团报表数据 报表数据 地市数据集市 部门数据集市 数据集市 客户 主题域 产品/服务 主题域 计费/帐务 主题域 市场营销 主题域 网络/资源 主题域 合作伙伴 主题域 企业管理 主题域 事件 主题域 客户 主题域 产品/服务 主题域 计费/帐务 主题域 市场营销 主题域 网络/资源