移动综合分析系统思路V35.pptVIP

。 * * * 整合模型是整个系统建设的基础，因此，首先要对模型部分进行讨论，在模型中，又以数据模型，为基础，服务模型是对数据模型的业务封装，儿指标模型则是分析模型的基础，有了完善的数据服务和指标模型体系，分析模型的搭建将变得十分简单。 * * * * 数据共享过程，需要对数据共享的目录及其参数进行定义，包括： 目标系统 共享方式 数据承载方式 访问频率 访问允许时段 等 * * * * * 整合模型是整个系统建设的基础，因此，首先要对模型部分进行讨论，在模型中，又以数据模型，为基础，服务模型是对数据模型的业务封装，儿指标模型则是分析模型的基础，有了完善的数据服务和指标模型体系，分析模型的搭建将变得十分简单。 * * * * * 自动规则支持同步业务、同步网元、同步方向、同步数据等的规则设置。 人工规则支持同步业务、同步网元、同步方向、同步数据、同步人工干预流程等的规则设置。 IT系统中有用户订购信息，但是网元上没有，第一时间以IT系统为准向网元进行同步，减少用户投诉。 IT系统中没有用户订购信息，但是网元上有，需通过客服向用户进行业务订购确认，在用户确认后，再进行IT系统或者网元数据的同步处理。为了争取潜在用户，增加业务收入，尽量通过一些市场策略（如前期为试用）争取用户进行订购，在IT系统进行订购信息的同步。在确认用户不准备进行订购后，在网元进行订购信息的同步。 * * 数据的收敛构架 数据收敛 数据抽取 数据整合准备 数据加载 数据模型 源系统模型 抽取规则 加载规则 原始数据 管理人员 异常处理 数据汇总 数据转换 数据检查 任务调度 整合任务 调度规则 临时数据 映射规则 异常处理规则 异常日值 异常数据 检查规则 检查日志 管理人员 汇总数据 核心数据 转换后正常数据 检查要求 检查后正常数据 人工调度指令 设置规则 原始数据 原始数据 转换数据 数据异常 数据异常 数据异常 业务系统 异常报告 数据的收敛过程序列图及人工过程 对数据收敛任务的调度规则进行人工的配置和管理 对标准模型以及映射关系的管理和维护，可能需要人工进行干预 数据整合过程中，需要对一些关键环节（如接口数据导入，数据转换，数据加载过程中）进行人工复核、校验 数据整合过程中，可能需要人工进行异常处理 抽取阶段 结果数据 转换阶段 结果数据 检查阶段 结果数据 整合数据 根据规则进行 数据转换 业务源系统 抽取源系统数据 聚合任务调度 任务处理结束， 发送信息给任务调度程序 分析异常，做出处理 分析异常，做出处理 管理员 处理异常 加载阶段 结果数据 分析异常，做出处理 启动聚合任务 根据规则进行 数据检查 加载脚本 抛出异 常日志 监控任务执行情况 处理异常 加载到目标数据库 抛出异 常记录 抛出异 常日志 分析异常，做出处理 数据共享需求分析 数据共享 数据共享构架 共享规则配置 共享权限配置 共享数据提供 数据服务模型 目标系统模型 数据共享规则 数据访问规则 数据访问日志 数据服务实例 管理人员 访问权限 共享规则 数据服务模型 目标系统数据模型 数据服务模型 目标系统数据模型 目标系统 提供数据 记录日志 提供数据 业务支撑系统 网络运维综合分析系统 数据共享方案 数据共享设计方案 1）业务系统应用采用数据服务调用方式共享据 2）业务系统采用直接访问数据视图等方式共享数据 3）通过数据库复制、FTP文件等技术主动推送共享数据 4）通过基于EAI（消息中间件、CORBA通道等）准实时同步数据 数据应用 数据存储 数据服务 数据视图 数据库 (3) FTP文件 （1）服务调用 （2）访问数据视图 （3）数据库复制 应用服务 (4)基于EAI准实时数据同步 数据共享技术分析 服务类型 服务特点 技术要求 实现技术形式 实时数据查询服务 小数据量 同步应答 实时 支持大规模并发 支持动态负载均衡 支持分布式事务处理 满足实时高性能要求 EJB服务 Web Service 其他基于交易中间件开发服务 …… 准实时数据同步（复制）服务 小数据量 同步或异步应答 准实时 支持消息队列管理 支持订阅/发布机制 支持跨平台、进程间通信 基于EAI JMS 数据库触发器、数据库复制功能 基于其他消息中间件 批量数据传输服务 大数据量 异步应答 定时 支持FTP、TCP/IP等主流传输协议 支持断点续传 支持传输差错控制 文件传输 接口表/视图 目录 模型 系统核心能力 数据模型的管理 数据服务的组织 指标系统的建立 数据的有效收敛 数据的有效共享 数据质量的管控 关键问题 数据质量金字塔 违反一致性约束 违反主外键关系 丢失数据 数据超出值域范围 数据类型不匹配 数据日期格式错 业务规则 统计