大数据架构规划PPT课件.pptxVIP

大数据应用架构和演进路线大数据架构规划PPT课件全文共20页，当前为第1页。目录一、产品需求理解和整体规划二、演进路线三、开发及运营能力四、产品运行能力大数据架构规划PPT课件全文共20页，当前为第2页。可视化能力视图分析平台能力构建数据开发、可视化产品开发诸葛决策支持鹰眼……PC产品门户可视化APP组件控件开发产品页面开发可视化产品开发管理平台控件开发组件开发权限管理组件实例化页面组装开发者前台可视化产品组装管理者后台控件、组件、产品管理公共中台服务生态运营管理指标服务开发与封装指标服务管理系统数据服务平台服务销售流量会员指标计算服务API服务开发与封装指标审核服务管理……财务金融物流指标管理服务服务运维与监控数据模型开发数据查询引擎指标库模型路由管理应用指标库统一视图DPA层模型SOR层模型Hbase RKKylin元数据管理平台Hive SQLSpark SQL大数据架构规划PPT课件全文共20页，当前为第3页。整体应用架构图产品运行能力开发及运营能力数据服务能力诸葛前端门户产品展示前端产品展示前端运营后台系统社区交流产品专区主页配置产品页面监控分析产品页面用户分析社区管理自助分析开发管理平台开发者前台管理者后台开发管理服务中台组件、产品性能监控服务指标管理指标服务管理分类标签管理指标服务浏览组件管理服务组件市场服务组件管理产品组装组件市场管理产品市场管理产品管理服务权限管理服务元数据管理平台产品管理监控分析监控分析权限管理指标审核数据封装平台服务运维管理开发管理数据封装服务公共服务指标管理服务指标服务浏览指标服务开发服务测试验证标准指标服务组合指标服务指标计算服务日志监控指标库模型数据模型层高速数据查询引擎Spark SQL明细数据表（SOR层）分业务模型（轻度汇总）统一视图（高度汇总）应用指标库（DM层）数据模型元数据定义Kylin大数据架构规划PPT课件全文共20页，当前为第4页。建设优先级低优先级高优先级诸葛前端门户产品展示前端产品展示前端运营后台系统高优先级社区交流产品专区主页配置产品页面监控分析产品页面用户分析社区管理自助分析开发管理平台高优先级高优先级开发者前台管理者后台开发管理服务中台组件、产品性能监控服务指标管理指标服务管理分类标签管理指标服务浏览组件管理服务组件市场服务组件管理产品组装组件市场管理产品市场管理产品管理服务权限管理服务高优先级元数据管理平台产品管理监控分析监控分析权限管理指标审核数据封装平台高优先级服务运维管理开发管理数据封装服务公共服务指标管理服务指标服务浏览指标服务开发服务测试验证标准指标服务组合指标服务指标计算服务日志监控指标库模型数据模型层高速数据查询引擎高优先级Spark SQL明细数据表（SOR层）分业务模型（轻度汇总）统一视图（高度汇总）应用指标库（DM层）数据模型元数据定义Kylin大数据架构规划PPT课件全文共20页，当前为第5页。当前数据分析产品开发模式缺点：数据开发缺少元数据平台支撑，指标的口径管理比较孤立不同数据分析产品定制数据指标，数据指标没有服务化，无法共享；导致数据在不同产品间的一致性差异页面展示没有组件化，页面模块无法重复利用产品优化通道没有建立，缺少持续改善和提升的输入意见优点开发模式比较简单，容易掌握小规模数据分析产品开发有优势产品部署和发布页面产品开发数据开发大数据架构规划PPT课件全文共20页，当前为第6页。数据分析产品开发新生态标准数据服务的开发流程数据分析产品开发流程标准数据服务发布组装产品及发布页面组装：组件的数据实例化构建标准指标数据服务引用标准数据服务非标数据服务数据组件库：基于控件开发和封装构建统一业务视图构建标准指标库汇总模型的建设控件：数据表达的最小元素后端管理与运营监控与数据采集用户交流反馈需求与数据分析产品优化与改进大数据架构规划PPT课件全文共20页，当前为第7页。目录一、产品需求理解和整体规划二、数据服务能力三、开发及运营能力四、产品运行能力大数据架构规划PPT课件全文共20页，当前为第8页。标准指标设计标准指标定义11数据仓库标准指标ID指标名称/业务口径描述分析维度组合1指标的技术口径A指标库高度聚合表分析维度组合2轻度汇总表指标的技术口径B数据明细表分析维度组合n标准指标服务指标计算服务输入输出一、按ID、分析维度读取元数据服务指标ID指标名称数据描述/指标值列表二、按指标参数组合查询SQL分析维度组合业务口径三、调用数据计算引擎指标计算参数技术口径大数据架构规划PPT课件全文共20页，当前为第9页。系统及平台定位数据模型层： （持续建设中） 经过梳理和规整的数据表，数据描述实体和属性在元数据管理平台进行清晰而准确的管理；数据存储可以落在Hive、或者DBMS中数据封装平台：（系统新建） 1. 开发管理，基于指标技术元