企业大数据服务共享平台方案介绍.pptx

企业大数据服务共享平台方案介绍数字化企业云平台平台 · 让创新无限企业大数据平台建设的思考1IT厂商自服务大数据平台建设实践23IT厂商自服务大数据平台架构过程不可控缺乏统一监控、溯源手段定义不统一错误判断/开发数据不开放协作受限数据安全开放数据库安全堪忧分布杂乱形式多样/数据闲置处理缓慢周期过长缺乏共享目录难以发现可用数据开发困难依赖技术开发“大数据”的概念已经广为人知，但是如何管理大数据，如何更加有序的使用大数据依然缺少成熟体系架构和工具手段在大数据的“管”和“用”方面存在一系列关键挑战？1、如何在全寿期方便可控访问数据？2、数据查询技术开发，交付周期长？3、挖掘分析，专业性高，如何快速探索？用的不“畅”！管的不“准”！④“用”③“管”③“管”1、企业的标准数据模型是怎么样的？1、如何一张图看清数据全过程全景？管理－数据资产目录大数据分析应用管理－数据运营监控数据消费者数据查询分析深度挖掘2、企业有哪些数据资产可用（表、文件、三维设计）？2、如何管控数据质量与数据应用情况？②“存”①“采”大数据存储计算传统数仓大数据库3、企业有哪些数据服务可被调用？3、如何对数据资产变更全寿期管理？大数据采集 在传统信息系统架构模式下，各个组织或各个部门根据各自的业务需求的需要，在不同的时期不同的技术环境下建设出各自的信息系统系统，从而出现了一个个“孤岛”式应用。为了解决这些问题，企业不得不花费大量的时间和成本去修改、或者新开发、或者做集成，企业投入过多的精力专注与ETL、ESB、Hadoop等各种技术，这样一来企业最大的损失是时间机会成本。从关注技术到关注数据，是对价值本身的回归大数据服务共享平台由离散工具向服务平台转型传统数据共享交换，多种交换工具和多种交换方式并存，不易维护管理。服务平台数据共享交换，支持对多源、多类型数据共享交换的统一管控，帮助企业屏蔽底层技术平台的差异，保护投资。数据的获取方式由传统数据准备向自助数据准备转变传统数据准备时，业务人员要在 IT 人员开发过后才能拿到需要的数据。自助数据准备让业务人员能自己获取到所需的数据，大大减少了数据准备所需的时间。用快速的数据平台基础设施，为决策者提供任何想要的数据数据共享发布数据服务开发数据准备数据获取找到数据自助化业务元数据与技术元数据对接；自助化数据申请和订阅。D基于数据目录的数据服务开发；在线编辑数据模型，生成作业。提供数据自动化使用数据规范化数据服务标准应用方式；数据通道提供平台支撑。治理数据可视化基于数据地图运行态全链路监控；事前、事中、事后的数据质量检查。数据平台不仅仅是技术工具，更是重要的数据的运营平台通过数据服务共享平台，降低业务对技术依赖，充分发挥业务创新潜能传统数据管理创新数据管理开发实现业务模式需求数据部门业务业务业务自助开发技术辅助＋＋业务范围…分析应用1分析应用2分析应用n数据服务目录数据通道数据应用能力场景一：让用数据的所有人知道平台有什么数据资源管理 体系化，技术元数据 + 业务元数据 的方式，资源更容易发现。源 数据目录1111222233提供者管理者消费方数据迁移前置区 数据目录共享区 服务目录（开发视图）服务浏览，申请业务分类目录维护共享区服务注册目录获取，源信息注册1111数据转换加密/脱敏123消费方资源注册服务资源注册分配元数据自动获取元数据自动获取2222服务开发元数据扩展元数据扩展33消费方资源视图共享区 服务目录（业务视图）服务资源订阅/申请场景二：以需定产，数据随需而至规范资源管理过程，实现从需求- 设计-开发-发布的C2C闭环管理。申请数据转换加密/脱敏审批开发提供方消费方Web服务数据库服务消费方文件服务服务目录（开发）服务目录（业务）在线开发模板库作业调度离线开发发布申请/订阅准备工作消费方目录场景三：平台提供多种数据服务平台提供包括接口、文件和数据库的服务数据服务目录主题A服务A数据服务共享平台门户拉取服务B主题B推送服务C主题C服务D场景四：让用数据的人能得到想要的数据2需求分析143投资计划业主服务目录（业务）累计投资国拨资金项目信息年地址7开发56时间作业调度月项目类型政府投资项目开发项目主题申请审批消费方数据服务共享平台门户营销分析，需要公司前三年的销售合同信息1在服务目录有哪些信誉好的足球投注网站合同相关资源2政府投资项目消费方提交申请3资金主题管理员了解需求并审批4开发人员接收任务，按要求开发作业5发布数据字典管理员/运维人员作业调度6开发任务完成后，进行服务发布7场景五 ：从全局了解企业数据服务情况通过自动化采集，自动形成全数据链路，形成数据服务共享的全貌图场景六：自助式数据问题追踪消费方在应用过程中，发现数据质量问题消费方通过平台对实体进行血统分析，发现与其相关的上游数据通过血统分析定位可能的问题路径，分析并解决数据质量问题