- 1、本文档共14页,可阅读全部内容。
- 2、有哪些信誉好的足球投注网站(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
数据中台应用技术方案(3)
建设路径
数据中台建设三板斧
•如何建设数据中台
把建数据中台比作是盖房子,设计图纸就是数据中台建设的方法论;
工具是数据中台的支撑技术;施工队伍就是数据中台的组织架构。
这三者缺一不可。
数据中台的建设一定要结合落地场景,可以先从从一些小的场景开始,但是
规划一定是要有顶层设计的。
原则:初期“小而美”,后面“大而全”!
数据中台建设三板斧
•业界公认的核心方法论
在2016年,阿里巴巴就提出了数据中台建设的核心方法论:OneData和OneService。
OneData的话,就是所有数据只加工一次。
OneData体系的目标是构建统一的数据规范标准,让数据成为一种资产,而不是成本。资产和成本的差别
在于资产是可以沉淀的,是可以被复用的。成本是消耗性质的、是临时的、无法被复用的。
在阿里巴巴的方法论基础上,增加了OneModel。
模型是链接数据和服务的桥梁
模型扩展业务和管理属性
元数据不具备模型的作用
经过几年,很多公司都进行了实践,但很难找出一个准确的定义去描述这些方法论
数据中台建设三板斧
•数据中台支撑技术
技术支撑体系覆盖了数据中台建设的整个过程,配合规范化实施,就可以搭建出一个数据中台
多项技术、多个产品,多个供应商,实现业务数据治理
打通和技术统一是数据中台项目落地时规划和自助取数自助分析网易有数网易大屏标签工厂
选型的原则。
指标系统
统一技术栈,基于微服务架构搭建支撑平台是
优选。数据服务
模型是各个产品业务打通的基石,可见模型对数据质量成本优化
于数据中台的重要作用。数据传输离线开发实时开发数据测试任务运维
中心中心中心中心中心
数据地图数仓设计
流程协作与通知中心
监控部署运维诊断权限访问控制系统项目用户管理系统元数据中心
好用的工具,可以让数据中台建设事半功倍Hadoop
数据中台建设三板斧
•组织架构
数据中台提供的是一个跨业务部门共享的公共数据能力,所以,承担数据中台建设职责的部门一定是一个独立于业务线的部门。
数据中台的组织定位是:懂业务,能够深入业务,扎根业务。
数据产品部门:负责数据中台、数据产品的体系规划、产品设
计、规范制定、应用效果跟进,指标口径的定义和维护(有的数据产品与技术部门(数据中台组织部门)
部门是由分析师管理)。
数据平台部门:负责研发支撑数据中台构建的产品,例如指标
系统、元数据中心、数据地图等。
数据开发团队:负责维护数据中台的公共数据层,满足数据产
数据产品团队数据平台团队数据开发团队应用开发团队
品制定的数据需求。
应用开发团队:负责开发数据应用产品,比如报表系统、电商
中的供应链系统、高层
您可能关注的文档
- 【质量效能】项目名称-质量保证计划.docx
- 【数据安全】数据分级分类管理方案.pdf
- 【质量效能】大规模团队项目管理体系建设实践.pdf
- 【数据安全】剖析数据传输的安全难题.pptx
- 【数据安全】企业内部安全事件处置实践分享.pptx
- 【数据安全】数据要素化下数据安全方案.pptx
- 【数据安全】行业数据安全.pptx
- 【数据安全】隐私计算核心技术架构与行业最佳实践.pptx
- 【数据治理】FlinkCDC新一代数据集成框架.pptx
- 【数据治理】数据隐私治理实践.pptx
- GB/T 39560.10-2024电子电气产品中某些物质的测定 第10部分:气相色谱-质谱法(GC-MS)测定聚合物和电子件中的多环芳烃(PAHs).pdf
- 中国国家标准 GB/T 39560.10-2024电子电气产品中某些物质的测定 第10部分:气相色谱-质谱法(GC-MS)测定聚合物和电子件中的多环芳烃(PAHs).pdf
- 《GB/T 39560.10-2024电子电气产品中某些物质的测定 第10部分:气相色谱-质谱法(GC-MS)测定聚合物和电子件中的多环芳烃(PAHs)》.pdf
- GB/T 39560.302-2024电子电气产品中某些物质的测定 第3-2部分:燃烧-离子色谱法(C-IC)筛选聚合物和电子件中的氟、氯和溴.pdf
- 中国国家标准 GB/T 39560.2-2024电子电气产品中某些物质的测定 第2部分:拆解、拆分和机械制样.pdf
- 中国国家标准 GB/T 39560.302-2024电子电气产品中某些物质的测定 第3-2部分:燃烧-离子色谱法(C-IC)筛选聚合物和电子件中的氟、氯和溴.pdf
- GB/T 39560.2-2024电子电气产品中某些物质的测定 第2部分:拆解、拆分和机械制样.pdf
- 《GB/T 39560.2-2024电子电气产品中某些物质的测定 第2部分:拆解、拆分和机械制样》.pdf
- 《GB/T 39560.303-2024电子电气产品中某些物质的测定 第3-3部分:配有热裂解/热脱附的气相色谱-质谱法(Py/TD-GC-MS)筛选聚合物中的多溴联苯、多溴二苯醚和邻苯二甲酸酯》.pdf
- 中国国家标准 GB/T 39560.303-2024电子电气产品中某些物质的测定 第3-3部分:配有热裂解/热脱附的气相色谱-质谱法(Py/TD-GC-MS)筛选聚合物中的多溴联苯、多溴二苯醚和邻苯二甲酸酯.pdf
文档评论(0)