59-数栖平台V5.0.0-产品白皮书.docx

数栖平台白皮书

一站式数据中台建设套件

文档版本：V5.0

1前言

以5G、IOT技术为引领网络基础设施和云计算、大数据技术为代表的算力基础设施，这两类坚实的信息化基础设施已经推动中国信息化进入了数字化、平台化阶段。

那么在这第三次信息化浪潮中，如何将体量巨大且在持续增?的数据在全社会范围内释放红利，成为对其他生产要素起到效率倍增作用的新动能，放大劳动力、资本等生产要素在社会各行业价值链流转中的价值?

数澜科技在与产业、学术和政府深入探讨后认为，首先要在认知、理念上将“数据”视为继“蒸汽”和“电力”之后一个全新根本性变革要素来研究，其次要重视围绕数据在数字经济宏观层面的各行业立体应用实践探索，最重要的就是扎实建设好相对于网络基础设施、算力基础设施的数据应用基础设施——数据中台，形成各个微观组织自己持续把数据用起来的能力。

因此，以数据中台为代表的数据应用基础设施将成为推动中国进入共享化、空间化的数据价值流通阶段的关键，这恰恰是目前数据要发挥要素的效率倍增最缺乏的。

2认识数据中台

2.1数据中台是什么

数澜科技认为，数据中台是一套可持续“让企业的数据用起来”的机制，是一种战略选择和组织形式，是依据企业特有的业务模式和组织架构，通过有形的产品和实施方法论支撑，构建的一套持续不断把数据变成资产并服务于业务的机制。

运用数据中台这套机制，企业可以对现有业务分析决策，也可以挖掘、预测未来发展的趋势，倡导新的商业或业务模式，引领行业的发展与进步。

数据资产是数据中台的核心，“存”、“通”、“治”、“用”是数澜科技构建数据资产的主要实施方法论：

“存”：将业务产生的数据统一存放，形成最原始的数据资源；

“通”：对数据资源汇聚、开发，形成可供给业务使用的数据资产；

“用”：构建符合业务需要的服务，并嵌入系统应用中供业务使用；

“治”处于“存”、“通”、“用”三者之中，通过“治”定义数据的标准、监督数据的质量、把控数据的安全，是数据中台的核心环节。

通过存、通、治、用往复循环，践行业务数据化、数据资产化、资产服务化再到服务业务化的数据价值闭环，让企业的数据持续用起来，这就是数据中台。

2.2数据中台具备的能力

正如上文所述，数据中台这一机制，除了实施方法论，还需要有配套的产品来执行。这类产品通常要具备某些特定的能力，并根据企业的业务形态进行拼装、组合，维持数据中台这一机制。根据实施方法论，构建数据中台工具或产品，要具备以下能力：

数据交换：多个数据终端设备之间，为任意两个设备建立数据通信临时互连通路。

数据标准：对企业数据进行定义、组织、监督和保护进行标准化管理。

数据开发：通过设计、编码、测试等环节，对数据进行加工、处理，使其便于理解、使用。

数据资产：对企业拥有或控制的数据及相关资源进行统一管理与价值评估。

数据安全：为企业数据建立和采用技术和管理的安全保护，防止遭到破坏、更改和泄露。

数据服务：无缝对接数据资源，为企业上层应用提供统一的查询、分析、决策、预测等能力。

数据应用：基于行业场景需求，提供数据分析、可视化、有哪些信誉好的足球投注网站、推荐等功能，辅助业务决策。

数澜科技为实践数据中台方法论，开发了一套数据中台建设套件——数栖平台，并且经过四年的多行业实践与锤炼，将其打磨成为了数据中台最佳实践平台。

3数据中台最佳实践平台——数栖平台

数栖平台深度封装数据交换、数据开发、数据资产、标签中心、数据共享工具，构建企业数据中台的数据资产化体系和资产服务化体系，打造企业数据资产管理及数据共享开放能力，解决企业数据存、通、治、用的问题，提升企业数据治理及应用效率，赋能企业数字基础建设，让企业的数据用起来。

数栖平台整体功能架构如下图所示：

3.1数据交换：多源异构数据交换工具

数据中台建设的第一个过程是数据汇聚，数栖平台提供了多源异构数据交换工具：数据交换。

数据交换支持离线数据同步、实时数据同步、非结构化数据同步、整库数据同步、监控告警、DataPipeline、数据计量、数据审计，与大数据开发套件深度融合，具备可视化向导模式和脚本模式两种配置方式，完全复用开发套件的调度能力和同步任务的监控、报警等运维能力。

数据交换支持20种以上多源异构数据的稳定高效传输，提供离线、实时数据的批量、增量同步，保证高速、稳定的数据交换能力，适配各种复杂网络的数据传输，保障异构网络系统的数据互联互通。

3.2数据开发：一站式大数据开发套件

当数据进行聚合后，数据仍然处于零散状态，无法直接被上层应用使用，此时需要对数据进行汇聚加工。数据管理和开发人员需要在数栖平台上建立数据中心，进行数据深度加工。

数据开发为数据开发者提供一站式的可视化集成开发环境，可以进行批数据离线开发、流数据实时开发、数据挖掘算法开发、数据服务开发等，代码管理与协作功能让数据开发可以多人同时进