浅谈数据中台建设的价值与意义.pdfVIP

浅谈数据中台建设的价值与意义

摘要：近年，随着大数据时代的到来，越来越多的案例都在印证一个说法：

“数据是新的石油”。我们要做信息行业的“水电煤”，那么，我们搭建的数据

中台，就是希望扮演“发电厂”的角色。

关键词：数据中台；数据可视化；数据资产；数据归集；数据共享

一、数据中台建设必要性

随着公司业务发展，数据体量不断增加、内部及外部对数据衍生价值的需求

不断增长，而现有的以业务单元视角进行的数据建设管理体系，使各业务相互独

立，导致一些原本可以快速提供的业务服务，需要多重对接，耗费大量成本；一

些原本可以共用的服务，被不同部门重复建设；数据分析由底到上，独立计算，

指标重复，口径不统一。

传统的管理模式已经严重制约了公路服务能力的发展，信息化管理水平开始

出现三个严重的信息不对称问题：一是管理部门掌握了大量的出行数据信息（道

路监控、道路事件、道路管制等数据信息），缺少高效、方便让公众获取的发布

渠道；二是公众能够获取到的信息十分有限，仅从可变情报板、广播电台、呼叫

中心、短信等传统渠道获取的信息有限，并且存在严重的时间滞后问题，很多重

要的出行信息没有办法及时获取，在选择出行路径时还需要看运气的“原始”时

代。三是决策者虽然掌握了各类数据报表，但很难掌握各类数据报表之间的关联

性，无法准确作出预判，制定行动预案。

所以，一个数据中台的出现，不仅可以承担数据分析的压力，同样可以对业

务数据进行整合，也会不同程度的提高数据处理的性能，基于数据中台实现更丰

富的功能需求。

二、数据中台定义及作用

数据中台是指通过数据技术，对海量数据进行采集、计算、存储、清洗、加

工，同时统一标准和口径,实现企业大数据的统一、规范、安全、共享的数据组

织,以服务方式实现前台数据的应用。数据中台把数据统一之后，会形成标准数

据，再进行存储，形成大数据资产层，进而为业务提供高效服务。

（一）采集：统一采集多种源数据（业务数据库、日志、埋点、爬虫、IOT、

第三方等），统一设计数据模型和指标管理，服务管理部门全局把控，用数据化

决策，业务想法可建立模型快速试错；

（二）分析：面向服务提供丰富的数据工具，进行数据挖掘，服务业务部门

用于数据化分析、数据化运营、数据化创新；服务一线部门让员工学会数据化思

维、数据化说话、数据化服务；

（三）应用：结合业务情况，从数据驱动发起创新项目如个性化信息订阅、

流量预测、拥堵预测等多业态服务，让数据部门从IT(信息技术Information

Technology)到DT(数据处理技术DataTechnology)、从支持到创新、从成本中

心到利润中心。

（四）管理：基于数据管理，提升数据安全。对数据管理包括数据传输、数

据存储、数据应用三个方面，同时也是数据安全的三个重要节点。在数据产生、

流通、应用等多个环节，利用数据中台实现数据的综合管理，是数据安全在技术

层面的重要保障。

三、实施目标

（一）实现数据可视化，为管理者提供决策。

通过将现有及历史数据进行清洗治理，基于云平台实现数据仓库搭建，最终

做到数据可看，数据资产盘点清晰。推送实时生成的报表信息，为管理者提供决

策。

（二）数据资产统一化管理，解决统计口径不一致、管理混乱问题。

通过数据清洗及管理，实现数据标准化、统一化存储和归整，基于业务推送

结果，把各种需求模块化，统一统计口径。

（三）提升管理、加强运营，提升便民服务水平。

搭建数据分析模型，挖掘用户痛点，针对热点问题形成专题分析报告，如疫

情车辆拦截情况分析、疫情期间收费站、服务区人员及物资搭配分析、拥堵问题

提前预警等等。

（四）数据可重复使用，避免僵尸数据产生。

经治理的数据可重复使用，通过使用数据服务工具搭建数据共享中心进行对

外业务赋能的服务。

（五）数据可开发，业务部门工作人员也可以实现的低代码开发。

数据中台的建设，帮助技术人员与业务人员降低了数据开发的技术门槛。数

据中台工具封装市面上各种主流的数据开发、数据治理的工具，极大的降低了数

据开发门槛。

技术人员通过离线/实时开发平台，进行简单的sql语句操作，业务人员也

可通过可视化方式定义自己想要的业务。

四、主要建设内容

基于公司业务特点，以中心全局的视角进行数据中台建设，按业务