基于KPI、KQI两级体系的数据中台数据质量评估体系.pdfVIP

技术论坛移动信息

基于KPI、KQI两级体系的数据中台数据质量评估体系

邓娟，刘晓斌，蒙杨

中国移动通信集团贵州有限公司，贵州贵阳550000

摘要：文章以解决企业数据质量评估难、量化难为出发点，介绍一种数据中台数据质量评估体系，对数据质量

评估痛点、数据质量评估体系、评估方法及相关算法、数据质量管理应用效果做介绍，为企业数据质量管理提

供参考。

关键词：数据中台；技术指标KPI；业务指标KQI；数据质量；数据管理

中图分类号：TN929.5

1数据质量管理痛点分析量评估阶段没有建立有效的评估体系，导致数据质

量没有形成闭环管理机制。

众所周知，数据要充分发挥价值，数据质量的

以上是贵州移动在数据中台数据质量管理实践

高低是其中一项重要因素，高质量的数据是一切数

中总结出的问题，同时也是行业普遍存在的问题。

据应用的基础，如何构建一套持续的、可行的数据

为解决上述问题，贵州移动引入KPI/KQI体系理论

质量评估及提升体系，是确保企业数据质量高水平

建立数据中台数据质量评估体系，通过KPI/KQI两

的核心管理手段。但企业在进行数据管理的过程中，

级体系实现对整体数据中台数据质量的规则定义、

通常会面临以下痛点。

质量测量、质量评分、质量持续改进提升，以此实

痛点一：技术与业务对数据质量的预期标准难

现数据中台数据质量的体系化评估及闭环。

以统一。技术人员和业务人员是数据使用的主要群

体，技术人员往往认为数据处理不出异常、数据处2技术方案

理过程满足技术规则要求，数据就是正确的。而业

整体实现技术方案包括基于KPI/KQI理论构建

务人员则认为数据需要和业务发展变化贴合、满足

的数据质量指标体系构建方案、基于数据质量评估

业务规则才是正确的。在对数据质量的预期上，技

指标的数据质量评估模型构建方案、基于KPI/KQI

术人员更关注技术层面的规则，业务人员更关注业

数据质量指标体系的系统建设方案三部分。

务层面的规则，导致技术与业务之间对数据质量的

[1]2.1数据质量评估指标体系

测量标准难以统一。

痛点二：数据质量效果提升程度难以量化。企

在数据质量评估体系中，应同时兼顾技术人员

业在数据质量管理方面投入了大量的人力、物力，

和业务人员对数据质量的要求，让KQI有效解决业

但不同的数据使用对象对数据质量的要求存在着差

务人员对数据质量的诉求，KPI有效解决技术人员对

异，且简单的评估体系不能同时满足不同对象对数

数据质量的诉求。贵州移动基于KQI/KPI建