高等职业院校人才培养状态数据采集与管理平台数据质量管理(吉国庆).pdf

高等职业院校人才培养数据采集与管理平台 数据质量管理 主讲人：吉国庆 目 录 一、引言 二、数据质量的重要意义 三、数据质量的评估维度 四、影响数据质量的因素 五、提升数据质量的管理举措 一、引言 一、引言 一、引言 一、引言 一、引言 一、引言 其他数据问题： 1、系统自动校验出来的问题数据 2、不应为0或负值的数值（支持度） 3、部分相加大于总和的数 4、相关联的百分比相加不等于1 5、相同概念数据项数据不一 6、误读数据“单位”导致数字倍增 7、“置信区间”外的极限数值 一、引言 关注： 数据质量已然成为数 据平台可持续化应用的基石！ 二、数据质量的重要意义 内因：平台自身发展的要求，平台建设面临大数据时代、质量 时代，理所当然要在提升平台数据质量上下功夫。 数字化生存 环境 知识管理信 息平台 状态数据采集 与管理平台 状态数据采 集平台 数据平台发展进阶图 二、数据质量的重要意义 “统计学中特别强调,有缺陷的数据得不出明确的 结论!” 皮尔逊(英国统计学家,1895--1980) “垃圾进！垃圾出！” 来自信息界的谚语 二、数据质量的重要意义 二、数据质量的重要意义 反应信息的本质：提炼的信息 知识 知识的子集或基石：有组织的数据 信息 信息的源泉：数字或事实 数据 数据-信息-知识链金字塔结构 二、数据质量的重要意义 数据、信息、知识是人类认识客观事 物过程中不同阶段的产物。 从数据到信息再到知识是一个从低级到 高级的认识过程，层次越高，外延、深 度、含义、概念化和价值不断增加。 二、数据质量的重要意义 在数据、信息和知识中，一方面，低 层次是高层次的基础和前提，没有低 层次就不可能有高层次，数据是信 息的源泉，信息是知识的“子集或 基石”。信息是数据与知识的桥梁。 知识反映了信息的本质。 二、数据质量的重要意义 外因：各类用户（院校、省级、国家级用户）赋予并希望数据平台 能够加载新的功能；这些新功能对数据质量提出了新要求。 二、数据质量的重要意义 表现之一各类用户：赋予并希望数据平台能够加载新的功能； 二、数据质量的重要意义 三、数据质量的评估维度 完整性 数据 一致性