- 1、本文档共4页,可阅读全部内容。
- 2、有哪些信誉好的足球投注网站(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
- 5、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
- 6、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们。
- 7、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 8、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
查看更多
浅谈数据治理在数据质量管理中的作用.doc
PAGE
PAGE 4
浅谈数据治理在数据质量管理中的作用
[摘 要]当今社会,很多大型公司和机构拥有大量但分散在所有运营系统中的客户、产品和供应商相关的信息。没有合适的监督,数据的质量将不断下降。数据质量管理是一门学科,包含度量、改进和验证组织数据质量和完整性的方法。数据质量包括数据标准化、匹配、寿命和持续的质量监控。数据治理组织需要建立策略来识别高价值数据属性,建立机制来不断提高数据质量。
[关键词]大数据;数据质量管理;数据治理
doi:10.3969/j.issn.1673 - 0194.2016.18.133
[中图分类号]F830.49;TP311.13 [文献标识码]A [文章编号]1673-0194(2016)18-0-01
1 建立数据质量策略
各个应用系统、业务部门都拥有对其运作至关重要的数据,因此,了解数据是非常重要的。建立数据质量策略与数据治理流程中“了解数据”的步骤紧密连接。首先,在数据治理组织识别了业务驱动的数据治理关键绩效指标后,就很容易确定具有最高价值的数据属性。其次,数据治理组织还需要制定可接受的数据质量水平策略。最后,数据治理组织需要制定处理数据质量问题的策略和规程。
2 建立数据治理组织架构
健全的数据治理组织是全面开展数据治理工作的基础,数据治理组织应包括管理人员、业务人员和技术人员,缺一不可。数据治理组织可以设置三种角色,数据治理委员会、数据治理业务组、数据治理技术组。
数据治理委员会:由组织领导、信息技术部门负责人和业务部门负责人组成,委员会负责制定相关制度、目标、规范、流程、标准等,沟通协调,保障数据治理工作的全面顺利推进。
数据治理业务组:由业务部门的业务专家、系统管理员组成,负责业务系统参数、基础数据维护,保证系统正常使用;另外还要负责审核、检查、整改业务数据,保障数据质量在数据产生源头的高度和精度。
数据治理技术组:由信息技术部门的专业IT技术人员组成,包括系统开发人员、数据治理人员、数据库管理员。系统开发人员负责系统数据录入功能符合数据校验标准和数据治理标准;数据治理人员负责开发数据质量检测规则、监控数据质量、批量修改数据等工作;数据库管理员负责系统数据的备份、恢复、审核等工作。
3 设置数据质量基准
数据必须具有合适的质量,才能解决业务的需要。可通过多种方式评估数据集的质量。①效性。数据值具有可接受的格式。例如,员工编号为6位文字数字字符。②唯一性。数据字段中没有重复的值。③完备性。数据字段中没有空值。例如,邮政编码应该始终填入到地址表中。④一致性。数据属性与可能基于该属性本身或多个属性制定的业务规则一致。⑤及时性。数据属性表示没有过时的信息。例如,没有客户合同拥有已过期的有效期。⑥准确性。数据属性是准确的。⑦符合业务规则。数据属性或数据属性组合遵守指定的业务规则。
4 建立主数据中心以实现对主数据的管理
要满足收入增长、成本减少和风险管理等基本战略目标,数据治理组织需要控制业务部门中的数据。这些信息中最有价值的部分(关于客户、产品、材料、供应商和账户的关键业务数据)常常称为主数据。
主数据十分重要,分散在整个企业的业务流程、系统和应用程序中。数据治理组织现在已认识到了主数据的战略价值,在大部分企业和组织中,多个应用系统、不同部门间需要共享数据的现象非常普遍,建立主数据中心不仅能避免各应用系统相互共享数据形成网状结构,同时能够保证对外提供准确、一致的数据。这其中,凡是需要交换、共享的数据都纳入到主数据范围,形成一致的、完整的、准确的核心业务数据,统一由主数据中心完成对外提供数据的任务。建立主数据中心不仅仅是技术工作,除开发、维护外还需要制定开发规范、管理规范、管理流程,共同规范主数据的使用。
5 实现数据质量管理和数据治理的良好结合
数据质量管理应当是与整个公司组织的数据治理体系有机结合在一起的,数据标准为数据质量管理提供质量检查规则来源,而数据是否符合标准,是一个典型的数据质量问题,通过部署数据质量管理系统,可以对数据标准的落地实施提供监控和检验手段。
元数据管理系统可以作为数据质量管理的一个输入,辅助数据质量检查脚本的自动生成;而数据质量管理系统中存储的检核规则等信息又是一项元数据,应当被元数据管理系统采集。
数据安全管理中定义的数据所有者,是构建数据质量治理闭环流程,确定数据整改权责的重要依据。
6 数据质量管理流程的关键要素
数据质量管理流程应??涵盖从“数据产生”到“数据集成”再到“数据使用”在内的全过程,为了进行有效的数据质量管理,数据质量管理的不同功能点应当分布在流程的恰当环节,基于基础数据平台类系统构建数据质
您可能关注的文档
- 浅谈如何强化学前教育事业中的行政作用.doc
- 浅谈如何当好基层党支部书记.doc
- 浅谈如何打造服务型企业工会组织.doc
- 浅谈如何打造银行厅堂一体化管理.doc
- 浅谈如何推进数字化乡镇社区建设.doc
- 浅谈如何提升县域营业网点综合竞争力.doc
- 浅谈如何提升基层办公室工作效率和水平.doc
- 浅谈如何提升广播电台安全播出质量.doc
- 浅谈如何提高建筑工程管理及施工质量控制的有效策略.doc
- 浅谈如何提高机关干部蹲点帮建质量.doc
- 在线教育平台的发展与挑战作业指导书.pdf
- 学中医心得体会精选4篇.pdf
- 废旧塑料回收技术及设备的研究进展.pdf
- KLF7在消化系统恶性肿瘤中的研究进展.pdf
- 塑料成型工艺与模具试题.pdf
- 2024年广西壮族自治区融水苗族自治县《一级注册建筑师之建筑设计》考试题库【精选题】.docx
- 兼职安全员安全生产、健康环境管理职责【8篇】.pdf
- 2024年广西壮族自治区罗城仫佬族自治县《一级注册建筑师之建筑设计》考试完整题库附参考答案(培优A卷.docx
- 广东省深圳实验学校高中部2022-2023学年高一上学期期末数学试题(含答 .pdf
- 2024年广西壮族自治区秀峰区《一级注册建筑师之建筑设计》考试题库A4版可打印.docx
文档评论(0)