项目管理在大数据质量管理中的应用研究.docxVIP

??

?

??

项目管理在大数据质量管理中的应用研究

?

??

?

?

?

?

?

?

?

???

?

?

?

?

?

摘要：本文通过分析国内外大数据质量研究文献，从大数据基本内涵、质量管理等方面入手，结合项目管理理论，分析项目管理在大数据质量管理中的应用。研究发现，项目管理应用于大数据管理可以提升大数据质量，同时大数据技术也可应用于项目管理起到数据分析整理的做用。

关键词：大数据质量；项目管理；质量管理

1引言

近年来,随着通信技术的变革与高速发展，以及数字信息浪潮的到来,特别是4G通信网络服务在全国的推广普及和5G通信技术商用化逐步布局展开,人、机、物三元世界正高度融合，产生的各种信息呈爆炸式增长、数据模式复杂化程度急剧增加[1]。大数据基本特性从最初的3V[2]发展到到4V[3]、5V[4]，它的基本概念直到现在在学术界如何详实准确的描述还没有达成广泛地共识，但这些已无法阻挡大数据技术在政府政策、产业技术等领域的发展。尤其自2015年起，我国陆续出台《促进大数据发展行动纲要》《关于加快推进“互联网+政务服务”工作的指导意见》《关于积极推进“互联网+”行动的指导意见》等政策性文件，预示着我国大数据产业迎来了重要的发展机遇期。而这一切都需要确保准确、全面、高质量的数据，做好大数据质量管理才能保证基于由此衍生的分析的精度和准确度。所以大数据的数据质量管理是大数据不可忽视的重要环节。

2大数据质量问题分析

目前来看大数据的项目应用大部分是一种运营商为了满足客户不同需求基于大数据技术提供的信息服务类项目，所以要对大数据项目的质量管理进行研究,我们首先就需要明确信息服务类项目质量的定义。目前在学术界得到广泛认可的信息服务类项目质量的定义有几种:

国外方面，沃特·阿曼德·休哈特(WalterA.Shewhart)在他的研究中指出，影响项目质量有两个方面，一个是从客观上讲,项目质量是一个客观实在,独立于人而存在;另外一个方面主观上来说,项目质量与客观存在影响人的感官等因素所带来的思考或感受有关[5]。

爱德华·费根鲍姆(EdwardAlbertFeigenbaum)认为项目质量是服务受众的一种对项目需要达到什么目标的决心,这里需要明确，这种决心不是项目工程师的决心,也不是一种项目组的营销决策,更不是一般的管理决策。它基于以下几点：一是项目服务受众对所购产品或服务的以往的经验,二是服务受众对于项目质量所表述的或潜在的需求,三是项目最后需要达成或可能需要达成的目标,四是客观可操作有相关衡量标准或依据服务受众主观的感受进行衡量,五是项目质量始终是市场竞争中的重要指标[6]。

国内方面，魏铮认为信息服务是一个运动的发展的活动,质量评价应该包含全过程，即质量的评定不只在服务结果,在服务的过程中之中也应有质量的评价[7]。徐纲红认为信息服务的质量评价是信息的使用者对享受的信息服务得到的评价[8]。通过这些研究，我们可以得出这样的结论，大数据质量作为信息服务类项目的质量，其主要包含两个方面，一是主观的质量，即服务对象对服务质量的期望；另一方面是客观质量，即项目的过程平台、项目的产出等客观实在。

围绕这两点，如何更好地做好大数据质量管理。近年来，国内研究者们做了大量的探索，冯登国等人对大数据服务中信息安全和用户隐私问题进行了探讨[11]；费仕忆就大数据应用平台的构建进行了概述与评价，指出平台构建的过程中可能会出现的问题，如数据的采集、存储、处理、传输、共享与安全等，并根据分析创见性的提出了一种大数据平台的系统架构，并进行了相关验证研究[12]；王利平提出大数据服务作为一个项目，根据项目管理的全面质量管理理念，探索应用项目管理的PDCA循环管理方法，并在金融大数据项目质量管理中进行验证[13]；宗威、吴峰从流程、技术和管理的视角讨论了企业数据质量的挑战、重要性及应对措施[14]；莫祖英认为数据质量在大数据的处理中，占有极其重要的地位，并根据大数据的特征，将大数据质量细分为三个方面，分别是原始质量、过程质量和结果质量[15]；李建中、王宏志等从大数据特点分析出大数据质量问题可能产生的原因，即大数据的特性：数据规模性大、高速性和多样性等特点[16]；金莲、黄沈滨等则从技术的角度探讨了大数据的数据清洗问题，基于Hadoop设计并实现了一个大数据云清洗系统，通过Mapreduce计算模型检测并修复数据质量问题[17]。2014年中国电子技术标准化研究院编制的《大数据标准化白皮书》中，将元数据质量、质量评价和数据溯源三大数据质量问题列为近期急需研制的标准，体现出国家高度重视大数据质量标准研究。

3项目管理理论在大数据项目中的研究现状

项目管理理论最早在第二次世界大战后期的美国被提出。一般情况下指项目的管理者，在有限的资源