大数据推动企业业务变革.docx

??

?

??

大数据推动企业业务变革

?

??

?

?

?

?

?

?

?

???

?

?

?

?

?

大数据成为比肩物质、能源的战略资源，大数据应用正在成为新一轮信息化建设的核心。IDC的报告显示，2012～2016年期间全球大数据技术及服务市场年均复合增长率将达到31.7%，累计增长将超过200%，大数据行业的收入将达238亿美元。中国大数据市场将从2011年的7760万美元增长到2016年的6.17亿美元。

一大数据的内涵和外延

“大数据”是近年来IT业最热门的词语，但大数据概念是如何提出以及如何定义目前没有统一的认知。2011年5月，麦肯锡全球研究院（MGI）发布的研究报告《大数据：未来创新、竞争、生产力风向标》使“大数据”被广泛关注。

麦肯锡认为，大数据指的是大小超出常规的数据库工具获取、存储、管理和分析能力的数据集。但它同时强调，并不是说一定要超过特定数量值的数据集才能算是大数据。

亚马逊（全球最大的电子商务公司）大数据科学家JohnRauser给出了一个简单的定义：大数据是任何超过了一台计算机处理能力的数据量。

维基百科中只有短短的一句话：“巨量资料（bigdata），或称大数据，指的是所涉及的资料量规模巨大到无法通过目前主流软件工具，在合理时间内达到撷取、管理、处理及整理成为帮助企业经营决策更积极目的的资讯。”

牛津大学互联网研究所认为，大数据所代表的是当今社会所独有的一种新型的能力——以一种前所未有的方式，通过对海量数据进行分析，获得有巨大价值的产品和服务，或深刻的洞见。

电子科技大学互联网科学中心认为，大数据是基于多源异构、跨域关联的海量数据分析所产生的决策流程、商业模式、科学范式、生活方式和观念形态上的颠覆性变化的总和。

国际数据公司（IDC）从大数据的四个特征来定义，即海量的数据规模（Volume）、快速的数据流转和动态的数据体系（Velocity）、多样的数据类型（Variety）和巨大的数据价值（Value）。

目前，业内对于大数据特征的研究主要集中在“4V”，即数量（Volume）、多样性（Variety）、速度（Velocity）和价值（Value）。

数量：聚合在一起供分析的数据规模非常庞大。目前全球每两天创造的数据规模等同于从人类文明至2003年间产生的数据量总和。

多样性：从数据格式上分为文本、图片、音频、视频、光谱等，从数据关系上分为结构化、非结构化、半结构化数据。

速度：处理速度快。一般必须在秒级时间范围内给出分析结果，时间太长就失去了意义和价值。网站实时竞价（Real-TimeBidding）系统能够在二十分之一秒内把网络用户网页浏览行为与数万广告主进行匹配。谷歌500毫秒的延迟导致20%的流量的丢失。亚马逊100毫秒的延迟导致1%的利润的下降。

价值：大数据背后潜藏的价值巨大。目前大数据所形成的市场规模在51亿美元左右，而到2017年预计会上涨到530亿美元。

有关大数据的说法很多，其核心基本围绕大数据中的“大”而言。这种定义方法是从大数据的表面特征进行的，“大”固然重要，而大数据对人类思维模式、科学范式、组织方式、生产方式、生活方式的影响更具意义。通过有哪些信誉好的足球投注网站关键词来分析流感疫情固然是大数据，通过运营商用户充值额变化来洞察经济形势变化亦是大数据，通过关联分析把啤酒与尿布一起摆在沃尔玛货架上当然也是大数据；这些案例中有的需要对PB数据进行分析，有的仅GB甚至MB足矣。

大数据是利用互联网量化分析、研究、解决问题的一种思想方法。

大数据是思维、技术、数据和应用的四位一体。大数据时代首先要具备全新的数据思维方式，抛弃过去凭经验、拍脑袋的做法，让数据说明一切；其次要把数据作为资产，“数据石油”恰如其分，是与人力、财力、物力相当的核心资产；最后是善于利用适当的技术来进行数据探矿，挖掘数据潜在的价值；能源石油只能燃烧一次，“数据石油”可以无限次挖掘而不会消失。

目前业界对大数据的关注多集中在数据管理的技术层面。数据管理技术历经人工管理、文件管理、数据库管理等时代，现已进入大数据管理时代（见图1）。

图11946～2011年数据管理系统变化趋势

同时，在技术不断成熟和市场应用需求不断细化的刺激下，数据库架构也随之发生改变，从一种架构支持所有应用，向多种架构支持多类应用的方向发展，内存数据库、列存数据库、NoSQL数据库等新型架构的数据库不断涌现（见图2）。

图2数据库架构变革

二大数据的重要作用

1.大数据成为战略资源

大数据是与自然资源、人力资源同等重要的战略资源，是一个国家数字主权的体现。世界经济论坛（WCF）发布的《大数据，大影响》认为，数据为新财富，价值堪比石油；商业版图由此被重新划定，通晓如何利用这些数据的企业将成为最强者。大数据时代，国家层面的竞争力将部分体现