大数据走向云计算 (11).ppt

第11章 社会中的大数据 “大数据”正以难以想象的速度带来新一轮信息化革命。很多专家学者纷纷预测，“大数据”时代，即将带来新的思维变革、商业变革和管理变革。那么，究竟何为“大数据”?“大数据”时代会对企业发展带来哪些影响? “大数据”将会对企业带来革命性的影响。它会改变企业传统的管理和运营模式，成为企业的神经系统及决策中心，有效降低管理成本，提高对市场的快速反应能力，提高服务水平。通过对“大数据”的分析与挖掘，可以实现管理流程的优化，将粗放式、经验式的管理变成精细化、数据驱动的管理。 11.1 普适计算 普适计算应用范围 普适计算又称普存计算、普及计算这一概念强调和环境融为一体的计算，而计算机本身则从人们的视线里消失。在普适计算的模式下，人们能够在任何时间、任何地点、以任何方式进行信息的获取与处理。 11.2 数据应用于治国上 美国这个国家，虽然年轻，但相信数据、使用数据，却有着深厚的传统。数据被视为科学的力量，知识的来源；没有数据，无论是学术研究，还是政策制定，都寸步难行。 在网上发布数据，将会吸引一大批对这个问题感兴趣的各界人士参与到政策制定的过程中来，足够多的眼睛，将会使所有的问题都无所遁形，更多的问题将被发现，更多的细节将被讨论，更好的方案将会被激发。 11.3 商务智能 仅仅几年以前，这种被称为“商务智能”的技术，还是大公司的专利。但随着计算机处理器、存储器的价格不断下降和软件质量的不断上升，这种技术成了商业界的主流。 大大小小的公司，都收集了前所未有的大量数据。过去，这些数据存储在不同的系统当中，如财务系统、人力资源系统和客户管理系统，老死不相往来。现在，这些系统彼此相连，通过“数据挖掘”的技术，可以获得一幅关于企业运营的完整图景，这被称为： 一致真相（A single version of the truth）。 商务智能提高了商业运营的效率，帮助了企业总结发展过程中的模式，并改善了企业预测未来的能力。 1989年为数据的数据技术兴起的元年。这一年，图灵奖的主办单位计算机协会（ACM）下属的知识发现和数据挖掘小组（SIGKDD）举办了第一届数据挖掘的学术年会，出版了专门期刊。此后，数据挖掘一直被热捧，其发展如火如荼，甚至成为一门独立的课目走进了大学课堂。在美国的不少大学，还先后设立了专门的数据挖掘硕士学位。 也正是1989年，高德纳咨询公司的德斯纳（Howard Dresner）在商业界为“商务智能”给出了一个正式的定义。 “商务智能（Business Intelligence），指的是一系列以事实为支持、辅助商业决策的技术和方法。” 11.4 数据质量法与隐私 数据的质量问题和隐私安全都曾在美国引起过巨大的风波和争议。其实，早在几十年以前，政府所发布数据的质量问题就备受瞩目、广受争议。这是因为，这种数据，往往都关系到行业管制标准的设定。作为行业管制标准的数据，其大小多少，堪称一个产业的支点，至关重要。 由于数据挖掘技术强大的信息整合能力、分析能力，这已经给公民的隐私保护带来了前所未有的挑战。万维信息触角计划公开之后，引起了隐私、民权保护团体的强烈反响。美国公民自由联盟（ACLU）指出，所谓的“交易空间”，是关于“所有人、所有事情的记录”，其实无所不包。 11.5 数据运动 开放数据（Open Data）和开放代码却大不相同。开放代码面向的对象仅仅是程序员，也就是说，它停留在技术的层面；但数据的开放，其涉及而却广得多，它不仅和技术人员相关，还与数据的来源、性质以及过去和未来的使用人员都息息相关。 开放数据也不仅仅意味着公开数据。要让数据可以重复使用、自由加工、数据公开的格式至关重要。还有，数据不像代码，代码无关个人，数据却可能涉及个人的隐私。 那么，什么样的数据可以开放、应该开放？又以什么形式开放？谁来开放？这些，都是要在开放之前必须回答的问题。 11.6 数据大趋势 大数据时代正在催生的技术变量，最重新构造互联网。对下一代互联网的研究，伯纳斯-李领导的麻省理工学院万维网联盟（W3C）为全世界的领跑者。1998年，该组织就开始提出下一代互联网的定义和构建方法。伯纳斯-李将下一代互联网称为“语义网（Semantic Web）”，他认为语义网即为“数据网（Web of Data）”。 但在大数据时代，信息共享、交流互动已经不再是最迫切的需求，数据的分析和整合，才是最大的挑战，而这恰恰是万维网的短板。可以说，万维网是一个网页的集合体。 11.7 数据大挑战 在大数据的时代