分布式数据挖掘与大数据-英特尔.PDF

2012 年 8 月 愿景文件 分布式数据挖掘与 大数据 英特尔对于网络前端设备的数据的观点 为什么应该阅读本文档 本文介绍了英特尔对于在网络前端的传感器和设备所生成的 大数据进行分析的观点。讨论的主要内容包括： • 在网络前端生成的大数据的重要性，包括某些 “超级庞大” 的 数据 • 大数据与被传统数据管理或 BI 管理的数据的本质区别在哪里， 它为何至关重要 • 新兴技术纵览：包括 Apache Hadoop* 框架和 Apache* MapReduce 分布式框架等 • 四个关于政府、零售、汽车和制造行业的应用案例 — 两个 案例使用 Hadoop* 框架，另外两个案例注重智能系统数据 2012 年 8 月 愿景文件 分布式数据挖掘与 大数据 英特尔对于网络前端设备的数据的观点 目录 3 前端设备数据： 大数据的新机遇 4 大数据与新兴技术： 删节版 5 前端设备的大数据： 深入了解 7 有效利用智能系统和传感设备 产生的数据 9 前端设备数据的应用案例 12 前端设备数据：下一步发展 2 英特尔 IT 中心 愿景文件 | 分布式数据挖掘与大数据 前端设备数据： 大数据的新机遇 大数据的爆炸式增长考验着包括最先进的分析工具的处理能 数据进行管理并将之转换为洞察力的挑战，这就要求其使用 力。IT 正在受到大量复杂的结构化、半结构化和非结构化数 一种新的、对 IT 基础设施具有深远影响的方法来分析大数据。 据在容量、多样性和增长速度方面的挑战 — 同时，这些数据 即使他们想使用传统的系统，这类系统也无法经济高效地处 也为企业提供了为其业务获取更丰富、更深入和更准确洞察 理面向大数据的全新动态数据源和多样的环境。Hadoop* 框 信息的大好机会。 架等新兴技术则全面展示了捕获、管理和分析大数据的全新 方法。大数据挑战与新技术的结合带来了标志性的转变，从 对于大多数企业来说，能够有大量机会从大数据中获得令人 而推动企业重新审视他们的 IT 基础设施和分析能力。 兴奋的全新价值都是很有吸引力的，但是它们也面临着对大 英特尔观点：前端设备数据的重要性英特尔观点：前端设备数据的重要性 什么是大数据？什么是大数据？ 英特尔认为要想进行大数据分析，就必须在数据存在的位置 对其进行捕获和处理。本文解释了为什么在网络前端设备生 对于大数据的描述通常使用以下的前三个特性 — 它们有时 成的大数据如此重要，包括某些 “超级庞大” 的数据。随着传 衩称之为 “3V”。但是，企业需要第四个 V（价值），来让大 数据真正发挥作用。 感器、设备以及智能系统应用的持续扩展，从来自这些源头 的大量数据中获取洞察力就成为了极具吸引力的新机遇。可