云服务与创新创业 云计算与大数据 3.1云计算与大数据_教案.doc

PAGE1 / NUMPAGES13 教师授课教案 教师授课教案 课程 云服务与创新创业 周次 授课日期 课题 大数据与云计算的关系 授课班级 教 学 目 的 1.理解大数据的定义； 2.了解大数据的特性； 3.了解云计算的最初目的； 4.理解大数据与云计算之间的关系。 重点 大数据与云计算之间的关系 难点 大数据与云计算之间的关系 授课方法 讲授 挂图 教具 计算机 教学主要内容 1.大数据的定义 2.大数据的特性 3.云计算的最初目的 4.大数据与云计算之间的关系 双基和能力培养 虚拟化工程师基本素质培养 课 题 提 问 1.日常生活中那些方面可能存在大数据的应用？ 2. 大数据对我们生活方式存在那些方面的改变？ 作业 1.大数据的概念和特性 2.大数据和云计算的关系 本 节 教 学 体 会 本节主要介绍了大数据的概念、大数据的特性以及大数据与云计算的关系，重点是理解大数据与云计算的关系，理论性较强。 教 案 纸 1 理解大数据的定义 1.1 大数据的定义 大数据(big data)，或称巨量资料，指的是所涉及的资料量规模巨大到无法透过目前主流软件工具，在合理时间内达到撷取、管理、处理、并整理成为帮助企业经营决策更积极目的的资讯。 1.2 大数据的案例 以京东商城为例，京东商城作为中国最大的自营式B2C电商平台，流转着千万级的订单数据信息，京东大数据拥有覆盖供应链最前端的供应商到末端最终用户的整个信息数据，无论广度、完整度，还是自营模式所独有的用户数据准确度都独具优势。 图1 京东大数据的应用 在“互联网+”的大环境下，智慧物流成为业界一致追求，智慧物流的基础就是大数据相关的技术。以大数据为基础的智慧物流，在效率、成本、用户体验等方面将具有极大的优势，也将从根本上改变目前物流运行的模式，“双11”就是典型的案例。 1.3了解大数据的特性 大数据的4V特点：Volume、Velocity、Variety、Veracity。 图2 大数据的特性 数据体量巨大(Volume)。截至目前，人类生产的所有印刷材料的数据量是200PB，而历史上全人类说过的所有的话的数据量大约是5EB(1EB=210PB)。 数据类型繁多(Variety)。相对于以往便于存储的以文本为主的结构化数据，非结构化数据越来越多，包括网络日志、音频、视频、图片、地理位置信息等，这些多类型的数据对数据的处理能力提出了更高要求。 价值密度低(Value)。价值密度的高低与数据总量的大小成反比。如何通过强大的机器算法更迅速地完成数据的价值“提纯”成为目前大数据背景下亟待解决的难题。 处理速度快(Velocity)。大数据区分于传统数据挖掘的最显著特征。根据IDC的“数字宇宙”的报告，预计到2020年，全球数据使用量将达到35.2ZB。 1.4 理解大数据和云计算之间的关系 当我们聊到大数据的时候，往往不得不提起云计算，两者仿佛是共生的，其实大数据常和云计算联系到一起，是因为实时的大型数据集分析需要分布式处理框架来向数十、数百或甚至数万的电脑分配工作。云计算思想的起源是麦卡锡在上世纪60年代提出的：把计算能力作为一种像水和电一样的公用事业提供给用户。可以说，云计算充当了工业革命时期的发动机的角色，而大数据则是电。 大的数据需要特殊的技术，以有效地处理大量的容忍经过时间内的数据。适用于大数据的技术，包括大规模并行处理（MPP）数据库，数据挖掘电网，分布式文件系统，分布式数据库，云计算平台，互联网，和可扩展的存储系统。 图3 大数据和云计算的关系 如今互联网、云计算以及大数据，如今成了三个密不可分的词汇。更进一步，挖掘数据价值很多企业都会做，但如果不能用最低成本得到数据价值，企业同样活不下去。把数据以低廉成本变成财富的东西就是云计算。从技术上看,大数据与云计算的关系就像一枚硬币的正反面一样密不可分。大数据必然无法用单台的计算机进行处理,必须采用分布式计算架构。 2 云计算最初的目标 我们首先来说云计算。云计算最初的目标是对资源的管理，管理的主要是计算资源、网络资源、存储资源三个方面。 图4 云计算的本质 2.1 管数据中心就像配电脑 什么叫计算、网络、存储资源？ 比如你要买台笔记本电脑，是不是要关心这台电脑是什么样的CPU？多大的内存？这两个就被我们称为计算资源。 这台电脑要上网，就需要有个可以插网线的网口，或者有可以连接我们家路由器的无线网卡。您家也需要到运营商比如联通、移动或者电信开通一个网络，比如100M的带宽。然后会有师傅弄一根网线到您家来，师傅可能会帮您将您的路由器和他们公司的网络连接配置好。这样您家的所有的电脑、手机、平板就都可以通过您的路由器上网了。这就是网络资源。 您可能还会问硬盘多大？过去的硬盘都很小，大小如10G之类的；后来即使500G、1T