大数据时代与现代教育的变革-黄开福.docxVIP

大数据时代与现代教育变革黄开福摘要: 在我们还在谈论着信息时代给我们带来的各种新变化的时候，大数据时代已悄然来临。大数据给各行各业的发展模式和决策带来前所未有的革新与挑战，教育行业同样不可避免。然而，当前人们对大数据的认识尚处于初始阶段，特别是大数据在教育领域的研究和实践才刚刚开始，真正的将大数据完美地应用于教育，造福于教育，仍然有很长的路要走，这需要我们共同的努力！一、何为大数据《自然》杂志在2008年9月推出了名为“大数据”的封面专栏，讲述了数据在数学、物理、生物、工程及社会经济等多个学科扮演了愈加重要的角色。《纽约时报》2012年2月的一篇专栏中称，“大数据时代”已经降临，在商业、经济及其他领域中，决策日益基于数据和分析而做出，而非基于经验。哈佛大学社会学教授加里?金说：“这是一场革命，庞大的数据资源使得各个领域开始了量化进程，无论学术界、商界还是政府，所有领域都将开始这种进程。”旅美信息专家涂子沛著有汉语著作《大数据》，以科普读物的形式，围绕美国政府基于数据的管理历史线条展开，介绍了大数据以及大数据时代的有关知识。2012年12月8日在我国工信部发布的物联网十二五规划上，把信息处理技术作为4项关键技术创新工程之一被提出来，其中包括了海量数据存储、数据挖掘、图像视频智能分析，这都是大数据的重要组成部分。而另外3项关键技术创新工程，包括信息感知技术、信息传输技术、信息安全技术，也都与大数据密切相关。“大数据”成为学术界、商界、政府频繁提及的词汇，关于大数据的会议和论坛如雨后春笋层出不穷，那么到底什么是大数据呢？大数据也称巨量资料，指的是所涉及的资料量规模巨大到无法透过目前主流软件工具，在合理时间内达到撷取、处理、并整理成为帮助企业更好经营决策的各种资讯，同时与大数据相关的数据存储、数据安全、数据分析等领域也都属于大数据范畴。大数据的的特点业界将其归纳为4个“V”——Volume（体量大），Variety（类型杂），Value（价值大），Velocity（快速化），或者说特点有四个层面：第一，数据体量巨大。从TB级别，跃升到PB级别；第二，数据类型繁多。网络日志、视频、图片、地理位置信息等等。第三，价值密度低，商业价值高。以视频为例，连续不间断监控过程中，可能有用的数据仅仅有一两秒。第四，处理速度快。1秒定律。最后这一点也是和传统的数据挖掘技术有着本质的不同。大数据到底有多大？随着信息技术和互联网、物联网以及管理的精细化、全球化和社交圈扩大，数据呈现了指数级的增长。2009年美国的数据，离散制造业966PB，政府848PB，传媒行业715PB，这是麦肯锡2011年出版的一份报告《大数据：下一代创新，竞争和生产率的前沿》里面的一个估算。一组名为“互联网上一天”的数据告诉我们，一天之中，互联网产生的全部内容可以刻满1.68亿张DVD；发出的邮件有2940亿封之多（相当于美国两年的纸质信件数量）；发出的社区帖子达200万个（相当于《时代》杂志770年的文字量）；卖出的手机为37.8万台，高于全球每天出生的婴儿数量37.1万……为了衡量数据的海量，数据的存储单位也由传统的Bit、B、KB、MB、GB，逐渐升级，到2012年，数据量已经从TB（1024GB=1TB）级别跃升到PB（1024TB=1PB）、EB（1024PB=1EB）乃至ZB(1024EB=1ZB)级别。下列表格给我们一个理解数据单位提示。数据存储单位单位英文标识数据大小含 义 和 例 子位Bit1或0计算机用二进位制存储和处理数据，一位指二进数位0或1，是信息储存的逻辑单元字节Byte8位二进制数据单元是计算机上存储信息的基本物理单位。一个英文字母存储在计算机上，大小为一字节。千字节KB1024字节一页纸上的文字，约为5千字节兆字节MB1204千字节一首普通MP3格式的流行歌曲大概为4兆字节吉字节GB1204兆字节一部电影大概为1吉字节太字节TB1204吉字节美国国会图书馆所有登记的印刷版书本的信息总计为15太字节；20年的网络备份数据两位280太字节，这个数据现在每月以5太的速度递增拍字节PB1204太字节美国邮政局一年处理信件大约为5拍；谷歌每小时处理数据为1拍艾字节EB1204拍字节相当于13亿中国人人手一册500页的书的信息总量泽字节ZB1204艾字节截止至2010年，人类拥有的信息总量约为1.2泽字节尧字节YB1204泽字节数据之大，目前难以准确描述二、大数据给现代社会和人们的生活带来的影响和变化位于佛罗里达圣彼得斯堡的卡塔利娜营销公司有一个2.5PB的大型客户忠诚度数据库，里面存有1.9亿多家美国杂货店多年来的购买历史记录。其中最大的一个单数据库里就有多达4250亿行数据，通过分析这些数据，卡塔利娜公司帮助消费商品主要生产商和大型连锁超市预测消费者