必威体育精装版大数据与云计算zhang.ppt

大数据技术与云计算有相同，也有差异 大数据与云计算 云计算的模式是业务模式，本质是数据处理技术。 数据是资产，云为数据资产提供存储、访问和计算。 当前云计算更偏重海量存储和计算，以及提供的云服务，运行云应用，但是缺乏盘活数据资产的能力，挖掘价值性信息和预测性分析，为国家、企业、个人提供决策和服务，是大数据核心议题，也是云计算的最终方向。 白云下面数据跑 蓝蓝的天上白云飘 如果数据是财富，那么大数据就是宝藏，而云计算就是挖掘和利用宝藏的利器！没有强大的计算能力，数据宝藏终究是镜中花；没有大数据的积淀，云计算也只能是杀鸡用的宰牛刀！ 大数据与云计算 从技术上看，大数据根植于云计算 NoSQL数据库，进行海量数据管理以便后续分析挖掘 海量数据管理技术 分布式存储方式存储数据，冗余存储方式保证系统可靠 海量数据存储技术 分布式编程模型，用于并行处理大规模数据集的软件框架 MapReduce编程模型 大规模系统运营，快速故障检测与恢复 云计算平台管理技术 软硬件隔离，资源整合 虚拟化技术 大数据的关键技术 ?节省IT部署成本 发现数据中的价值 带来的价值 ?生产计算及存储设备厂商、拥有计算及存储资源的企业 ?从事数据存储与处理的软件厂商和拥有大量数据的企业 推动力量 ?IT资源、能力和应用 数据 对象 ?通过互联网更好地调用、扩展和管理及存储方面的资源和能力 充分挖掘海量数据中的信息 目的 ?基于互联网的相关服务日益丰富和频繁 ?现有的数据处理 技术 不能胜任社交网络和物联网产生的大量异构数据，但这些数据存在很大价值? 背景 差 异 点 1.都是为数据存储和处理服务 2.都需要占用大量的存储和计算资源，因而都要用到海量数据存储技术、海量数据管理技术、MapReduce等并行处理技术 相同点 云计算为大数据提供了有力的工具和途径，大数据为云计算提供了很有价值的用武之地 总体关系 云计算 大数据 ? 2012云计算，2013大数据？ 美国： 美国政府在2012年3月29日宣布投资两亿美元拉动大数据相关产业发展，将“大数据战略”上升为国家意志。 中国： 中国商业联合会：副会长刘建沪介绍说，随着互联网的快速发展，中国的电子商务企业纷纷组建了数据分析部门。 2011年10月，工信部确认京沪深杭等5城市为“云计算中心”试点城市。而真正的问题或许不在于怎样建设“云计算中心”。国家信息中心常务副主任杜平直言不讳：“应对大数据的到来，需要不断建基础设施，但是建了干什么，有些数据需要存储，也有很多数据可能不需要储存。” 大数据的市场有多大？中央财经大学中国经济管理研究院博士张永力说，国外大数据行业约有1000亿美元的市场，而且每年都以10%的速度在增长，增速是软件行业的两倍。 行业拓展者，打造大数据行业基石： 大数据的应用 ——企业在投入 IBM： IBM大数据提供的服务包括数据分析，文本分析，蓝色云杉（混搭供电合作的网络平台）;业务事件处理；IBM Mashup Center的计量，监测，和商业化服务（MMMS） IBM的大数据产品组合中的必威体育精装版系列产品的InfoSphere bigInsights，基于Apache Hadoop。 该产品组合包括： 打包的Apache Hadoop的软件和服务，代号是bigInsights核心，用于开始大数据分析 软件被称为bigsheet，软件目的是帮助从大量数据中轻松、简单、直观的提取、批注相关信息 为金融，风险管理，媒体和娱乐等行业量身定做的行业解决方案 微软： 2011年1月与惠普（具体而言是HP数据库综合应用部门） 合作目标是开发了一系列能够提升生产力和提高决策速度的设备。 EMC： EMC 斩获了纽交所和Nasdaq； 大数据解决方案已包括40多个产品。 Oracle： Oracle大数据机与Oracle Exalogic中间件云服务器、Oracle Exadata数据库云服务器以及Oracle Exalytics商务智能云服务器一起组成了甲骨文最广泛、高度集成化系统产品组合。 政府职能变革 重视应用大数据技术，盘活各地云计算中心资产：把原来大规模投资产业园、物联网产业园从政绩工程，改造成智慧工程； 在安防领域，应用大数据技术，提高应急处置能力和安全防范能力； 在民生领域，应用大数据技术，提升服务能力和运作效率，以及个性化的服务，比如医疗、卫生、教育等部门； 解决在金融，电信领域等中数据分析的问题：一直得到得极大的重视，但受困于存储能力和计算能力的限制，只局限在交易数型数据的统计分析； 政府投入将形成示范效应，大大推动大数据的发展。 大数据的应用 ——政府 大数据的应用