大数据02612119.ppt

获取来源 企业内部数据是大数据的一个主要来源。内部数据是我们所能获得的最成熟、最易于理解的数据。这些数据是通过多年的企业资源规划、主数据管理、商业智能应用和其它相关工作收集整理而来，并经过了整合和标准化。利用分析技术解读这些来自客户交易、业务往来、事件和电子邮件的内部数据能够为组织提供有价值的洞察。 用户在线的每一次点击，每一次评论，每一个视频点播，也是大数据的重要来源。互联网企业之所以取得令人瞩目的成绩，其核心的本质就是包括用户网络操作的大数据，进行记录和分析。 大数据给个人带来的好处 购物： 大数据给个人带来的好处 旅行：足不出户，安排好一切。 大数据给个人带来的好处 信息：人人都是传媒。 大数据给个人带来的好处 社交：你所有的朋友都能在网络上找到。 大数据给社会带来的好处 1.全新的商业模式 2.推动医疗创新 3.促进教育改革 4.社会安全管理更有序 5. 等等... 弊端 1.自由 在手机未普及前，大家喜欢聚在一起聊天，自从手机普及后特别是有了互 联网，大家不用聚在一起也可以随时随地的聊天，只是“病菌”滋生了另外一种 情形，大家慢慢习惯了和手机共渡时光，人与人之间情感交流仿佛永远隔着一 张“网”。 2.隐私 当你在不同的网站上注册了个人信息后，可能这些信息已经被扩散出去了， 当你莫名其妙的接到各种邮件，电话，短信的滋扰时，你不会想到自己的电话 号码，邮箱，生日，购买记录，收入水平，家庭住址，亲朋好友等私人信息早 就被各种商业机构非法存储或贱卖给其它任何有需要的企业或个人了。 * 罗车明 什么是大数据？ 全球每秒钟发送 2.9 百万封 电子邮件，一分钟读一篇的 话，足够一个人昼夜不息的 读5.5 年… 每天会有 2.88 万个小时的视 频上传到优酷，足够一个人 昼夜不息的观看3.3 年… 每天发布 5 千万条短信，假设10 秒钟浏览一条信息，这些消息足够一个人昼夜不息的浏览16年… 每天亚马逊上将产生 6.3 百万笔订单… 每个月网民在Facebook 上要花费7 千亿分钟，被移动互联网使用者发送和接收的数据高达1.3EB… Google 上每天需要处理24PB 的数据… 什么是大数据 最早提出“大数据”概念的机构是全球知名咨询公司麦肯锡。麦肯锡在研究报告中指出：数据已经渗透到每一个行业和业务职能领域，逐渐成为重要的生产因素，而人们对于海量数据的运用将预示着新一波生产率增长和消费者盈余浪潮的到来。 什么是大数据 定义： 大数据(big data)，或称巨量资料，指的是所涉及的资料量规模巨大到无法透过目前主流软件工具，在合理时间内达到撷取、管理、处理、并整理成为帮助企业经营决策更积极目的的资讯。 大数据（big data）是那些超过传统数据库系统处理能力的数据。它的数据规模和转输速度要求很高，或者其结构不适合原本的数据库系统。为了获取大数据中的价值，我们必须选择另一种方式来处理它。 案例一 Farecast是一个对机票价格进行预测的公司，帮助消费者抓住最佳购买机票的时机，使乘客节省很多钱。 最初预测系统建立在41天之内的12000个价格样本基础上，数据是从旅游网站上抓取的，如今已经拥有超过2000亿条飞行记录。 系统只推测机票的价格何时最便宜，不关心是什么原因导致的价格下降。 案例二 菜鸟网络“首秀”天猫双11 2013年，菜鸟网络的物流数据平台首次全面接入“双11”物流体系，但是菜鸟网络已经提前掌握了数据产品应用，用于指导参与今年双11的商家、物流快递公司、消费者的物流信息联动。在今年的双11，菜鸟网络将根据历史数据以及今年进入双11的商家名单、备货量等信息进行综合的数据分析预测，指导商家备货。 同时，菜鸟网络推出了全新的物流数据雷达服务。物流数据雷达将可以提供详细的区域和网点预测，不仅可以监控到中转站，还可以监控到行政县区和服务网点的层面，相当于从主动脉监控到毛细血管，这些数据将更加客观的帮助电商平台和快递公司做决策。 大数据是如何产生的？ 视频网站、社交网络、电子商务等极大拓展了互联网的边界和应用范围 人人网 社交网络 微博 淘宝 电子商务 京东 B站 视频网站 土豆 1. Volume 数据量 2. Variety 多变性 3. value 价值性 4. Velocity 时效性 结构化数据、半结构化数据和非结构化数据 如今的数据类型早已不是单一的文本形式，订单、日志、音频，能力提出了更高的要求 沙