大数据专业知识培训.ppt

2、特点 3、商业应用 4、大数据价值 5、多重挑 6、服务前景 目 7、大数据分析 录 8、我国的应对 9/152020 大数据专业知识培 概念 随着云时代的来临,大数据(Big data)也吸引了越来越多的关注。大数 据( Big data)通常用来形容一个公司 创造的大量非结构化和半结构化数据 这些数据在下载到关系型数据库用于分 析时会花费过多时间和金钱。大数据分 析常和云计算联系到一起,因为实时的 大型数据集分析需要像 Map Reduce 样的框架来向数十、数百或甚至数干的 ③《 电脑分配工作 简言之,从各种各样类型的数据中 ,快速获得有价值信息的能力,就是大 数据技术。明白这一点至关重要,也正 是这一点促使该技术具备走向众多企业 的潜力。 9/152020 大数据专 大数据比云计算更为落地 商业模式驱动 应用需求驱动 一云计算本身也是大数据的一种业务模式 大数据专业知识培 9/152020 大数据不仅仅是“大” 多大? PB级 比大更重要的是 数据的复杂性 有时甚至大数据 中的小数据如 条微博就具有颠 覆性的价值 大数据专业知识培训 9/152020 软件是大数据的引擎 和数据中心( Data Center) 样,软件是大数据的驱 动力 软件改变世界! Data Warehouse 数据分析与挖掘 数据仓库 edis Mongol8 Hado 分布式计算 Data Warehouse R语言数据分析与挖据 只培训 9/152020 大数据的4V特性 轳结构化数的超大规模和增长 总数据量的80~90% 体量∨oume 比结构化数据增长快10倍到50倍 是传统数据仓库的10倍到50倍 大数据的异构和多样性 很多不同形式(文本、图像、视频、机器数据) 多样性 Variety 无模式或者模式不明显 不连贯的语法或句义 大量的不相关信息 对未来趋势与模式的可预测分析 价值密度vae深度复杂分析(机器学习、人工智能vs传统商务智 能(咨询、报告等 实时分析而非批量式分析 速度 Velocity 数据输入、处理与丢弃 立竿见影而非事后见效 152020 商业应用 先来看这么一则偏笑话的案例吧:某超市通过分析一位女顾 客的购物数据(包括购物清单,浏览物品,咨询信息,视频监控 信息超市内徘徊区域等),根据分析结果给该女顾客寄来了孕 婴童试用品,这一举动让该女顾客的父亲非常生气,立马致电该 超市投诉,因为她女儿还未成年!超市经理立马登门拜访道歉 不过事实是,不久后这位小女孩因遮盖不住隆起的腹部而不得不 向父亲告知真相:她真的怀孕了。对于企业而言,大数据有时候 像是一个侦探家,能够拨开重重迷雾,找到问题的本质以及解决 方案,而关键在于,你是否真的懂得如何去驾驭它,让它为你服 务 大数据应用的关键,也是其必要条件,就在于T”与“经营 的融合,当然,这里的经营的内涵可以非常广泛,小至一个零售 门店的经营,大至一个城市的经营。 9/152020 大数据专业知识培训 微博为新浪带来巨大价值 马云的判断来自于数据分析 “2008年初阿里 新浪微博上 巴巴平台上整个买 家询盘数急剧下滑 200年8月 欧美对中国采购 在下滑。海关是卖 了货出去以后再 获得数据而我们 提前半年时间从询 盘上推断出世界贸 易发生变化了。 ■马云对禾釆的预测,是建立在对用尸行文分析的基础上。通常而言,买家在采购商品前, 会比较多家供应商的产品,反映到阿里巴巴网站统计数据中,就是查询点击的数量和购 买点击的数量会保持一个相对的数值,综合各个维度的数据可建立用户行为模型。因为 数据样本巨大,保证用户行为模型的准确性。因此在这个案例中,询盘数据的下降,自 然导致买盘的下降。 ■腾讯在天津投资建立亚洲最大的数据中心:百度也在投资建立大数据处理中心:新浪推 出企业微博产品,提供精准的数据分析服务。 大数据专业知识培 9/152020 大数据的应用不仅仅是精准销 通过用户行为分析实现精准营销是大数据的典型应用 在各 行各业特别是公共服务领域具有广阔的应用前景 Linked in 医疗 军事 食品 卫生 GROUP 安全 金融 消费 服务 交通 环保 行业 g 电子 Technorati 商务 气象 9/152020 大数据专业知b 更高一层数据层面整合企业内外部 到(大数据) 分析提前完成,有时分析和应用之 不断增长的实时分析 实时 间有长时间的延迟(例如,需求预 测,市场营销活动的发展) 将分析基于数量有限的企业实时数 基于不同来源的数据,公共数据和 混合数据集 私人数据(包括语义WEB数据) 访问受到物理位置或设备限制 无限制访问 无限制访问 数据驱动做出‘数据管理以实现监管或存档的目的 大规模的数据分析杠杆式开发客户 决策 (即最小的分析) 洞察能力和驱动策