徐云西8-9-大数据应用平台介绍-.pdf

大数据应用介绍 徐云西 daniel.xu@ 提纲 • 大数据技术发展趋势 – 大数据技术发展 – 数据库技术发展 – NoSQL技术发展 • 大数据应用案例 • 大数据应用平台 大数据时代，数据爆炸带来的挑战和思考 数据共享障碍 数据安全问题 Velocity 实时 vs. 延时 多渠道数据源 快速变动数据 暂存数据 交易系统 文档\网站\邮件 Value 论坛\新闻 客户官网 Variety 价值 Volume 社交媒体 电子商务 数据格式 TB 呼叫中心 数据频度 PB ATM 数据结构 EB POS 数据粒度 ZB 合作伙伴 YB 数据来源 NB 未知需求 大规模处理能力 如何发现并采用合适数据服务业务需求？ 应对大数据的技术手段 优点 - 基本内存处理，速度快 Stream - 可并行，可扩展 - 编程方式灵活，可以处理复杂结构数 据 缺点 - 不保证事务完整