面向未来的数据库技术的思考.PDF

面向未来的数据库技术的思考 张瑞 @ 阿里巴巴 关于我 p2005年加入阿里巴巴数据库技术团队，推动并见证了阿里数据库技 术发展的变革历程 p我们正在思考阿里下一代数据库技术的发展方向 p分享我们的成果和思考，抛砖引玉 2 大纲 p数据库内核技术创新 p数据库实现弹性调度 p从自动化走向智能化 p走过的路 未来的路 3 AliSQL—过去五年 Ø 27 面向业务需 求的性能优化 Ø 41 累积新增 Ø 40+ bugs定位 功能数 和修复 Performance Ø 全部回馈开源社区 Enhance New Feature BugFix 4 阿里场景下数据库技术的思考 p 阿里的场景分析 ü 交易、支付型应用 • 特点一：持续可用、数据强一致 à 高可用 强一致 • 特点二：数据量大、重要程度高 à 存储成本 • 特点三 ：数据有明显的生命周期特性，冷热数据特点鲜明 à 数据生命周期管理 • 特点四：交易 、库存 ，支付等业务，操作逻辑简单 ，高性能 à 极致性能 ü 有一个超级热点：双 11 • 双 11需要大量的机器资源，需要极致弹性伸缩的能力 ü DBA成为业务发展瓶颈 • 阿里场景有海量的性能数据，如何做到数据库自诊断自优化 5 数据库内核技术创新 6 AliSQL X-Cluster 7 数据库和 Paxos协议的关联 p 服务的本质，就是Server状态机中的一个状态变更，通过Paxos来保证状态变更全局一致 p Paxos基本功能 ü 系统各节点状态强一致 ü 系统少数派宕机，不影响可用性（持续可用） ü 系统自封闭，零外部系统依赖 p 作为大型系统的Build Block ü Spanner、 MegaStore、 CockRoachDB…… p 作为基础系统对外提供服务 ü 分布式锁服务、配置中心（元数据管理）、集群管理（ Leader Election ）… ü Zookeeper、ETCD … 8 AliSQL - X-KV