SQL Server 2005商业智能解决方案系列课程.pdf

SQLSQL ServerServer业智能解决方案系列课程商业智能解决方案系列课程 高可用数据仓库实践高可用数据仓库实践((一一)) ——大型数据仓库实践 梁谋 讲师介绍讲师介绍 • 梁谋谋： – mliang@g@ • 北京迈思奇科技有限公司 目的目的 利利用一个真实个真实的项目案案例，展望在数在数据 仓库项目的发展应用趋势仓库项目的发展应用趋势。探讨我们应该探讨我们应该 利用怎样的架构模型，来应对蓬勃发展的 数据仓库应用数据仓库应用。。 内容提纲内容提纲 数据仓库项目概述 OLAP架构 • 总体趋势 • Partitions • 更为潜在的需求 • 分层次的Cube • 应对的策略 • 数据更新机制 • 解决方案性能优化解决方案性能优化 • 分离分离ProcessingProcessing 和和reportingreporting 项目介绍 Report特点 •• 项目背景项目背景 • 报表的新趋势报表的新趋势 • 总体要求 • Excel pivot table • 总体架构和源数据 • Office的方便集成：PPT • Excel Service的广泛应用 ETL架构设计 系统扩展性 • Staging • Service broker • ETL的扩展性 • Control Server 下进行的负载均 • OLAP的扩展性 衡 • Reporting 的扩展性 数据仓库的总体趋势数据仓库的总体趋势 • 规模越来越大模越来越大 • 允许的数据延时越来越短允许的数据延时越来越短 • 访问的用户数不断攀升 • 对系统的可靠性提出了更高要求 – 减少了系统维护的时间减少了系统维护的时间 – 更高的响应时间 更为潜在的需求更为潜在的需求 • 持续的性性能扩展 – 今天只有今天只有100个用户个用户，，明天可能就有明天可能就有1000000个个 – 数据量的快速膨胀 •• 数据源快速增长数据源快速增长 • 业务的快速增长带来的数据量的全面提升 应对的策略应对的策略 • 充充分利利用解决方案提供案提供的性性能优化 • BestBest practicepractice 在系统的各个环节正确运用在系统的各个环节正确运用 • 良好的系统结构设计 解决方案的性能优化解决方案的性能优化 • SSISSSIS – In-memory Pipeline architecture – Logging and error handling • SSASSSAS – 对AWE 的应用和x64 的应用 – 避免避免‘defaultdefault’ 并行处理的方式指定并行处理的方式指定MaxMax CPUCPU 及其倍数进行处理 – NaturalNatural HierarchyHierarc