rational系统测试解决方案.ppt

Marketing Library Proposal, SPreston, Field Marketing, 1/27/99 Rational测试解决方案 议程 组件测试 系统测试管理 GUI功能测试自动化 性能测试自动化 议程 当前软件测试面临的挑战 组件测试 系统测试管理 GUI功能测试自动化 性能测试自动化 当前软件测试面临的挑战 如何适应由于软件新技术、新架构的应用导致测试工作量增大？ 软件测试阶段 软件项目工作流程 组件测试—以测试为驱动的开发（XP） 目的 尽可能发现早的软件缺陷 保证系统测试的效率 测试方法—黑盒和白盒相结合 黑盒测试：基于软件设计规范设计测试用例 白盒测试：基于代码覆盖情况设计测试用例 利用Xunit测试框架提高测试用例实现效率 / 利用Coverage工具获得代码覆盖情况 组件测试—Rational解决方案 组件测试理念 边开发边测试 减少对软件开发自身的影响 无需学习测试脚本语言 软件测试工具 Purify：自动定位内存相关错误 Quantify：发现程序的性能瓶颈 Coverage：发现未被测试的代码 Test RealTime：针对嵌入式系统软件组件测试 系统测试 主要由测试部门进行 为测试工程师提供良好的职业发展道路 测试经理 测试分析员 测试员 增强测试团队和开发团队的沟通 明确定义并贯彻的测试过程是测试自动化的重要前提 系统测试过程—测试计划 输入：软件需求书 输出：测试计划书 系统测试过程—测试设计 输入：软件测试计划书 输出：软件测试大纲 系统测试过程—测试开发 测试脚本 手工测试脚本 自动化测试脚本 系统测试过程—测试执行 测试执行 进行测试执行管理 运行测试 记录测试结果，包括缺陷报告和测试日志 系统测试过程—测试评估 测试评估 统计和分析测试结果，确定是否达到软件发布的标准 系统测试过程—缺陷跟踪 缺陷跟踪 记录测试发现的缺陷或用户问题，并且跟踪、管理缺陷的状态变更 系统测试度量 测试覆盖率：评价测试的完备性 需求覆盖率 代码覆盖率 测试报告 Defect Density Defect Aging Defect Trend 性能指标 动态监控 响应时间/吞吐量报告 百分比报告 Rational系统测试方案 软件工具是完美过程得以成功实施的重要保证 Rational TeamTest TestManager： 集中、可伸缩的测试管理平台 Robot：传统应用自动化测试工具 RobotJ：Web/Java自动测试工具 ClearQuest：缺陷跟踪工具 TestManager: 控制中心 Rational TestManager: 跨越整个测试周期 TestManager和ClearQuest集成 自动实现缺陷与需求之间的关联 测试度量: 覆盖, 趋势等 Rational系统测试方案 GUI自动化测试 设计测试用例，并手工进行测试。 如果测试未通过，则先改正缺陷，再次执行测试。 如果测试通过，利用测试工具运行该测试过程，捕获运行过程需要检测的屏幕对象，并保存。 在进行回归测试测试，自动利用测试工具运行测试，并比较运行过程的屏幕对象与保存的屏幕对象比较，从而判断测试用例是否通过。 利用Robot进行基于GUI的自动功能测试 和白盒工具集成 RobotJ：测试Java和Web应用 ScriptAssure: 降低了测试脚本的维护成本 动态数据验证：可伸缩的测试脚本 动态内容匹配 利用模式匹配技术来验证数据 业界标准的IDE和测试脚本语言 Eclipse集成环境 调试器、代码编辑器 使用标准的Java语言作为测试脚本语言 版本控制: 管理代码的变更 与ClearCase和ClearCase LT集成 简单的check in/check out操作 对脚本文件和对象映射文件进行版本控制 保证测试人员不互相干扰 正确认识测试自动化 不现实的期望注定测试自动化的失败 测试自动化能： 显著降低重复手工测试的时间 建立可靠、重复的测试，减少认为错误 增强测试质量和覆盖率 测试自动化不能： 完全替代手工测试和手工测试工程师 保证100%的测试覆盖率 弥补测试实践的不足 测试自动化项目的本质 定义：利用GUI自动化测试工具来开发和执行测试脚本，从而验证是否满足需求 本质：测试自动化项目本质上是软件开发项目 一个测试自动化项目必须具有： 清晰定义并严格实施的过程 来自组织各级的支持 周密的计划 具体的设计和架构 测试自动化成本/收益分析 什么是Data-Driven? 什么是性能测试？ 模拟实际用户负载，测试系统的：反应速度，最大用户，系统最优配置、软硬件性能等 利用Robot和TestManager进行性能测试 Rational全方位服务保证测试成功 Rational Developer