智能物联网性能检测流程.docxVIP

1

智能物联网性能检测流程

1范围

本标准规定了基于智能物联网应用系统的性能检测相关术语和定义、检测方法和检测流程。本标准适用于基于智能物联网应用系统的通用性能检测。

2规范性引用文件

下列文件对于本文件的应用是必不可少的。凡是注日期的引用文件，仅所注日期的版本适用于本文件。凡是不注日期的引用文件，其必威体育精装版版本（包括所有的修改单）适用于本文件。

GB∕T25000.10-2016系统与软件工程系统与软件质量要求和评价（SQuaRE）第10部分：系统与软件质量模型

GB∕T25000.51-2016系统与软件工程系统与软件质量要求和评价（SQuaRE）第51部分：就绪可用软件产品（RUSP）的质量要求和测试细则

3术语和定义

下列术语和定义适用于本文件。3.1

智能物联网ArtificialIntelligenceInternetofThingsblockchain

通过感知设备，按期约定协议连接物、人、系统和信息资源，在终端设备、边缘域或云中心通过机器学习对数据进行智能化分析，包括定位、比对、预测、调度等，实现对物理和虚拟世界的信息进行处理并作出反应的智能服务系统。

3.2

基准测试Benchmarks

在一定的软件、硬件及网络环境下，模拟一定数量虚拟用户运行一种或多种业务，将测试结果作为基准数据，在系统调优或系统测评中，通过运行相同的业务场景并比较测试结果，确定调优是否达到效果或者为系统的选择提供决策数据。

3.3

压力测试Pressuretest

在一定的软件、硬件及网络环境下，通过模拟大量的虚拟用户向服务器产生负载，使得服务器的资源处于极限状态下长时间连续运行，以测试服务器在高负载情况下是否能够稳定工作。

3.4

峰值测试Peaktest

在一定的软件、硬件及网络环境下，通过运行一种或多种业务在不同虚拟用户数量情况下，测试服务器的性能指标是否在用户的要求范围内，用于确定系统所能承载的最大用户数、最大有效用户数以及不同用户数下的系统响应时间及服务器的资源利用率。

3.5

2

容量测试Capacitytest

在一定的软件、硬件及网络环境下，向数据库中构造不同数量级别的时间记录，在一定的虚拟用户数量情况下运行一种或多种业务，获取不同数据级别的服务器性能指标，以确定数据库的最佳容量和最大容量。

3.6

稳定性测试Stabilitytest

在一定的软件、硬件及网络环境下，通过给系统加载一定的压力，让系统持续运行一段时间，检测系统是否能够稳定运行。

4检测方法

4.1总则

本标准规范的对象是智能物联网性能检测流程。主要针对感知层、网络传输层以及业务应用层三方面概述通用性能测试方法。其通用的性能测试方法包括：基准测试、负载测试、压力测试、容量测试以及稳定性测试。智能物联网架构图如图1所示：

图1智能物联网架构图

4.2基准测试

基准测试是一种可再现性的测试（对于软件产品来来说，同样的数据量标准、硬件标准下性能指标相对确定；对于硬件产品来说，基准测试标准更是固定而明确的），一般首次测试，会把单用户（如果是双节点负载均衡就要双用户）单场景作为基准测试，而对于多轮测试来说，上一轮测试的稳定基准配置，定为新的基准测试标准，因为基准测试的关键是要获得一致的、可再现的结果，为多用户并发测试和综合场景测试等性能分析提供参考依据。故可认为基准测试是最基础的性能测试，如果基准测试的结果不能达到预期要求，后续性能场景就没必要测试。

一般的性能测试往往只在版本计划中或遭遇系统性能问题时进行，而基准测试在日常中进行，当软件增加了新模块或有大的迭代更新，当硬件环境做了优化提升时，特别是在发生重大变更事件（例如：

3

系统配置、环境发生变更）之前与之后的测试，让测试结果数据与一般的性能测试结果数据更有实质上的参考意义。因为，当为系统创建性能基准后，基准数据作为性能指标的参照物，可用于判断任意一项变更为系统带来的具体影响。例如：某项配置优化后能够为系统带来的性能提升是多少、系统某项操作历史数据的增长与性能响应的关系、系统环境的变更对系统性能产生的影响。

基准测试有两种主要的策略：一是针对整个系统的整体测试，另外是单独测试。这两种策略被称为集成式（full-stack）和单组件试（single-component）基准测试。测试方法可参考如下：

a)避免一些常见错误，如：在多用户的场景中，只做单用户的测试；使用默认的服务器配置；反复执行同一个查询等；

b)根据实际情况分析明确基准测试的目标，建立测试和结果文档化的规范；

c)每次执行测试时，都创建单独的目录将测试结果、配置文件、测量指标、脚本等保存下来，确认测试结果是