4个性能评价测度.doc

VQEG给出了评估视频质量评价模型性能的方法[3，3]，主要是根据某些模型性能评估参数对客观模型得到的评分和主观质量评价的评分进行分析，从而评估模型的预测准确度和预测一致性。VQEG给出的模型性能评估参数为： 均方根误差（Root Mean Square Error，RMSE） Pearson线性相关系数（Pearson Linear Correlation Coefficient） Spearman秩相关系数（Spearman Rank Order Correlation Coefficient） 背离率（Outlier Ratio，OR） 设视频序列的总数为N，Si表示序列i的主观质量评分，Pi表示其客观质量得分，下面是几个常用的评估参数的定义： 均方根误差 均方根误差能够反映模型的预测准确度，均方根误差越小，说明模型的预测越准确；相反则误差越大，模型的预测越不准确。 Pearson线性相关系数 其中，为各序列客观评分Pi的均值，为各序列主观评分Si的均值。 Pearson线性相关系数能够反应模型的预测准确度。它是区间[-1, 1]上的值，其绝对值越接近于1，表明预测准确度越高。 Spearman秩相关系数 其中，其中分别表示Si与Pi在各自评分组里面的名次序号。这里的名次是指将N个视频序列的主、客观评分分别按照一定的顺序，如从大到小或者从小到大，排列起来之后的序号。 Spearman秩相关系数能够反映模型的预测单调性。它也是区间[-1, l]上的一个值，其绝对值越接近1，表明预测单调性越好。 背离率 其中，表示所有客观评分满足的个数，表示视频序列i的主观质量评分的标准方差。 背离率能够反映模型的预测一致性。较小的OR反映模型具有较好的预测稳定性。