第七章人员测评的信度与效度.ppt

第七章 人员测评的信度与效度 6.1人员测评的可靠性——信度 6.1.1信度的定义 信度主要是指测评结果的可靠性或一致性。 由测评工具否精确引起的误差叫系统误差。 由操作是否到位引起的误差叫随机误差。 信度考虑两方面的问题。 一是稳定性：不同时间、不同测评条件下所得分数之间的一致性有多大；一个人的所得分数与“真实分数”之间接近程度有多大；是否可以达到实际应用的程度等。 二是影响稳定性的原因：什么因素造成了这种差异；这些影响的相对作用有多大。 6.1.2 信度的作用 信度高低的指标通常以相关系数表示，称为信度系数。信度系数一般是同一样本所得的两组资料的相关，在理论上表示为实得分数与真实分数相关的平方。信度系数公式： 还可通过分析个人分数再测时的变化（误差）来考察信度。两次测评分数的差异越大，信度就越低。 在人员测评中，对信度系数进行确定通常有以下两方面的作用： 1．解释真实分数与实得分数的相关性 总的方差（即标准差的平方的缩略语）中有多少比例是由真实分数的方差决定的。 2．说明可以接受的信度水准 一般的能力与成就测评的信度系数在0．90以上；人格、兴趣等测评的信度系数通常在0．80－0.85之间。 rxx＜0．70时，不能用测评对个人作评价，也不能在团体间作比较； 当rxx＞0．70时，可用于团体间比较；rxx＞0．85时，可用于鉴别个人情况。 6.1.3 如何评估人员测评的信度 1.重测信度又称为稳定性系数 用同一测评，在不同时间对同一群体施测 N为两次测评结果数据配对总数；x被分析的测评结果；y为重复测评得到的结果。在进行重测信度的评估时，还应注意以下两个重要问题： 1）重测信度一般只反映由随机因素导致的变化，而不反映被试行为的长久变化。 2）不同行为受随机误差的影响不同。 2.复本信度又称等值性系数。 它是以两个测评复本（功能等值但题目内容不同）来测评同一群体，然后求得应试者在这两个测评上得分的相关系数（积差相关）。复本信度的高低反映了这两个测评复本在内容上的等值性程度。两个等值的测评互为复本。 3．内部一致性信度 内部一致性信度主要反映的是测评内部题目之间的关系，考察测评的各个题目是否测评了相同的内容或特质。 1）分半信度 分半信度系数是通过将测评分成两半，计算这两半测评之间的相关性而获得的信度系数。 分半法经常会低估信度，必须进行修正。斯皮尔曼一布朗公式可以估计增长或缩短一个测评对其信度系数的影响，用这个公式进行修正的前提条件为：两半测评的方差相等。 分半法中的斯皮尔曼一布朗修正公式为： 卢伦公式只要求将被试在两半测评的分数之差的方差（Sd2）和测评总分的方差(Sx2)代入如下公式即可直接计算分半信度： 2）同质性信度 同质性是指所有测评题目测评的只是单一特质或内容，表现为所有测评题目得分的一致性。乐观情绪特质和外向特质、预测和决策、监督与控制等都是不太容易区分的。 如果需要在一个测评中测评不同的内容，就应该将测评设计为几个分测评，每个分测评测评一种内容。例如，16PF人格测评就是包含16个分量表的测评，每个分量表只对一种人格特质进行测评。 常用的同质性信度计算方法是库德—理查逊估计方法。计算公式有库德—理查逊20号公式（简称（KR20）和21号公式（KR21）。 下面是KR20公式： 6.1.4 评分者信度 在有些测评中，评分者的评判也是误差的来源之一。 评分者信度是指不同评分者对同样对象进行评定时的一致性。最简单的估计方法就是随机抽取若干份答卷，由两个独立的评分者打分，再求每份答卷两个评判分数的相关系数。这种相关系数的计算可以用积差相关方法。 如果评分者在三人以上，而且又采用等级记分时，就需要用肯德尔和谐系数来求评分者信度。其公式为： 其中，K为评分者人数，N为被评定的人数或答卷数；Ri为评分者给某人（或某一答卷）评分之和。 为每一个对象被评等级。 6.1.5 影响信度的因素 1．样本团体的性质 1)样本团体的分数分布 分数分布越广，信度系数就相对越