《计算机辅助教育测量与评价》-电子教案-蔡旻君 第3章.pdf

第3章 教育测量与评价的质量分析 中国水利水电出版社 3.1 信度  3.1.1 同质性信度  3.1.2 分半信度  3.1.3 再测信度  3.1.4 评分者的信度 3.1 信度 测验的信度是指测验结果的可靠性或可靠程度。所谓 可靠性是指对同一组对象进行两次相同测量所得结果的一致 性和稳定性程度。常用的信度估计方法有：  计算测验内部各项目的得分的一致性，得到同质性信度；  用同一测验对同一组被试，前后测验两次，据两次测验分 数计算其相关系数，得到再测信度；  当一种测验只能施行一次且没有复本时，可按测验题目的 奇偶数分两半计分，求相关系数，经校正得到分半信度。 同质性信度 同质性信度也称为内部一致性信度， 是指测验内部所有项目的一致性。常用的 估计方法有克伦巴赫系数等。 同质性信度 对于信度系数，应该注意以下要点： （1）Cronbach的信度系数衡量的是测量某一心 理结构的一组试题测量结果的可靠程度。 （2）理论上说，Cronbach的信度系数取值范围 在0到1之间，但实际上95%的测量的系数在 0.50到0.90之间。根据Nunnally （1967），信 度系数的不同范围，反映出测量量表的不同问 题。 同质性信度 信度系数的解释（Nunnally，1967） 同质性信度 （3 ）Cronbach 的信度系数可以表示成试卷的试 题数与试题间平均相关系数的函数，即信度系 数的标准化形式： n r  1 (n 1)r   由公式可见，试题数增加，信度系数增加。 若试题间相关系数的平均值低，信度系数就比 较低；反之，信度系数就比较高。 同质性信度 （4 ）如果信度系数高，说明试题间的相关系数 平均值比较高，考生在某道试题上得高分，在另 一道试题上得高分的概率就比较高，这可能说明 这些试题测量的是单一的心理结构。 （5）如果信度系数较低，说明试题间相关系数 平均值较低，这暗示数据可能存在多维结构。在 这种情况下，需要进行因子分析，确定数据维 度。然后，对同一维度的试题计算信度系数。 同质性信度 （6 ）Cronbach在2004年已经提出，不应 再将信度系数看作是考试结果信度的主 要衡量指标，应该用标准测量误差来衡 量考试结果的信度。标准测量误差与信 s 度系数以及考试的标准偏差 相关： s s 1 e 分半信度 分半信度是在测试以后对测试项目按 奇项、偶项或其他标准分成两半，分别记 分，由两半分数之间的相关系数得到信度 系数。 分半信度 由于分半，所求得的相关系数只是半 个测验的信度，可能会高估原测验的信度， 因此需要根据斯皮尔曼—布朗公式校正： 2r hh r 1 r  hh 其中：为两半测验分数的相关系数。 再测信度 同一个测验项目，对同一组人员进行 前后两次测试，两次测试所得分数的相关 系数即为再测信度。它反映两次测验结果 有无变动，也就是测验分数的稳定程度， 故又称