05信度和效度.ppt

第四章测量的信度与效度 第一节 信度（reliability） 本节的主要问题： 测量误差及其种类 经典测量理论 信度的界定 信度的估计 再测，复本，分半，同质性，评分者 信度系数的解释意义 测量的标准误 一、心理测量的误差 1．测量误差及其种类 2．经典测量理论 3．测量误差的来源 测量误差（measurement error） 什么是误差？ 取决于你如何定义它 测量误差的界定 测量中与目的（或理论构想）无关的变因产生的不准确或不一致效应 与测量无关的因素所造成的影响。 误差：分数变异的来源（Thorndike, 1949） Listing and general characteristics of individuals 与测验内容直间接有关的一般性特征个别差异 Listing but specific characteristics of individuals 与测验内容直间接有关的特定部分个别差异 Temporary but general characteristics of individuals 与测验内容直间接关连的暂时性一般性个别差异 Temporary but specific characteristics of individuals 与测验内容直间接关连的暂时性特定性个别差异 Testing situation that could lead to inconsistency in test scores 情境因素 Chance factors that may affect test scores 其它机遇因素 误差的种类 统计上来讲，即“真正变异”以外任何引起测量分数的变异。 两种误差 随机误差 系统误差 Example 系统误差（systematic errors） 系统误差(systemtic errors)只要使用测量工具就会产生。 它是无关变量引起的有规律的误差。 它会对测量结果产生一致性固定的影响。 是一种衡向的、定值的易控误差。 随机误差（random error） 随机误差又称非系统误差，是施测者无法控制的。 无规律可循的误差。 主要是来自被试身心状况(情绪、性格、动机…)、情境因素(噪音、太太在场、赶飞机、太热…)、及测量内容(内容太长、太难…)等等的干扰影响。 是一种双向的（可正可负）、变值的（可大可小）难控误差。 经典测量理论（Classic Test Theory, CTT） 获得分数（观测值） 被试参加测试后所得的分数 真分数（参数值即纯正值） 在无误差时，被试应得的分数 获得分数≠真分数！ CTT认为：获得分数反映了两类因素的作用： 真分数（True Score, T） 测量误差（measurement error, E） CTT 所以，观测分数 = 真分数 + 误差分数 对于个体： X=T+E E0，XT E0，XT E=0，X=T 对于团体： X=T+E SX2=ST2+SE2 CTT：真分数模型 真分数 数学公式： 测量公式： CTT：测量误差 抽样误差（可以忽略） 标准误 系统误差和测量误差（不可忽略） CTT：基本定理与假设 定理一：观察分数是真分数与误差分数之和。 定理二：真分数与观测分数的平均数相等。 定理三：误差分数的期望值为0，即平均误差为0。 定理四：真分数与测量误差的相关为0。 定理五：不同测量误差之间的相关为0。 定理六：测验观测分数的方差等于真分数方差和误差方差之和。 观测分数变异的分解 SX2 = ST2 + SE2 获得分数的变异 = 真分数的变异 + 随机误差的变异 系统误差呢？ ST2 = SV2 + SI2 系统误差变异隐含在真分数变异中 真分数的变异 = 潜在真分数的变异 + 系统误差的变异 SX2 = SV2 + SI2 + SE2 获得分数的变异 =潜在真分数的变异 + 系统误差的变异+ 随机误差的变异 观测分数变异的分解：图示 测量误差的来源 测验内部 特质的内隐性（间接性） 取样的代表性：取样误差 题型的猜测性：测量工具的设计及形式 表述的模糊性：语义不清、编排不良等 测量误差的来源 施测过程 测验环境 主试因素 主试的解释、重述、语气、态度、肢体动作、反馈等等 光环效应、首映效应等等 意外干扰 评分计分 数据的分析处理不当 测量误差的来源 被试本身 应试动机 测验焦虑 练习效应 测验经验 反应倾向 生理变因 二、信度概念 你如何解释下述现象？ 一个很聪明的孩子，测得离差智商是80分（平均数为100分） 一个学习很好的学生，考试成绩为60分（满分100分） 一个人缘很好的人，人际关系测量低于常模值 测量的标准 信度 效度 无污染（混淆） 无缺陷（标准化） 信