《心理测量的质量标准1.ppt

心理测量的质量标准 “测不准”的应对 测量误差 误差 误差的种类 产生误差的因素 误差的控制 误差的估计 测量误差的认识 误差：由与测量目标无关的变因所引起的不准确和不一致的效应。 随机误差：偶然因素所引起的误差。影响测验结果的一致性。 系统误差：稳定因素所引起的误差。影响结果的准确性。 误差的影响因素 CTT对误差的分析：真分数理论 真分数：即是测量中不存在测量误差时的真值或客观值。操作性定义就是无数次测量的平均值。通常用T或X?表示。 基本方程式：X=T+E，T=V+I其中X为实测分数，V为有效分数，I为系统误差。 基本假设：（1）误差分数的平均数为0；（2）误差分数与真分数相互独立，即相关为零。（3）两次测量误差分数之间相关为零。 方差分离：SX2=SV2+SI2+SE2 现代测量理论（GT）对误差的认识 GT对误差的分类 相对误差（?）：所有随机误差的和 绝对误差（ Δ ）：样本观测值与全域分数的差，其中包含了所有的误差。 CTT对随机误差的分析：信度 信度定义 信度的估计 影响信度的因素 几点说明 信度的定义 语词定义：反应测量一致性程度的指标。 理论定义：两个方差的比值 信度估计的方法 再测信度：时间 复本信度：工具 分半信度：内容 同质信度：项目 评分者信度：记分 重测信度 定义：对同一被试总体进行重复测量的两组数据之间的一致性程度的量化指标 估计方法：Pearson相关 误差来源：（1）间隔时间短，记忆的影响；（2）练习效应；（3）时间间隔长，其它因素，如学习、发育、额外训练的影响。 实质：考虑时间的影响。所以又叫稳定性系数 使用的前提条件：（1）测量的特质必须是稳定的。（2）遗忘与与练习相当。（3）无特殊学习与训练。 复本信度 定义：两个平行测验测量同一批被试所得结果的一致性程度。 种类（按实施的时间）：（1）同时——等值性系数，反映项目之间的差异；（2）间隔一段时间——稳定性与等值性系数，反映项目与施测环境、时间等的差异。 估计方法：相关 分半信度 定义：将一个测验分成对等的两半后，所有被试在这两半测验上所得分数的一致性程度。 估计方法：（1）Spearman—Brown公式（2）Flanagan公式（3）Rulon公式 使用条件：两组差异相等，无复本。 分半方法：随机、奇偶、匹配（难度、内容）等 内部一致性系数 定义：又称同质信度，测验内部所有项目之间的一致性程度。包括：所有项目测量同一种特质，项目得分高度相关。 估计方法：KR20、KR21、Cronbach?系数 评分者信度 定义：多个评分者给同一批人的答案评分的一致性程度。 估计方法：Kendall W系数、U系数 影响信度的因素 分数的分布范围：越宽越高 测验长度的影响：越长越高 测试者的能力水平：影响到难度 测验难度的影响。太难，越小，趋近于0 几点说明 不同类型的测验需要选择不同的估计方法，以上的方法是比较常用的方法，主要使用于常模测验，目标参照常用概化理论及其它方法（如分类一致性指数）。 信度范围：针对不同测验要求不同。如，标准化能力、学绩测验需要0.90以上，人格测验0.80以上，自编测验0.60以上。 信度提高的方法 CTT对系统误差的分析：效度 定义：测验能够测出它所欲测的特质的程度。 效度概念的演变：内容、效标关联和构想（结构）效度，其中最主要的是构想效度。 常用的效度概念 效度的估计方法 效度概念的发展 常用效度概念 内容效度：指测验内容对于其所欲测的行为领域的代表性程度。对教育成就测验尤为重要。 效标关联效度：一个测验对处于特定情境中的个体的行为进行预测时的有效性。有时又叫预测效度。常用的效标（被预测的行为同时又检验测验效度的标准）有学习成绩、工作成就、特殊训练成绩、临床诊断、团体比较、现成测验等。效标的选择和使用非常重要，特别其具有时效性的特征。主要用于：预测、分类、甑选、人员安置等。 构想效度：测验对被称作构想的某一理论概念或特质的测量程度。构想的两个特性为（1）对本质规律的抽象和概括。（2）与具体的可观察的本质和事件相联系。应用是对于分数的解释和应用。 效度的估计 影响效度的因素 引起误差的因素——测量的信度 测量目标——选择一定的效标 被试群体的影响——被试自身的特征 估计方法的影响——跟测验目的有相应的联系 CTT项目分析 目标：通过项目参数的分析，保障每个项目的质量。 内容：难度和区分度 方法：统计分析 难度 难度：难易程度。 计算：通过率。 影响因素：测量目标的影响，如目标还是常模参照测验。测验的用途：诊断或选拔、人员分配等。 区分度 区分度：特质水平的区分和鉴别程度。 计算：点二列、二列、??相关、四分相关、PEARSON相关、鉴别指数（D） 两种效应：地板效应和天花板