课件：问卷与量表的编制.ppt

效度估计方法 （1）内容效度 表示测验所选的题目（测题）符合所欲测验内容的程度。是测验题目对有关内容或行为总体取样的适当性程度。用于成就测验，不适合能力倾向和人格测验 确定内容效度的方法： ? 逻辑法：专家判断，专家对测验题目进行考核，看测验是否能够测出所要测的内容； ? 经验法：经验判断，通过实践检查测验能否测出欲测的内容。 ?统计法：抽取两套平行测验，测同批被试求相关 (2)结构效度，也叫构想效度，表示测验实际测量出所欲测量的心理结构或特征的程度。用一个结构框架去衡量效度。构思效度无单一指标，由各方面证据累积直接来作出评价。 确定方法：测验内部方法(内容效度、同质性信度)，测验间方法(求与效度高测量相同特质的旧测验的相关或与不同特质的测验的相关；因素分析法)，效标效度研究，实验和观察法验证 （3）效标关联效度 又称效标效度，实证效度或准则关联效度。它是测验分数与作为效标的另一独立测验结果之间的一致性程度；或测验总分数与外在标准之间的相关程度，反映的是用测验预测个体在某种情境下行为表现如何的有效性程度。 同时效度：效标资料与测验分数同时获得。主要用来查明新编测验的效度。 预测效度：效标分数在测验之后相当长时间获得。主要用来评价测验的预测能力。反映从测验分数预测任何效标情境或一段时间后被试的行为表现程度 常用效标：学业成就，临床诊断，实际工作表现，特殊训练成绩，效标团体比较，先前有效测验，等级评定。 实证效度确定方法 相关法 ：计算测验分数与效标分数的相关系数 区分法：被试接受测验并工作一段时间后，根据其工作成绩分成好坏两组，比较两组原测验分数 命中率：正命中率(测验选出的人中合格中所占比例)；总命中率(测验所选出的人中合格人数，淘汰的人中不合格的人数和与总人数之比) （4）表面效度 它是一个测验看起来好像是测量所要测的东西的程度，不是效度，不反映测验正测量的东西，只是外行人的一种评价。 影响效度的因素 1） 测验本身因素，包括：测验题目质量，测验长度，测验实施中的干扰，被试因素，增加测验误差，降低测验效应。 2） 测验施测的样本性质，样本同质性越高，效度越低。不同团体对同一测验反应可能不同；同一测验，效度团体性质不同；样本团体的异质性 3） 效标的性质：若其它条件一样，所测量的行为或心理特质与效标行为或特质越相似，效度系数就越高 信度和效度的关系 St2=Sco2+Ssp2+Se2 St2 :总分变差。 Sco2 :由所测量的心理特性引起的主要变差。 Ssp2 :由与所测量的特性无关的其它个别性质所造成的变差（系统误差引起的变差）。 Se2 :误差变异。 rtt=(Sco2+Ssp2) / St2 ； Val= Sco2 / St2 信度和效度的关系说明： 相同：信度和效度是以相关系统来表示的 不同：涉及的误差不同，信度仅考虑偶然的随机误差占测验总变异的比例；效度则还包括与测验无关但稳定的测量误差 联系： 1）信度是效度的必要而非充分条件，信度越高，效度不一定越高 2）效度是受信度制约的，在同一个测验里其信度必然高于效度，至少相等。 3、项目分析（难度和鉴别力） 测验的好坏与项目（测题）的选择有很大的关系，好的测题是鉴别力高并且难度适宜的项目。 项目分析三内容 1） 诱答分析：每个项目只有一个正确答案其余均为诱答。 2） 难度分析：通过率：回答某个项目的样本中，正确回答该项目的人数P=R/N*100。 3） 鉴别力分析：鉴别力是对于所测量的心理特性的区分能力。 （1）项目难度 项目难度是衡量测题难易水平的数量指标。估计项目难度的方法通常是以被试通过每个项目的百分比来决定的，如果一个项目通过百分比太高或太低，说明该项目太易或太难，一般情况下这两个项目应该删除。 通过率：回答某个项目的样本中，正确回答该项目的人数P=R/N*100， 二分法记分项目的难度 通过率 极端分组法 非二分法记分项目的难度 （2）项目鉴别力（区分度） 它是衡量测题对不同水平被试区分程度的指标。如果一个测题鉴别力高，那么水平高的或能力强的被试就得高分，否则得低分，这样就能把不同水平得被试区分开来。 估计鉴别力方法通常是以不同水平的被试通过每个项目的百分比之差来决定（D=PH-PL） 。 计算公式 鉴别指数法：PH-PL 相关法 (3)区分度与难度关系 项目通过率 D的最大值 1.00 0.00 0.90 0.20 0.