测验的项目分析(新教材).ppt

测验的项目分析 项目分析的分类 定性分析 包括考虑内容效度，题目编写的恰当性和有效性等。 定量分析 是指对题目难度和区分度等进行分析。 通过项目分析，我们可以选择和修改测验题目，以提高测验的信度和效度。 第一单元 项目的难度 一、定义 难度是指项目的难易程度。 能力测验中反映难度水平的指标。 非能力测验（如人格测验），类似的指标是“通俗性”，即取自相同总体的样本中能在答案方向上回答该题的人数，其计算方法与难度相同。 二. 难度的计算方法 （一）二分法记分的项目 通过记1分，错误记0分 P 代表项目的难度 N 为全体被试者人数 R 为答对或通过该项目的人数 当被试人数较多时，可根据测验总成绩将被试分成三组： 高分组（NH）：分数最高的27%被试 低分组（NL）：分数最低的27%被试 中间组 ：分数中间的46%被试 分别计算高分组和低分组的通过率，以两组通过率的平均值作为每一题的难度。 P 代表难度 PH 高分组通过率 PL 低分组通过率 选择题允许猜测，通过率可能因机遇作用而增大。 吉尔福特难度校正公式 CP 为校正后的通过率 KP为实际得到的通过率 K 为备选答案的数目 （二）非二分法记分的项目 当测验项目为问答题或不能用二分法记分，常常又需对部分正确的反应给一定分数。 为全体被试者在该题上的平均分 Xmax 为该题的满分 三、难度水平的确定 （一）项目的难度 主要目的是为了筛选项目; 项目的难度多高合适，取决于测验的目的、性质以及项目的形式。 P值越接近于0或接近于1，越无法区分被试者之间能力的差异。 相反， P值越接近于0.50，区别力越高。 注意事项 1、当测验用于选拔或诊断时，应该比较多地选择难度值接近录取率的项目。 测验是要辨别或选择少数最优秀的被试者，测验就应该有相当的难度，P值应该较小。 录取率20%?P为20% ? 20% 优秀者通过 测验诊断或筛选出少数较差的被试， P值应该高 筛出率20%?P为80% ? 20% 较差者不能通过 2、对于选择题：一般 P值 概率水平。 P值 = 概率水平： ? 题目可能过难或题意不清，被试凭猜测回答 P值 概率水平：? 无意义，说明题目质量有问题。 对于是非题： P值 = 0.75 最为合适 四选一题目： P值 = 0.63 最为合适 3、为了使测验具有更大的鉴别力，应选择难度在0.50左右的试题比较合适。但P=0.50，试题间的相关将有偏高趋势。 选择题目时，最好使试题的平均难度接近0.50，而各题难度在0.50 ± 0.20之间。 4、区分度取值范围介于-1至+1之间 项目得分与实际能力水平之间呈负相关，则区分度为负值 ? 被试实际能力越高，得分反而越低? 该项目应该淘汰。 呈正相关，则区分度为正值 ? 相关系数越大，区分度越高。 （二）测验的难度 测验的难度直接依赖于组成测验的项目的难度。 人的心理特征呈常态分布。 被试具有代表性，对于中等难度的测验，其测验分数应该接近常态分布。 偏态分布 正偏态分布 大多数得分集中在低分端 编制的测验偏难，必须增加足够数量较容易的项目。 负偏态分布 大多数得分集中在高分端 编制的测验过易，必须增加足够数量较高难度的项目。 第二单元 项目的区分度 一、定义 也叫鉴别力，是指测验项目对被试的心理特征的区分能力。 二、计算方法 （一）鉴别指数 （1）按测验总分高低排列答卷； （2）确定高分组与低分组，每一组取答卷总数的27%； （3）分别计算高分组与低分组在该项目上的通过率或得分率； （4）估计项目区分度： D = PH – PL D为区分度 PH为高分组在该项目上的通过率或得分率 PL为低分组在该项目上的通过率或得分率 理由；高分组在该测验上的得分率高于低分组，则D0，D越大，说明该项目区分两种不同水平的程度越高。则D0，则反映高水平组在该项目上的得分率反而低于低水平组，说明项目有问题。 因此，D可以反映项目得分与测验总分之间的关系，将它作为区分度的指标是合理的。 伊贝尔（L. Ebel）项目鉴别指数与评价标准 0.40以上------很好 0.30-0.39-----良好，修改后会更佳 0.20-0.29-----尚可，但须修改 0.19及以下---差，必须淘汰 （二）相关法----最常用 即以某一项目分数与效标成绩或测验总分的相关作为该项目区分度的指标。相关越高，表明项目越具有区分的功能。 1、点二列相关： 适用于一类变量为二分变量，另一类为连续变量的相关计算。 r pq为点二列相关系数