第六章测验的项目.ppt

第六章 测验的项目分析第二节 测验的区分度 二、区分度的计算 （二）相关法 2、二列相关 项目也是正态连续变量，但被人为地分成答对、答错或通过、未通过类，效标或总分是正态连续变量。 第六章 测验的项目分析第二节 测验的区分度 二、区分度的计算 （二）相关法 3、φ相关 用系数作为区分度指标时，要求项目反应与效标变量都是二分状态。一般是根据效标成绩或测验总分的高分组或低分组，通过和未通过某一项目的人数列成的四格表来计算。 第六章 测验的项目分析第二节 测验的区分度 二、区分度的计算 （二）相关法 4、积差相关 项目与总分均为连续变量。 第六章 测验的项目分析第二节 测验的区分度 二、区分度的计算 （二）相关法 在实际研究中，不仅要报告相关系数的大小，还要将计算区分度的方法报告出来，以及相关是否达到了显著性水平。 用项目总分相关来表示区分度的优点是：比较熟悉，容易检验它的统计显著性，容易判断出现实意义。 如，项目总分系数r为0.40，就可以知道项目能解释测验分数的16%的变化。 第六章 测验的项目分析第二节 测验的区分度 三、区分度与难度的关系 难度（Ｐ） 区分度（Ｄ） 1.00 0.00 0.90 0.20 0.80 0.40 0.70 0.60 0.60 0.80 0.50 1.00 0.40 0.80 0.30 0.60 0.20 0.40 0.10 0.20 0.00 0.00 第六章 测验的项目分析第二节 测验的区分度 三、区分度与难度的关系 上表是项目难度与D的最大值的关系。 例，难度接近0.50时，项目潜在的区分度越大。 在实际编制测验时，并不能使所有的项目都保持在0.50的难度水平。 一般使项目的平均难度接近0.50，而各个项目的难度在0.50± 0.20之间变化。 这样，能把各种水平的人都区分开来。 第六章 测验的项目分析第二节 测验的区分度 三、区分度与难度的关系 难度和区分度都是相对的，是针对一定团体而言的，绝对难度和区分度是不存在的。 一般来说，较难的项目对高水平被试区分度高，较易的项目对水平低的被试区分度高，中等难度的项目对中等水平的被试区分度高。 这与中等难度的项目区分度最高的说法并不矛盾，因为对被试总体是较难或较易的项目，对水平高或水平低的被试则成了中等难度。 第六章 测验的项目分析 概述 （一）引言 什么是好的测验？ 信度、效度 信度和效度分析是对测验质量的整体评价 一个好的测验肯定有好的项目 概述 （一）引言 那什么是好的项目呢？ 编制一个拥有良好项目的测验是很难的。 幸好，我们有一种方法，它能够帮助我们知道什么样的项目是好的，什么样的项目是模棱两可的，是太简单或太难的，是不能够测出个体差异的，也就是需要修改或删除的。 概述 （二）项目分析 这种方法就是项目分析(item analysis)。 项目分析是对组成测验的每个项目进行分析。 项目分析的目的是通过分析改进项目统计量进而提高测验的信度和效度。 项目分析包括质的分析和量的分析。 概述 （二）项目分析 质的分析是对项目质量的逻辑分析，主要是依靠测验编制者丰富的经验和所受的训练，对项目的内容和形式是否得当进行分析。 如：项目的代表性、项目与所要测量的特质的关联性、项目是否适合被试团体等。主要考虑内容效度、题目编写的恰当性和有效性等。 概述 （二）项目分析 量的分析：通过计算项目的一些统计量作为项目质量高低的指标，进而挑选和修改项目，主要包括难度分析和区分度分析。 质的分析和量的分析要有效的结合起来。 量的分析提供了项目质量的客观指标。 质的分析提供了项目质量的逻辑依据。 第六章 测验的项目分析 第一节 测验的难度 第二节 测验的区分度 第三节 猜测问题与猜测率 第四节 多重选择题的项目分析 第六章 测验的项目分析第一节 测验的难度 一、难度的意义 难度是表示项目难易程度的指标。在最优作业测验中，称为“难度”，而在典型反应测验中，则指“通俗性”。两者都是指在总体中，能够正确或确切回答某项目的人数。 第六章 测验的项目分析第一节 测验的难度 一、难度的意义 难度是指测验项目的难易程度。 一个测验项目，如果大部分被试都能答对，则该项目的难度就小；如果大部分被试都不能答对，则该项目的难度就大。 难度是一个相对性的指标，必须通过实践来对难度进行检验。 操作性定义：对大多数测验目的，项目难度被定义为答对项目人数的百分率。 第六章 测验的项目分析第一节 测验的难度 二、难度的计算方法 (一) 二分法记分项目的难度： 1、通过率 P=R/N×100% 其中： P：项目的通过率或项目的难度 R：答对或通过该项目的人数