试卷质量分析漫谈.ppt

试卷质量分析漫谈 翟建才 第三军医大学训练部 考试中心 第一页，共三十页。 目 录 一、考试和试卷 二、高质量试卷的基本要求 三、决定试题质量的主要因素 四、试卷质量分析的目的和意义 五、试卷质量分析的内容 六、工作进度和基本要求 第二页，共三十页。 一、考试和试卷 考试是各类各级教育管理机构了解教学状况、对学生的学习目标达成度给予认定的重要手段，也是一种对教、学的阶段性效果的评估手段。历来是选拔人才和认证资格的公认工具。 作为考试载体形式的试卷的质量对于教育和人才的质量控制有着至关重要的作用。 第三页，共三十页。 教育部2007年启动实施“高等学校本科教学质量与教学改革工程”（简称质量工程） 创造安全、便捷、高效的考试平台。 ----2007年高教1号文件 第四页，共三十页。 教育部2007年启动实施“高等学校本科教学质量与教学改革工程”（简称质量工程） “进一步完善高等学校的内部质量监控和评价体系。…完善教师、院系、学校三级质量保障机制，逐步建立保证教学质量不断提高的长效机制。” --- 2007年高教2号文件 第五页，共三十页。 本科教学工作评价指标体系 5.5 质量控制 5.5.2教学过程质量监控 A级指标：“监控体系完善，能及时对主要教学环节和教学阶段进行检查、调控，效果明显。” 5.5.3试卷质量与考核方式 A级指标： “试题库完善，试卷质量高；考核方式符合课程要求，有利于提高学员的综合素质。” 第六页，共三十页。 二、高质量试卷的基本要求 先决条件：建有一个数量庞大、质量优异的试题库是使得试卷质量高的先决条件。 基本要求：客观、科学、公正、有效是对考试也是对试卷的基本要求。 第七页，共三十页。 三、决定试题质量的主要因素 命题 命题必须熟悉和明确考试的内容领域和相应的行为目标。内容结构领域即不同方面知识的比例划分，行为目标即认知程度的设定。命题的核心问题是测量什么（即考试内容范围的确定）、如何测量（讲的是题型的选定）以及数量多少（包括总题量和上述各考察项目的具体数量）。 试题的生命在于试题本身能够提供的信息量的大小，它和试题质量紧密相关。因此，命题时必须十分关注试题背景材料的选定。 第八页，共三十页。 三、决定试题质量的主要因素 组卷 影响试卷质量除试题本身给出的内容和指标外，还应该包括组成试卷后整体质量的评估指标体系，它们是试卷的考试重点内容覆盖面、试卷的题量和难易度是否和考试时间适配、试卷的规范性、制卷过失率以及与测试目标的符合程度等项目。 就我们多年教学督导的结果来看，组卷方面的不足也不可忽视。 第九页，共三十页。 四、试卷质量分析的目的和意义 目的： 1 主要是通过考试结果的实际数据来做出学生成绩分布曲线，以及对分组成绩的相关性分析来评价本次考试、试题以及组卷的信度、效度、难度和区分度等赋值。 2 利用试卷的质量评价综合指标来校验组卷时的设计方案的符合程度，并根据这种偏离来确定是否需要对评分予以调整，并确定是否需要对试题的属性指标作必要的修正。 3 从试卷质量分析入手，做好教学质量的评估、反馈和控制。 第十页，共三十页。 四、试卷质量分析的目的和意义 意义： 无论是试题还是试卷的质量指标，都是需要通过考试的结果作为基本数据来确定的。此外。我们还可以从考试结果的实际数据来分析知识点、学科整体的教和学两方面的成绩与不足，给出评价性意见。横向比较学生其它学科和同学科其它学生的学习情况，以及纵向比较近几年的分析结果对教学质量给出建议性结果。总之一句话：试卷质量分析是提高教学质量的长效机制的重要组成部分。 第十一页，共三十页。 五、试卷质量分析的内容 试卷的质量分析主要包括两方面的内容：试卷质量的统计性分析以及教学质量的诊断和可能性分析。目前对前者的研究相对地还比较充分，而对后者的研究和应用则欠缺得多。究其原因主要有两条：一是缺少指标体系，二是缺少功能执行主体。我们对前者主要是介绍统计学方法在教育测量学方面的应用，对后者主要是根据我们的教学经验和理论学习提供一些建设性意见，供大家参考 。 第十二页，共三十页。 五、试卷质量分析的内容 统计性分析：信度、效度、难易度和区分度是教育测量学的质量评价的常用统计学指标，有着严格定义而且规定了相应的计算方法和公式。试卷质量分析的基本依据也主要采用这四个指标。下面我们仅只介绍它们的内涵，而省去了计算方法和公式的讨论。 第十三页，共三十页。 信度和效度 信度和效度是对考试成绩的期望值与真值偏差的概率评价分析。 效度是对总误差，特别是系统误差的赋