PISA能力水平量表的构建和其启示.pdf

●理论与技术 教 育 测 量 ㈦ 评 PISA能力水平量表的构建及其启示 价 陆 璟 【摘 要】PISA把学生能力水平（proficiency level）区分为多个等级，不仅能反映学生所处的相对位置并比较各国学 生的能力水平分布和竞争力，还能通过描述每一级水平所对应的题目难度和题目要求，以及每一级水平所对应的学 生表现特点，对常模参照测验作出标准参照的解释，使人们更好地了解分数所代表的意义。本文简要介绍了PISA能 力水平量表的建构过程和方法，为大规模考试结果的分析提供借鉴。 【关键词】PISA ；能力水平；精熟度水平 【中图分类号】G40- 058.1 【文献标识码】A 【文章编号】1674- 1536（2010）09- 0009- 06 一、题目难度与学生能力的关系概述 二、分析和判定试题所测评的能力 学生在某个测试中表现出来的相对能力可以通 PISA 技术手册将“分析和判定试题所测评的能 过他们答对的题目比例予以估计，而测试题目的相 力”这一工作称为 “开发各试题对应能力的描述量 对难度则可以通过答对题目的人数比例予以估计。 表”，它包括多个步骤，下面以线性的方式一步一步 分析PISA 数据所用的数学模型就是通过上述两个 描述，但需要明确的是，在实际操作时，该量表是可 [1] 同时进行的互动过程实现的，即估计个体答对某道 以来回反复修改的。 测试题目的概率，同时也估计某道题目被一组特定 1. 确定主要测试领域的分量表 学生答对的概率。这两个过程的结果是得到一系列 由于PISA 测评的框架考虑了多个维度，所以 估计值，形成一个同时反映题目难度和对应的学生 我们可以从多个维度来确定报告的分量表。PISA 能力的连续量表。在这个连续量表上我们可以估计 2000 的阅读分量表实际上有两种，一种是按阅读任 学生个人的位置，看看他们表现出来的能力水平，也 务分类来做的，一种是按阅读材料分类来做的，但是 可以估计某道测试题目的位置，看看这道测试题目 国际报告只采用了按阅读任务分类的分量表，即检 所体现的能力水平。 一旦量表上给出了每道测 试题目的难度，我们就可以预 期每个学生所能回答的最难题 目的难度水平，并据此给学生 一个分数来描述他们的成绩。 这并不是说学生总是只能完成 等于或低于他们在量表上所处 难度水平的题目，永远不可能 做更难的题目，而是说，评估是 以概率为基础进行判断的。如 图1 所示，相对而言，学生有较 高可能完成低于他们对应难度 等级的题目（题目难度越低，完 成的可能性越大），而不太可能 完成那些难度更高的题目。 陆 璟/上海市教育科学研究院普通教育研究所副所长，副研究员，国际学生评估项目中国上海项目组秘书长。 （上海 200032） 9