第七章测试分解.ppt

第五节 质量评估：信度和效度 一、信度：指测量结果的可靠性、一致性和稳定性程度。 1、测验信度的估计 再测信度：稳定性系数，防止练习效应 等值复本信度：测验的等值性，平行试卷 分半信度：反映测验内部一致性程度 2、影响因素 题目数量；题目的同质性(区分性)；题目难易度分布；被试样本的异质程度 二、效度：指测量的有效性和准确性，即测量对它所要测的东西准确测量的程度。 ?针对特定的测量目的而言；程度概念 1、类别： （1）内容效度：实际测验内容与预订测验内容之间的一致性程度。 ?成绩测验最应讲求内容效度，即最强调题目代表性，需要确定测验的范围和各部分的比例。 评判方法：靠经验判断等定性分析的方法进行。 表面效度：指一个测验从表面上看是否测了它所要测的知识或能力。 ?考查书面表达能力可以用写作文的方式和改错句的方式，前者表面效度高，并不一定。 （2）效标关联效度：指测验结果与效标的一致性程度，它评判的是测验结果（分数）与某一特定的准则（效标）的关系的密切程度如何。 效标是指衡量测验有效性的外部标准，通常指测验所要预测的行为。如：学业成就、工作表现、特殊训练成绩、教师对学生等级的评定等。 预测效度：测验分数与一段时间后被试的行为表现之间的相关程度。 共时效度：以测验实施相同或相近时间内搜集到的其他经验性资料为标准。 （3）构想效度：又称为结构效度，是指测验结果与理论构想或特质之间的一致性程度。 第二语言习得理论有许多假说，用测验验证，涉及构想效度 2、影响效度的因素：样本的异质程度；效标的质量；测验本身的质量；测试实施的程序。 三、信度、效度关系 1、信度和效度是测验质量评估的两个重要的方面。 2、测验信度是测验效度的必要前提，效度受到信度的制约。 3、信度高的测验不一定效度高。 阅读文献 1.范开泰《论汉语交际能力的测试》（《第六届国际汉语教学讨论会论文选》） 2.新汉语水平考试（HSK）介绍 语言测试 第一节 概说：发展、作用、学科特点 第二节 语言测试基本类型 第三节 语言测验开发过程 第四节 题目编写和分析方法 第五节 质量评估：信度和效度 第一节 概说 1、语言测试主要发展阶段： （1）传统时期（前科学时期）：20世纪初-50年代初 特点：缺乏语言学理论指导，测试结果的评判缺乏科学性。 作文、口试、翻译等方法。 （2）心理测量-结构主义时期（科学时期）： 20世纪50年代末60年代初-70年代 特点：以结构主义语言学、行为主义心理学、心理测量学为基础。 主要是分立式测试。 （3）心理语言学社会语言学时期（后现代时期）：70年代-80年代初 特点：以社会语言学为理论基础，更加关注从功能性、社会性和语言应用的角度考查被试。 综合式测试，出现完型填空（Cloze Test）等形式。 （4）交际法语言测试时期：80年代初至今 特点：以语言交际理论为基础。 交际性语言测试。 2、中国的语言测试： （1）中国是最早使用考试（西周）。 （2）科举是一个标准化程度很高的测试体系。 （3）70年代末受TOEFL等影响开始第二语言测试，出现“英语水平考试（EPT）”“大学英语考试（CET）”。 （4）对外汉语教学界“汉语水平考试（HSK）”影响广泛。 3、语言测试作用与目的： （1）评估教学的实际效果，为改进教学中的问题提供反馈信息； （2）评估学习者的学业成就和语言水平，为选拔人才提供依据； （3）为语言研究包括语言教学研究提供信息，同时也是语言教学研究和语言研究的重要手段； （4）有利于推广母语教学，扩大母语的影响。 4、学科特点： （1）理论与实践结合非常紧密。 （2）综合性很强：应用语言学（语言学、语言教学）、认知科学、心理测量学、教育统计学、信息科学。 第二节 语言测试基本类型 一、测试的种类（用途和功能划分） 1、水平测试：又称能力测试。目的在于测量受试者现有的整体的语言实际运用能力，以评定是否达到胜任某项任务的要求。 所关心的是学习者是否可以听懂目的语者讲话，是否可以看懂用目的语所写的文章，是否可以用目的语与别人自如地进行口头或书面的交流。如HSK、TOEFL、WSK等。 目的：测量测试对象的第二语言水平。 特点：有专门的大纲、统一的试题和统一的评分标准，要求较高的预测效度。 原则：能够有效地测量测试对象的实际语言水平。 2、成绩测试：又称课程测试，是一门课程或课型的测试。 目的：检查测试对象在学习的一定阶段掌握所学课程的情况（回顾性测试）。 特点：跟教学过程和教学对象紧密相关，虽可测定受试者的学习成绩，但不一定能