累进效度及辩论.ppt

选项分组被选比率分析－1 〖答案〗D 〖得分率〗68.23% 〖鉴别指数〗0.67 项目难易度比较理想，介于0.3～0.7之间 鉴别指数为优（大于0.4），仅对中、高分组（G5～G7）区分度减弱 选项A的干扰度较差，不足0.1 选项分组被选比率分析－2 I was so 41 that I slammed (砰地关上) the door and stepped out on the front porch. A. Angry B. sorry C. frightened D. ashamed 〖答案〗 A 〖得分率〗 81.93% 〖鉴别指数〗0.48 项目比较简单，难易度大于0.7 鉴别指数虽已达到优，但其实仅对中、低分组（G1～G4）考生具有较好区分度 三个干扰项基本上都没有干扰功能 选项分组被选比率分析－3 The university estimates that living expenses for international students ______ around $8,450 a year, which ______ a burden for some of them. A. are；is B. are；are C. is；are D. is；is 〖答案〗A 〖得分率〗57.03% 〖鉴别指数〗0.17 项目难易度较理想 鉴别指数极差，对大多数考生（G3～G7组）基本上没有区分度 选项B基本上没有干扰功能；选项C和D的干扰度比较理想 选项D对中、高分组（G5～G7）的干扰度反而呈上升趋势 选项分组被选比率分析－4 〖答案〗C 〖得分率〗42.36% 〖鉴别指数〗0.14 项目难易度较理想 鉴别指数极差，仅对两个极端的考生（G1～G2组和G6～G7组）有较好区分度，但对绝大多数考生（G2～G6组）没有区分度 选项A和B对大多数考生（G1～G5组）具有理想干扰度（0.23左右）选项D的整体干扰度接近理想程度（约0.1） 选项分组被选比率分析－5 〖答案〗B 〖得分率〗19.88% 〖鉴别指数〗0.18 项目极难，区分度极差 考生答题行为反常，干扰项D和A的选择比率远大于答案项B。D项每组的选择人数都比答案项多，A项到中分组（G4组）后才趋向递减 选择C的干扰功能正常，从G1组开始即逐步递减 答案项B对中、低分组考生（G1～G4组）基本上没有区分度，但对中、高分组（G4～G7组）的区分度逐步增强 生成统计图表的SPSS操作（详见相应Word文档） 利用立方体，自动计算项目的难易度和区分度 按总分排序（降序） 按比例分组（如高、低分组各27％） 用立方体求均值（难易度）和差分（区分度） 利用交叉表，生成选项－分组比率曲线图 按总分排序（升序） 按分数段分组（如每10分为1段） 用交叉表求比率，并生成曲线图（项目为行，分组为列且列显示百分比） 考生水平 焦点问题三 理论模型：X （结果）= T （真值）+ E（误差） 信度系数： 相关分析 重测卷、平行卷或半分卷分数的相关系数 评分员自己或评分员之间评判结果的一致性程度 误差分析 系统误差：n次测试结果的均值－真值 随机误差：测试结果－系统误差 绝对误差：系统误差＋随机误差 相对误差：绝对误差占真值的比率 标准误（差）：n次测试结果均值的标准（偏）差。把由n道题或n人次评分理解为对同一能力的n次测试，则：标准误＝标准差/n的平方根 两两相关：Pearson积矩相关或Spearman等级相关； 两个以上相关：Cronbach 系数或Kendall W协同系数 真分数理论 真分数的区间估计 概率 个体（观测分与样本均值） 团体（均值与总体均值） 68％ 观测分±1.00×误差标准差 团体均值±1.00×误差标准差/√N 95％ 观测分±1.96×误差标准差 团体均值±1.96×误差标准差/√N 99％ 观测分±2.58×误差标准差 团体均值±2.58×误差标准差/√N 例如，本例中第1位考生的平均分为4.625，测试团体均值为5.275，绝对误差标准差为0.667，则有： 概率 考生1的真分数区间 团体真分数区间 68％ ［3.598，4.932］ ［5.064，5.486］ 95％ ［2.958，5.572］ ［4.862，5.688］ 99％ ［2.544，5.986］ ［4.731，5.819］ * * * * 第七章 累进效度及辩论（四） 教学目标 了解评分环节的基本概念、焦点问题及证据来源 评分效度 基本概念：测试信度；项目难度、项目区分度；原始分、标准分、平均分、标准差 焦点问题：测试信度、项目质量、考生水平 证据来源：信度系数或概化系数；项目的难度、区分度及选项被选情况；考试成绩的集中量与差