竞赛网评结果的评价与分竞赛网评结果的评价与分析.doc

PAGE  2015江西财经大学数学建模竞赛 （B题） 竞赛网评结果的评价与分析 参赛队员: 参赛队编号： 2015年5月22日~5月27日 2015江西财经大学数学建模竞赛 承 诺 书 我们仔细阅读了江西财经大学数学建模竞赛的竞赛章程。 我们完全明白，在竞赛开始后参赛队员不能以任何方式（包括电话、电子邮件、网上咨询等）与队外的任何人研究、讨论与赛题有关的问题。 我们知道，抄袭别人的成果是违反竞赛规则的, 如果引用别人的成果或其他公开的资料（包括网上查到的资料），必须按照规定的参考文献的表述方式在正文引用处和参考文献中明确列出。 我们郑重承诺，严格遵守竞赛规则，以保证竞赛的公正、公平性。如有违反竞赛规则的行为，我们将受到严肃处理。 我们参赛选择的题号是（从A/B/C中选择一项填写）： 我们的参赛队编号为 参赛队员 (打印并签名) ： 队员1. 姓名 专业班级 队员2. 姓名 专业班级 队员3. 姓名 专业班级 日期： 2015 年 5 月 27 日 2015江西财经大学数学建模竞赛 编号和阅卷专用页 参赛队编号：2015011 参赛队员填写参赛队 员姓名所有数学类与计算机类课程成绩 （意愿参加全国竞赛者填写）是否选修建模课程是否愿参加全国竞赛在校获 奖项目阅卷填写，参赛者不得填写评分(百分制)评阅人最 终 得 分小组评价负责人阅卷 专家 评语 备注1、是否选修数学建模：指本学期是否选修了数学建模课程 2、是否有意愿参加全国竞赛：指参加今年的全国大学生数学建模竞赛，一经选定，不得退赛，否则将建议学生所在学院给予处分。培训时间：2013年8月5日开始。江西财经大学数学建模竞赛组委会 2015年5月15日制定  PAGE 11 竞赛网评结果的评价与分析 摘 要 合理地评价竞赛成绩是一个重要的教育问题，本文定量分析了竞赛的网评结果与最终成绩间的相关性，建立了能合理度量评委基本素质的指标体系，同时还比较了不同题目的评委之间的整体差异。 由于数据文件给出的是网评成绩的原始分，因此需要先将其换算成标准分。为便于解答问题，本文使用Matlab将原数据按照评委序号而非论文序号归类进行排列。 对于问题一，虽然文件未给出最终成绩的绝对分数，但是可以用转化为虚拟变量的获奖名次作为最终分数的代理变量。利用有序多分类的Logistic回归，对网评标准分总分与获奖名次进行相关性分析，SPSS的回归结果表明网评成绩与最终成绩间有显著的正相关性。 对于问题二，本文从两个方面来度量评委的基本素质： （1）同一评委对不同论文打分的方差大则说明此评委基本素质高； （2）同一篇论文，单个评委的评分与评委组的评分均值间的偏差的方差小，则说明此评委基本素质高。 当两个指标以相除的方式结合起来时，形成指标体系，指标得分越高则评委素质越高。将其用于附件的评审数据，即可解决问题三。以A附件为例，14个评委的指标得分出现了显著的断面差异。 对于问题四，本文先计算每题中每个评委所有评分的方差，用此方差序列表示该组评委的整体状况。再将ABCDE组的方差进行比较，利用多因素方差分析，判断不同题目的评委的整体表现是否存在显著性差异。结果表明，各组评委的整体表现并没有显著差异。 对于问题五，考虑到网评是将论文随机分配给评委的，而评分在某种程度上也属于随机事件，因此可以从网评分数中抽取前3个评委的分数，组成含3个评委分数的“虚拟分数”，用此分数代表不加入网评成绩的总成绩；如果加入网评成绩，则与网评的4个评委分数一起，组成含7个评委分数的“虚拟分数”，用此分数代表加入网评成绩的总成绩。加入网评成绩后，单篇论文由3个评委打分转变为7个评委打分，这样改变了单篇论文得分的“组内方差”，同时也改变了每题中论文总成绩之间的方差，即“组间方差”。借助这种构造方法，本文认为，加入网评成绩会降低组内方差，提高成绩的可靠性，但同时也会降低组间方差，给区分名次造成困难，但权衡考虑，加入网评成绩的利大于弊。 关键字：Logit模型 方差分析 虚拟变量 评审方式比较 1、问题重述 某竞赛的评阅过程分为网评阶段与集中评审阶段。在网评阶段，竞赛论文被随机平均分配给每位评委，每份竞