2.3.2 离散数据测量系统分析.ppt

2.3.2 离散数据测量系统分析;;目标： 掌握如何评估离散数据测量系统 主要内容： 离散数据测量系统的基本知识 背景 离散数据分类 Kappa 技术 Kappa 是什么？ 列联表 用 Minitab 进行离散数据测量系统分析 ; 离散数据测量系统的基本知识 背景 离散数据分类 Kappa 技术 Kappa 是什么？ 列联表 用 Minitab 进行离散数据测量系统分析 ;离散数据测量系统的基本知识;你是否只能使用离散型数据?;离散数据分类;名义型和有序型离散测量系统;有哪些合适的评估离散数据测量系统的方法? 名义型离散测量系统 – 平等的对待所有错误分类的Kappa 技术 有序型离散测量系统 – 认为错误分类是存在等级之分的Kappa 技术 例如：我们用1到5的等级标准来评定上漆部件。当检验员A评估部件 a为1分，而检验员B 评估a为 5分时, 错误分类要比当检验员A评估部件a 为4 分而检验员B 评为 5分时更为严重。; 离散数据测量系统的基本知识 背景 离散数据分类 Kappa 技术 Kappa 是什么？ 列联表 用 Minitab 进行离散数据测量系统分析 ;Kappa 技术;Kappa 技术;运作定义;Kappa 是什么？ “K”;Kappa;离散数据测量系统的指导方针;离散数据测量系统的指导方针;Kappa 范例＃1;研究下列各项数据;评估者A的列联表;列联表;列联表;列联表;列联表;列联表;列联表– 比例;行和列的总数;P observed 表示在对角线上可能性的总数: P observed =(0.500 + 0.350) = 0.850 P chance 表示每一类分组相乘并相加后的可能性的总数： P chance =(0.600*0.55) + (0.400*0..45) = 0.51 则 K rater A=(0.85 - 0.51)/(1 - 0.51)=0.693;这回轮到你来计算;评估者间的 Kappa 值;Kappa – 评估者A 与评估者 B;评估者间的Kappa 值;评估人之间的Kappa 值;评估者之间的Kappa 值;评估者之间的Kappa 值;P observed表示在对角线上可能性的总数: P observed =(0.450 + 0.300) = 0.750 P chance表示每一类分组相乘并相加后的可能性的总数： P chance =(0.600*0.55) + (0.400*0..45) = 0.51 那么 K rater A/B=(0.75 - 0.51)/(1 - 0.51)=0.489;Kappa技术分析后得到改进的方向; 离散数据测量系统的基本知识 背景 离散数据分类 Kappa 技术 Kappa 是什么？ 列联表 用 Minitab 进行离散数据测量系统分析 ;一个从事教育测试的公司正在对五名新的评估者进行对十二年级标准作文测验笔试部分的鉴定训练 评估者评定作文的能力要与评估标准一致 每一个评估者用五个等级对15份作文进行评估 (-2, -1, 0, 1, 2) 同时，教育测试公司也对文章进行评估并提供“官方得分” 每一篇作文将被评估两次，并且每个数据都将被记录在training data目录的“Attributeordinal.mtw”中 打开这个文件，评估每一个评估者的表现;用 Minitab 进行离散数据测量系统分析;Minitab 对话框(输入变量);评估者各自一致性百分比;评估者各自评估数据的输出窗口;让我们再做一次;如果我们已经知道部件的标准该怎么办？;评估者vs. 标准;评估者各自的评估;每个评估者vs. 标准;更多的数据输出窗口;如何才能从Minitab 中得出 Kappa 值?;如何使用 Minitab 来得到 Kappa值?;Kappa 值和 Minitab;Kappa 值vs. 标准;Kappa 值 和 Minitab;如果我的数据是有序型的该如何操作？;有序型数据;什么是肯德尔系数（Kendall’s)？;肯德尔相关系数Kendall’s;肯德尔系数 Kendall’s;我们将进入一个花生生产的工作中 众所周知你种的花生越多越好，你赚的钱就越多 劣质的花生需要被挑选出来，加工成花生酱卖出。我们需要一个能够完成此项工作的检查系统。 每组挑选三个评估者组成小组来评估花生;练习 – “花生”产品（续）;注意事项：;小结：