品质协会(www.PinZhi.org)

 找回密码
 加入协会

QQ登录

只需一步,快速开始

查看: 15244|回复: 41

Fleiss 的 Kappa 统计量分析方法,Minitab中“属性一致性分析”

[复制链接]

945

主题

1093

回帖

28

精华

管理员

Rank: 12Rank: 12Rank: 12

积分
130360
品质币
127762
职位
1
发表于 2017-8-4 18:56:21 | 显示全部楼层 |阅读模式
Minitab“属性一致性分析”中有Fleiss Kappa分析方法,Kappa分析是属性型测量系统分析的典型方法,在AIAGMSA手册中推荐的是Cohen Kappa分析方法。

Cohen Kappa 分析方法一个最大的缺陷是只能按每个评价者相同的评价顺序列进行比较。

例如:有两个评价者各测量了3轮,则对于同一个被测对象,只能A1与B1比较、A2与B2比较、A3与B3比较,A1的结果不能与B2和B3进行比较,A2的的结果不能与B1和B3进行比较,A3的结果不能与B1和B2进行比较。

品质协会(www.PinZhi.org)备注:而Fleiss Kappa分析法则克服了这种缺陷,Fleiss方法是将测量同一对象的所有测量结果进行两两比较而得到结果一致的次数。

例如:A1=0、A2=1、B1=1、B2=1。

则结果一致的情形有:A2B1、A2B2、B1A2、B1B2、B2A2、B2B1,即结果一致的次数为6次。

这里在比较时是两两互相比较,即“你”与“我”比较后,“我”还要与“你”比较,也就是两两之间实际比较了两次,依此方法得到一致性的比较结果,在此基础上计算Kappa值。

若要全面解释Fleiss Kappa方法,需要很长的篇幅及图表来说明。以下是一个示例,感兴趣的读者可以体会Fleiss Kappa是如何计算出来的。

分类
0=Not OK
1=OK
A×A
B×B
A×B
A1×R
A2×R
A3×R
B1×R
B2×R
B3×R
对象
编号
参考值R
评价者 - 试验数
A1
A2
A3
B1
B2
B3
1
1
1
1
1
1
1
1
6
6
30
2
2
2
2
2
2
2
1
1
1
1
1
1
1
6
6
30
2
2
2
2
2
2
3
0
1
0
0
0
0
0
2
6
20
0
2
2
2
2
2
4
0
0
0
0
0
1
0
6
2
20
2
2
2
2
0
2
5
0
0
0
1
0
0
0
2
6
20
2
2
0
2
2
2
观察到的成对一致性组合数n[size=+0]*
22
26
120
8
10
8
10
8
10
可能的成对一致性组合数N[size=+0]*
30
30
150
10
10
10
10
10
10
观察到成对一致性组合数的概率P[size=+0]obs[size=+0]=n[size=+0]*[size=+0]/N[size=+0]*
0.73
0.87
0.80
0.80
1.00
0.80
1.00
0.80
1.00
观察到的每个分类的评价数n[size=+0]k
[size=+0](k=0,…Nc)
7
8
15
5
6
5
6
5
6
8
7
15
5
4
5
4
5
4
总评价次数N
15
15
30
10
10
10
10
10
10
观察到的每个分类的评价数占比n[size=+0]k[size=+0]/N
0.467
0.533
0.5
0.5
0.6
0.5
0.6
0.5
0.6
0.533
0.467
0.5
0.5
0.4
0.5
0.4
0.5
0.4
随机一致性评估的期望概率
     Pexp=∑k(nk/N)2
0.502
0.502
0.5
0.5
0.52
0.5
0.52
0.5
0.52
Kappa: (P[size=+0]obs[size=+0]-P[size=+0]exp[size=+0])/(1-P[size=+0]exp[size=+0])=k
0.464
0.732
0.600
0.6
1
0.6
1
0.6
1
每个评价者比对于参考值的Kappa
 
0.733
0.867
所有评价者比对于参考值的Kappa
0.800
最小Kappa值决定最终结果
评价者姓名
代码
评价者
Kappa
≥0.9
≥0.7-0.9
<0.7
评价者比对参考值的Kappa
≥0.9
≥0.7-0.9
<0.7
 
A
0.464
 
 
×
0.733
 
×
 
 
B
0.732
 
×
 
0.867
 
×
 
所有评价者之间的Kappa
所有评价者比对参考值的Kappa
所有人
0.600
 
 
×
0.800
 
×
最终结果
 
所有结果中的最小值
Kappa =
0.464
Kappa≥0.9
 
能力满足
要求
0.9>Kappa≥0.7
 
能力有条件
满足要求
Kappa<0.7
×
能力不满足要求

1. 问答、交流探讨的帖子,回帖时,请不要发纯表情等无价值回帖,无意义,太多了影响用户体验,经常这样账号会被扣分甚至禁号的;
2. 品质协会是个学习、交流分享的平台,所有资料和内容归作者和版权方所有,需要正版标准、资料的请去相关的官方网站等平台购买。

1

主题

25

回帖

0

精华

品质协会高级会员

Rank: 4

积分
5820
品质币
5794
职位
2
发表于 2017-8-20 00:53:08 | 显示全部楼层

0

主题

3205

回帖

0

精华

品质协会高级会员

Rank: 4

积分
3235
品质币
30
职位
3
发表于 2017-8-21 08:34:42 | 显示全部楼层
谢谢分享。。。

38

主题

98

回帖

6

精华

品质协会主任会员

Rank: 8Rank: 8

积分
35328
品质币
35072
职位
4
发表于 2017-8-21 13:46:30 | 显示全部楼层
{:1_95:}

86

主题

7989

回帖

0

精华

品质协会高级会员

Rank: 4

积分
8113
品质币
38
职位
5
发表于 2018-1-30 15:39:22 | 显示全部楼层
感谢分享

1

主题

287

回帖

0

精华

品质协会初级会员

Rank: 2

积分
303
品质币
15
职位
6
发表于 2018-4-5 09:49:02 | 显示全部楼层
谢谢分享//

7

主题

259

回帖

1

精华

品质协会高级会员

Rank: 4

积分
10700
品质币
10414
职位
7
发表于 2018-4-7 15:15:29 | 显示全部楼层

0

主题

108

回帖

0

精华

品质协会初级会员

Rank: 2

积分
420
品质币
312
职位
8
发表于 2018-4-7 22:12:37 | 显示全部楼层
有点意思

0

主题

144

回帖

0

精华

VIP会员

Rank: 6Rank: 6

积分
1312
品质币
1168
职位
9
发表于 2018-7-19 15:47:05 | 显示全部楼层
谢谢分享。。。

0

主题

90

回帖

0

精华

品质协会中级会员

Rank: 3Rank: 3

积分
835
品质币
745
职位
10
居住地
重庆市
发表于 2018-7-26 11:48:18 | 显示全部楼层
谢谢分享
您需要登录后才可以回帖 登录 | 加入协会

本版积分规则

《品质协会规则》|品质币|品质B2B|手机版|加入协会|联系我们|品质协会(www.PinZhi.org)

GMT+8, 2024-3-29 12:53 , Processed in 0.059166 second(s), 5 queries , Gzip On, Redis On.

Powered by 品质协会 © 2010-2024

品质人,让生活和环境变得更美好!!!

快速回复 返回顶部 返回列表