Fleiss 的 Kappa 统计量分析方法，Minitab中“属性一致性分析”

品质协会

Minitab“属性一致性分析”中有Fleiss Kappa分析方法，Kappa分析是属性型测量系统分析的典型方法，在AIAG的MSA手册中推荐的是Cohen Kappa分析方法。

Cohen Kappa 分析方法一个最大的缺陷是只能按每个评价者相同的评价顺序列进行比较。

例如：有两个评价者各测量了3轮，则对于同一个被测对象，只能A1与B1比较、A2与B2比较、A3与B3比较，A1的结果不能与B2和B3进行比较，A2的的结果不能与B1和B3进行比较，A3的结果不能与B1和B2进行比较。

品质协会(www.PinZhi.org)备注：而Fleiss Kappa分析法则克服了这种缺陷，Fleiss方法是将测量同一对象的所有测量结果进行两两比较而得到结果一致的次数。

例如：A1=0、A2=1、B1=1、B2=1。

则结果一致的情形有：A2B1、A2B2、B1A2、B1B2、B2A2、B2B1，即结果一致的次数为6次。

这里在比较时是两两互相比较，即“你”与“我”比较后，“我”还要与“你”比较，也就是两两之间实际比较了两次，依此方法得到一致性的比较结果，在此基础上计算Kappa值。

若要全面解释Fleiss Kappa方法，需要很长的篇幅及图表来说明。以下是一个示例，感兴趣的读者可以体会Fleiss Kappa是如何计算出来的。

分类	0=Not OK 1=OK							A×A	B×B	A×B	A1×R	A2×R	A3×R	B1×R	B2×R	B3×R
检验 对象 编号	参考值R	评价者 - 试验数
		A1	A2	A3	B1	B2	B3
1	1	1	1	1	1	1	1	6	6	30	2	2	2	2	2	2
2	1	1	1	1	1	1	1	6	6	30	2	2	2	2	2	2
3	0	1	0	0	0	0	0	2	6	20	0	2	2	2	2	2
4	0	0	0	0	0	1	0	6	2	20	2	2	2	2	0	2
5	0	0	0	1	0	0	0	2	6	20	2	2	0	2	2	2
观察到的成对一致性组合数n[size=+0]*								22	26	120	8	10	8	10	8	10
可能的成对一致性组合数N[size=+0]*								30	30	150	10	10	10	10	10	10
观察到成对一致性组合数的概率P[size=+0]obs[size=+0]=n[size=+0]*[size=+0]/N[size=+0]*								0.73	0.87	0.80	0.80	1.00	0.80	1.00	0.80	1.00
观察到的每个分类的评价数n[size=+0]k [size=+0](k=0,…Nc)								7	8	15	5	6	5	6	5	6
								8	7	15	5	4	5	4	5	4
总评价次数N								15	15	30	10	10	10	10	10	10
观察到的每个分类的评价数占比n[size=+0]k[size=+0]/N								0.467	0.533	0.5	0.5	0.6	0.5	0.6	0.5	0.6
								0.533	0.467	0.5	0.5	0.4	0.5	0.4	0.5	0.4
随机一致性评估的期望概率      Pexp=∑k(nk/N)2								0.502	0.502	0.5	0.5	0.52	0.5	0.52	0.5	0.52
Kappa: (P[size=+0]obs[size=+0]-P[size=+0]exp[size=+0])/(1-P[size=+0]exp[size=+0])=k								0.464	0.732	0.600	0.6	1	0.6	1	0.6	1
每个评价者比对于参考值的Kappa											0.733			0.867
所有评价者比对于参考值的Kappa											0.800
最小Kappa值决定最终结果
评价者姓名		代码	评价者 Kappa		≥0.9		≥0.7-0.9		<0.7		评价者比对参考值的Kappa		≥0.9	≥0.7-0.9		<0.7
		A	0.464						×		0.733			×
		B	0.732				×				0.867			×
所有评价者之间的Kappa											所有评价者比对参考值的Kappa
所有人			0.600						×		0.800				×
最终结果						所有结果中的最小值							Kappa =		0.464
Kappa≥0.9		能力满足 要求			0.9＞Kappa≥0.7				能力有条件 满足要求		Kappa＜0.7		×	能力不满足要求

PeterHe

Minitab 2019中使用的是Fleiss Kappa分析对吗？

郭旺林

这个表格不能下载使用啊

hu252001

太厲害了有學習道長知識

jackypu

叶平

谢谢分享。。。

浙江-搬砖-假打

{:1_95:}

lurenjia2011050

感谢分享

nanfeng36

谢谢分享//

luckfeiyu

农夫三拳

有点意思

xyl852

谢谢分享。。。

supertang520

谢谢分享