La kappa de Fleiss (anomenada en honor de Joseph Fleiss) és una mesura estadística que avalua la fiabilitat de concordança entre un nombre fix de qualificadors quan s'assignen classificacions categòriques a un cert nombre d'elements; això contrasta amb altres kappes, com la kappa de Cohen, que només funcionen quan s'avalua la concordança entre dos qualificadors. La kappa de Fleiss sempre té un valor entre zero i u. No hi ha una mesura del nivell de significació que s'hagi acceptat de manera general, tot i que sí que s'han postulat algunes directrius.
La kappa de Fleiss tan sols es pot utilitzar amb qualificacions binàries o d'escala nominal. No n'existeix una versió que sigui per qualificacions ordenades categòricament.
Referències Fleiss, J. L. (1971) "Measuring nominal scale agreement among many raters." Psychological Bulletin, Vol. 76, No. 5 p. 378–382 Gwet, K. (2001) Statistical Tables for Inter-Rater Agreement. (Gaithersburg : StatAxis Publishing) Gwet, K. L. (2010) Handbook of Inter-Rater Reliability (2nd Edition). (Gaithersburg : Advanced Analytics, LLC) Landis, J. R. and Koch, G. G. (1977) "The measurement of observer agreement for categorical data" in Biometrics. Vol. 33, p. 159–174 Scott, W. (1955). "Reliability of content analysis: The case of nominal scale coding." Public Opinion Quarterly, Vol. 19, No. 3, p. 321–325. Sim, J. and Wright, C. C. (2005) "The Kappa Statistic in Reliability Studies: Use, Interpretation, and Sample Size Requirements" in Physical Therapy. Vol. 85, No. 3, p. 257–268
Bibliografia addicional Fleiss, J. L. and Cohen, J. (1973) "The equivalence of weighted kappa and the intraclass correlation coefficient as measures of reliability" in Educational and Psychological Measurement, Vol. 33 p. 613–619 Fleiss, J. L. (1981) Statistical methods for rates and proportions. 2nd ed. (Nova York: John Wiley) p. 38–46 Gwet, K. L. (2008) "Computing inter-rater reliability and its variance in the presence of high agreement ", British Journal of Mathematical and Statistical Psychology, Vol. 61, pp29–48
Vegeu també Kappa de Cohen Coeficient de correlació de Pearson
Enllaços externs The Problem with Kappa Kappa: Pros and Cons contains a good bibliography of articles about the coefficient. Online Kappa Calculator calculates a variation of Fleiss' kappa. AgreeStat a Point-And-Click Excel2007 VBA Program calculates various inter-rater reliability coefficients and associated variances.
Categoria:Estadística multivariant