Misura l'accordo tra due valutatori — per la doppia codifica negli screening delle revisioni sistematiche, negli audit clinici e nella validazione di strumenti. Calcola il Cohen's kappa, l'accordo percentuale, l'intervallo di confidenza al 95% e l'interpretazione secondo Landis & Koch.
In parole semplici: due persone valutano gli stessi casi (per esempio: includere o no un articolo in una revisione). Questo strumento misura quanto sono d'accordo, al netto del caso. Il valore Kappa va da 0 (accordo casuale, come tirare a sorte) a 1 (accordo perfetto).
Il kappa corregge l'accordo osservato per quello atteso dal caso. Valori sotto 0,40 indicano una concordanza debole; per la doppia codifica nelle revisioni si punta in genere ad almeno «substantial» (≥0,61).
Formula. κ = (Po − Pe) / (1 − Pe), dove Po è la proporzione di accordo osservato e Pe quella attesa per caso. L'IC 95% usa SE = √[Po(1−Po)] / [√N · (1−Pe)].
Più di due valutatori. Per concordanza tra 3+ codificatori serve il Fleiss' kappa; per dati ordinali si preferisce il weighted kappa. Questo strumento implementa il Cohen's kappa non pesato (due valutatori, categorie nominali).
Riferimento. Landis JR, Koch GG. The measurement of observer agreement for categorical data. Biometrics 1977;33(1):159–174.