Cohen κ

Kappa-Statistik für exakt zwei Prüfer bei nominalen oder binären Merkmalen.

Auch bekannt als: Cohens Kappa, κ (Cohen)

Cohen κ ist die klassische Zweipersonen-Kappa-Statistik. Aus der Kreuztabelle der Bewertungen beider Prüfer über alle Teile:

κ = \frac{p _{o} - p _{e}}{1 - p _{e}}, p_{o} = \frac{1}{N} i \sum n_{ii}, p_{e} = \frac{1}{N ^{2}} i \sum n_{i \cdot} n_{\cdot i}

$n_{ii}$ ist die Diagonale (beide Prüfer gaben Klasse $i$ ), $n_{i \cdot}$ und $n_{\cdot i}$ sind die Randsummen. Näherungs-Standardfehler nach Fleiss/Cohen/Everitt (1969); 95 %-KI = $κ \pm z_{1 - α /2} \cdot SE (κ)$ . Für den Test gegen $H_{0} : κ = 0$ dient der Standardfehler unter $H_{0}$ : $z = κ / SE_{0}$ , einseitiges $p$ . Ein kleines $p$ sagt nur, dass die Übereinstimmung besser als Zufall ist, nicht dass sie ausreicht.

Siehe auch

Verwendet in

MSA Typ 5 (attributiv)

Im Algorithm-Lab

msa/cohen-kappa

Quellen

Cohen, J. (1960). A coefficient of agreement for nominal scales. Educational and Psychological Measurement, 20(1), 37–46.
Fleiss, J.L., Cohen, J., & Everitt, B.S. (1969). Large sample standard errors of kappa and weighted kappa. Psychological Bulletin, 72(5), 323–327.