ICC und Kappa berechnen – Interrater-Reliabilität
Fügen Sie Bewertungen aus Excel ein – eine Zeile pro Objekt, eine Spalte pro Beurteiler. Die Kachel berechnet die Intraklassenkorrelation für Messwerte oder Kappa für Kategorien, mit Konfidenzintervallen, Grafik und Methodentext. Kostenlos; die Daten bleiben im Browser.
Mehr dazu
Was Sie tun können
- Messwerte: Intraklassen-Korrelationskoeffizient (ICC) in allen sechs Formen nach Shrout und Fleiss – einfaktoriell, zweifaktoriell zufällig (absolute Übereinstimmung) und zweifaktoriell gemischt (Konsistenz), jeweils für eine Einzelbewertung und für den Mittelwert der Beurteiler – mit Konfidenzintervall und F-Test.
- Zwei Beurteiler, Kategorien: Cohens Kappa, bei geordneten Kategorien auch linear oder quadratisch gewichtetes Kappa, dazu beobachtete und zufallserwartete Übereinstimmung, PABAK und Gwets AC1; bei zwei Kategorien außerdem positive und negative Übereinstimmung, Prävalenz- und Bias-Index.
- Drei oder mehr Beurteiler: Fleiss-Kappa mit Bootstrap-Konfidenzintervall, Kappa je Kategorie, Lights Kappa und Gwets AC1.
- Für den ICC: Standardmessfehler (SEM) und kleinste nachweisbare Veränderung (MDC95).
- Interpretation nach Koo und Li (ICC) sowie Landis und Koch (Kappa), mit Hinweisen auf Fallstricke wie das Kappa-Paradoxon.
So funktioniert es
Fügen Sie Ihre Daten ein oder laden Sie eine CSV- oder TXT-Datei: Die erste Zeile enthält die Namen der Beurteiler, dann folgt eine Zeile pro Objekt, getrennt durch Tabulator, Semikolon oder Komma. Bis zu 20.000 Zeilen und 40 Spalten sind möglich. Zeilen mit fehlenden Werten werden ausgeschlossen. Die Kachel erkennt automatisch, ob ein ICC oder Kappa zu berechnen ist; Sie können das überschreiben, die Beurteilerspalten auswählen und das ICC-Modell, die Gewichtung, die Reihenfolge der Kategorien sowie ein Konfidenzniveau von 90, 95 oder 99 % wählen. Drei Beispiele mit erfundenen Daten laden zum Ausprobieren ein.
Ausgabe und Export
Ergebnistabelle zum Kopieren nach Word oder Excel oder als CSV, eine Grafik als SVG, Vektor-PDF oder PNG mit 300 bzw. 600 dpi in neun Sprachen sowie ein Vorschlag für den Methodenteil. Projekte lassen sich speichern und wieder laden.
Methoden
ICC aus einer Varianzanalyse nach Shrout und Fleiss (1979), Konfidenzintervalle nach McGraw und Wong (1996); Cohens Kappa mit asymptotischem Standardfehler nach Fleiss, Cohen und Everitt (1969); Fleiss-Kappa nach Fleiss (1971) mit Perzentil-Bootstrap.
Daten und Datenschutz
Alle Daten bleiben in Ihrem Browser und werden nicht übertragen; bitte geben Sie keine Namen oder Geburtsdaten ein. Die Kachel ersetzt keine statistische Beratung: Prüfen Sie Ergebnisse für eine Publikation mit einer zweiten Software.
Häufige Fragen
Welche ICC-Form sollte ich berichten?
Meist ICC(2,1), zweifaktoriell zufällig mit absoluter Übereinstimmung, wenn die Beurteiler stellvertretend für andere stehen und die Werte übereinstimmen sollen. ICC(3,1) gilt, wenn nur diese Beurteiler zählen und systematische Unterschiede unerheblich sind; ICC(1,1), wenn jedes Objekt von anderen Beurteilern bewertet wurde.
Warum ist Kappa niedrig, obwohl die Beurteiler fast immer übereinstimmen?
Bei einer sehr seltenen oder sehr häufigen Kategorie sinkt Kappa (Kappa-Paradoxon). Berichten Sie die beobachtete Übereinstimmung und prüfen Sie PABAK und Gwets AC1.
Cohens oder Fleiss-Kappa?
Cohens Kappa für zwei Beurteiler, Fleiss-Kappa für drei oder mehr. Für geordnete Bewertungen durch mehrere Beurteiler eignet sich der ICC.
pubmed.info setzt keine Tracking-Cookies und erstellt keine Nutzerprofile. Besuche werden nur anonym gezählt (ohne Cookies, mit gekürzten IP-Adressen). Werbung von Google erscheint nur entsprechend Ihrer Einwilligung.