So berechnen Sie den intraklassen Korrelationskoeffizienten in Excel

Ein klasseninterner Korrelationskoeffizient (ICC) wird verwendet, um zu bestimmen, ob Items (oder Themen) von verschiedenen Bewertern zuverlässig bewertet werden können.

Der Wert eines ICC kann von 0 bis 1 reichen, wobei 0 keine Verlässlichkeit unter den Bewertern und 1 perfekte Verlässlichkeit anzeigt.

Dieses Tutorial bietet ein Schritt-für-Schritt-Beispiel für die Berechnung des ICC in Excel.

Schritt 1: Erstellen Sie die Daten

Angenommen, vier verschiedene Richter wurden gebeten, die Qualität von 10 verschiedenen Aufnahmeprüfungen für das College zu bewerten. Die Ergebnisse sind unten aufgeführt:

Schritt 2: Anpassen einer ANOVA

Um den ICC für diese Bewertungen zu berechnen, müssen wir zuerst ein Anova: Two-Factor Without Replication anpassen.

Markieren Sie dazu die Zellen A1:E11 wie folgt:

Klicken Sie dazu im oberen Menüband auf die Registerkarte Daten und dann unter der Gruppe Analyse auf die Option Datenanalyse:

Wenn diese Option nicht verfügbar ist, müssen Sie zuerst das Analysis ToolPak laden.

Klicken Sie im angezeigten Dropdown-Menü auf Anova: Two-Factor Without Replication und dann auf OK. Geben Sie im neuen Fenster, das angezeigt wird, die folgenden Informationen ein und klicken Sie dann auf OK:

Die folgenden Ergebnisse werden angezeigt:

Schritt 3: Berechnen des klasseninternen Korrelationskoeffizienten

Wir können die folgende Formel verwenden, um den ICC unter den Bewertern zu berechnen:

Der klasseninterne Korrelationskoeffizient (ICC) beträgt 0,782.

So interpretieren Sie den Wert eines klasseninternen Korrelationskoeffizienten nach Koo & Li :

• Weniger als 0,50: Schlechte Zuverlässigkeit
• Zwischen 0,5 und 0,75: Mittlere Zuverlässigkeit
• Zwischen 0,75 und 0,9: Gute Zuverlässigkeit
• Größer als 0,9: Ausgezeichnete Zuverlässigkeit

Daraus schließen wir, dass ein ICC von 0,782 darauf hindeutet, dass die Prüfungen von verschiedenen Bewertern mit „gut“ Reliabilität bewertet werden können.

Ein Hinweis zur Berechnung des ICC

Es gibt mehrere verschiedene Versionen eines ICC, die abhängig von den folgenden drei Faktoren berechnet werden können:

• Modell: Einweg-Zufallseffekte, Zwei-Wege-Zufallseffekte oder Zwei-Wege-Mixed-Effekte
• Art der Beziehung: Konsistenz oder absolute Übereinstimmung
• Einheit: Einzelbewerter oder Mittelwert der Bewerter

Im vorherigen Beispiel hat der von uns berechnete ICC die folgenden Annahmen verwendet:

• Modell: Zwei-Wege-Zufallseffekte
• Art der Beziehung: Absolute Zustimmung
• Einheit: Einzelbewerter

Eine detaillierte Erläuterung dieser Annahmen finden Sie in diesem Artikel.