<< Click to Display Table of Contents >> Navigation:  Zuverlässigkeitsprüfungen > KAPPA - Inter-Rater-Reliability > Kappa-Ergebnisse > Tipps zur Verbesserung der Kappa-Ergebnisse

Wie bereits erwähnt, wurde Kappa für sich gegenseitig ausschließende und lückenlose Daten entwickelt und stützt sich weitgehend auf die Wahrscheinlichkeitsberechnung.

Die Wahrscheinlichkeitsberechnung erfordert eine große Anzahl von Daten, um ein relevantes Ergebnis zu erzielen. Aus diesem Grund funktioniert die Berechnung von Kappa bei einer Klasse mit nur einem oder zwei Codes nicht gut. Auch sehr wenig Ereignisse pro document können zu irrelevanten Kappa-Ergebnissen führen. Siehe auch FAQ über Kappa.

Zusammenführen mehrerer Datendateien

Um die Gesamtzahl der Ereignisse zu erhöhen (je größer der Datenpool, desto zuverlässiger das Ergebnis), erstellen Sie eine Kompilationsdatei für jeden Beobachter.

▪Verwenden Sie den Befehl Start-File-Merge, wie unter Zusammenführen von Datendateien beschrieben um folgende Komiplationen zu erstellen:

▪Führen Sie alle vollständig kodierten Datendateien von Beobachter A in einer einzigen Kompilationsdatei (Compilation-A) zusammen.

▪Führen Sie dasselbe für die passenden Dateien durch, die von Obererver B kodiert wurden (Compilation-B)

▪Verwenden Sie die Dateien 'Compilation-A' und 'Compilation-B' zur Berechnung der KAPPA - Inter-Rater-Reliabilität.

Lückenlose Ereignisse erstellen

Wenn Ihre Daten Lücken auf der Zeitachse pro Klasse enthalten, lassen Sie INTERACT Ereignisse erstellen, um diese Lücken zu schließen, indem Sie einen Dummy Code wie NULL, N/A oder einen anderen Namen verwenden.

▪Benutzen Sie den Befehl Lückenlos machen, wie in Lücken mit Daten füllen beschrieben.

Dies erhöht die Anzahl der Codes (=Variablen) pro Klasse, was gut für Kappa ist, und es stellt auch sicher, dass die Daten pro Klasse lückenlos sind.

Code in eine allgemeine Kappa-Klasse kodieren

Kappa wird immer pro Klasse berechnet, es gibt also kein "Gesamt-Kappa".

Es ist möglich, alle (oder bestimmte) Codes in eine einzige 'Kappa'-Klasse zu kopieren. Dadurch erhöht sich die Anzahl der Codes/Variablen, was in der Regel gut für die Gesamtergebnisse ist und nur die Ergebnisse der Kappa-Berechnung für diese spezielle Klasse betrachtet.

▪Verwenden Sie den Befehl Codes verschieben & kombinieren, um Codes in diese neue Klasse zu kopieren.

Weitere Details finden Sie im YouTube-Tutorial Verschieben & Kombinieren: