Kappa-Parameter

<< Click to Display Table of Contents >>

Navigation:  Zuverlässigkeitsprüfungen > KAPPA - Inter-Rater-Reliability >

Kappa-Parameter

Nach Aufrufen des Kappa-Befehls Auswerten - Zuverlässigkeit - Kappa und der Festlegung der Daten für den Datenvergleich, erscheint der Dialog zur Festlegung der Parameter zur Kappa-Berechnung:

Kappa_parameter

oSie können die Routine mit den Standardeinstellungen starten, aber wahrscheinlich müssen Sie diese Parameter an Ihre Bedürfnisse anpassen. Diese Einstellungen können die resultierenden Kappa-Werte enorm beeinflussen!

Hinweis: Es gibt keine allgemein 'beste' Einstellung, da diese von der Art der Codes, der Länge Ihrer Ereignisse, der erforderlichen Genauigkeit usw. abhängen.

Um zu verstehen, was diese Einstellungen bedeuten, lesen Sie das Thema Kappa-Paarfindungsroutine.

Kriterien für Übereinstimmungen

oÜberschneidung in Prozent - Für alle Codes mit einer Dauer können Sie mit dem Schieberegler die Anzahl der Überlappungen festlegen, die Sie benötigen. Sind Ihre Codes alle relativ kurz, müssen Sie den Überschneidungsfaktor reduzieren, um brauchbare Ergebnisse zu erhalten.

oToleranzzeitfenster - Bei sehr kurzen Ereignissen kann es sein, dass sich Ihre Codes dennoch nicht überschneiden. Über das Feld Zeitwert können Sie das Intervall definieren, in dem der übereinstimmende Code kodiert sein soll, um als Übereinstimmung gezählt zu werden. Auch hier ist es wichtig, die Art Ihrer Daten zu berücksichtigen. Passiert sehr viel in einem kurzen Zeitraum, sollten Sie diesen Wert verringern, um Ihre Ergebnisse nicht zu verzerren.

Während der Routine versucht INTERACT zunächst, Paarverbindungen auf der Grundlage des ersten Parameters "Überlappung" herzustellen und Verbindungen zwischen allen gefundenen übereinstimmenden Paaren herzustellen.

Wenn aufgrund der prozentualen Überlappung keine Paarverbindungen mehr hergestellt werden können, wird die zweite Toleranzeinstellung angewendet und alle verbleibenden Codes werden entsprechend überprüft, um Paarverbindungen herzustellen.

Eine detailliertere Beschreibung finden Sie im Thema Kappa Pair Finding Routine.

Kriterien für Mismatches

Für die Kennzeichnung von Nichtübereinstimmungen steht im Grunde die gleiche Routine zur Verfügung. Nachdem alle übereinstimmenden Verbindungen auf der Grundlage des Überschneidungsprozentsatzes und des Toleranzfensters für die Übereinstimmungen erstellt wurden, wird das Gleiche für die verbleibenden Ereignisse auf der Grundlage der Kriterien für Nichtübereinstimmungen durchgeführt.

Beginnen Sie mit ungefähr denselben Prozent- und Toleranzwerten, die Sie für die Kriterien für Übereinstimmungen angegeben haben.

Wenn die Ergebnistabelle "No Pairs" dargestellt werden, können Sie den Prozentsatz der Überschneidung verringern und das Toleranzfenster erhöhen, um zusätzliche Verbindungen zu erstellen.

Die nicht übereinstimmenden Verbindungen werden im Kappa-Diagramm in Rot angezeigt. Codes, die kein Gegenstück haben, erscheinen in der Spalte/Zeile "Keine Paare" und werden im Kappa-Diagramm blau dargestellt.

Vergleichsmethode

Sie können nun auswählen, welche Dokumente berechnet werden können:

oVergleiche Dokument 1 mit Dokument 2 - Klassische Art der Berechnung von Kappa

oVergleiche Dokument 1 mit allen anderen - Vergleicht automatisch die im Kappa-Diagramm als Dokument A ausgewählte Datei mit jedem der aktuell geöffneten Dokumenten. Alle gefundenen Codes und Paare werden in der Ergebnistabelle gesammelt und zur Berechnung von Kappa verwendet.

oVergleiche alle Dokumente gegeneinander - Wenn es kein "führendes" Dokument gibt, können Sie INTERACT einen Quervergleich veranlassen, in dem alle Dokumente miteinander verglichen werden.

Starten Sie die PaAr-SUCH-Routine

Bestätigen Sie Ihre Einstellung mit OK, um die Paarsuchroutine zu starten.

Wenn Sie fertig sind, sehen Sie als erstes eine Visualisierung aller gefundenen Paare: Der Kappa-Graph

Lesen Sie das Thema Kappa-Graph für weitere Details.