Validität und Reliabilität in der Psychodiagnostik

Validität und Reliabilität in der Diagnostik

1. Validität (Gültigkeit)

Die Validität gibt an, wie gut ein Test seine Funktion erfüllt. Um dies zu ermitteln, werden externe Kriterien benötigt, die unabhängig von dem sind, was der Test zu messen versucht.

Konstruktvalidität

Hierbei geht es um die theoretische, strukturelle oder faktorielle Gültigkeit. Es soll geklärt werden, ob der Test konsistent mit dem theoretischen Rahmen ist, auf dem er basiert, und ob er eine gute Operationalisierung des gemessenen Konstrukts darstellt.

• Erfordert die allmähliche Ansammlung verschiedener Informationsquellen.
• Zur Überprüfung werden Zusammenhänge mit ähnlichen Instrumenten herangezogen.
• Hinweis: Ist die Korrelation zu hoch, könnte der neue Test lediglich eine Wiederholung eines bestehenden Verfahrens sein.
• Beispiel: Wenn eine Theorie drei Dimensionen der Angst postuliert, ist die Technik empirisch valide, wenn sie diese drei Ebenen präzise misst.

Inhaltsvalidität

Die Inhaltsvalidität wird oft durch eine Fachjury und eine systematische Überprüfung der Inhalte bestimmt. Sie ist die einzige Validitätsform, die bereits zu Beginn – bei der Auswahl der Items (Reagenzien) und der Spezifikation des Messbereichs – beurteilt wird. Es wird festgestellt, ob der Test eine repräsentative Stichprobe des zu messenden Verhaltens abdeckt.

Kriteriumsvalidität (Empirische Validität)

Diese bezieht sich auf den praktischen Einsatz und die Wirksamkeit des Tests, um individuelle Leistungen in bestimmten Tätigkeiten vorherzusagen.

Konkurrente (Gleichzeitige) Validität

Beinhaltet die Bestimmung, ob die Technik die gleichen Informationen liefert wie andere Instrumente, die dasselbe Attribut messen. Sie dient der Diagnose des aktuellen Zustands und nicht der Vorhersage zukünftiger Ergebnisse. Das Instrument ist wertvoll, wenn es einen einfacheren, schnelleren oder billigeren Ersatz darstellt.

Beispiel: CT (Tumore) im Vergleich zur Autopsie oder der Bender-Test bei Kleinkindern zur Zeitersparnis.

Prädiktive (Vorhersage-) Validität

Beschreibt die Kapazität einer Technik, zukünftige Variablen vorherzusagen. Sie wird seltener verwendet, da Vorhersagen in der Psychologie schwierig sind und lange Längsschnittstudien erfordern. Sie ist jedoch Standard in der Personalauswahl und Klassifizierung.

Interpretation der Kriteriumsvalidität

Die Kriteriumsvalidität wird über den Korrelationskoeffizienten (r) interpretiert. Korrelation bedeutet Kovariation (gemeinsame Veränderung), jedoch nicht Kausalität.

• Korrelation +: Beide Variablen steigen oder fallen gemeinsam.
• Korrelation -: Eine Variable steigt, während die andere fällt.
• r = 0: Kein Zusammenhang zwischen den Variablen.
• r = 1: Totaler Zusammenhang. Je näher r an 1 liegt, desto stärker ist die Beziehung.
• Konkurrente Validität: Testergebnisse im Bezug auf externe Kriterien in der Gegenwart.
• Prädiktive Validität: Zusammenhang zwischen gegenwärtigen Werten und zukünftigen Ergebnissen.

Augenscheinvalidität (Offensichtliche Validität)

Bezieht sich darauf, was der Test zu messen scheint. Sie wird oft in Pilotstudien untersucht. Eine hohe Augenscheinvalidität kann die Akzeptanz und die Ehrlichkeit der Testpersonen fördern. Wichtig: Eine Verbesserung der Augenscheinvalidität bedeutet nicht zwangsläufig eine Verbesserung der objektiven Validität!

2. Reliabilität (Zuverlässigkeit)

Die Reliabilität bezieht sich auf das Vertrauen in die Messergebnisse (nicht in das Konstrukt selbst). Sie beschreibt die Konsistenz der Ergebnisse bei wiederholter Anwendung unter gleichen Bedingungen.

• Eng verknüpft mit dem Messfehler.
• Gibt an, welcher Anteil der Varianz auf Messfehler zurückzuführen ist.
• Methoden zur Beurteilung müssen im Testhandbuch beschrieben und bei Anwendung in neuen Kontexten neu berechnet werden.

Methoden der Reliabilitätsschätzung

Test-Retest-Reliabilität

Derselbe Test wird zweimal derselben Gruppe vorgelegt. Wichtig sind ein kurzes Intervall und stabile Bedingungen. Korrelationen sinken bei zu langen Intervallen oder Lerneffekten.

Parallelformen

Zwei äquivalente Testformen mit ähnlichen Items und gleichem Schwierigkeitsgrad werden derselben Gruppe vorgelegt. Dies ist in der Konstruktion sehr aufwendig.

Split-Half-Reliabilität (Halbierungsmethode)

Ein Test wird durchgeführt und anschließend (z. B. per Zufall oder Odd-Even-Methode) halbiert. Die beiden Hälften werden wie Paralleltests korreliert. Längere Tests sind meist reliabler als kurze.

Interne Konsistenz

Misst die Korrelation zwischen den einzelnen Items (Kovarianz). Ein Durchschnittswert aller geschätzten Koeffizienten wird ermittelt.

Scorer-Reliabilität (Interrater-Reliabilität)

Bezieht sich auf die Objektivität: Erreichen zwei verschiedene Auswerter das gleiche Ergebnis?

3. Fehlerquellen in der Messung

a. Systematische Verzerrung (Bias)

Diese steht im Zusammenhang mit der Validität. Es handelt sich um Designfehler im Test, die eine genaue Messung verhindern. Sie betrifft oft kulturelle Unterschiede:

• Konzeptuelle Äquivalenz: Hat das Konstrukt in beiden Kulturen die gleiche Bedeutung?
• Linguistische Äquivalenz: Haben Items und Anweisungen die gleiche Bedeutung?
• Metrische Äquivalenz: Sind die Skalen und Normen vergleichbar? (z. B. Normen aus Buenos Aires sind nicht ohne Weiteres auf Uruguay übertragbar).
• Etic vs. Emic: Etic beschreibt universelle Eigenschaften, Emic kulturspezifische Merkmale.

b. Zufällige Messfehler

Diese stehen im Zusammenhang mit der Reliabilität. Sie treten immer auf, sollten aber minimiert werden. Ein wahrer Wert (True Score) kann nie exakt gemessen, sondern nur geschätzt werden:

Wahrer Wert = Beobachteter Wert +/- Messfehler

• Quellen: Müdigkeit der Testperson, Haltung des Prüfers (Rapport), Umgebungseinflüsse.
• Je sorgfältiger die Durchführung, desto geringer der Messfehler.