Kriteriumsorientierte Validierung und Testtheorie

Kriteriumsorientierte Validierung nach Crocker und Algina

Thema 10: Crocker und Algina: Studie der kriterienorientierten Validierung, realisiert mittels:

• 1. Identifiziere ein geeignetes Kriterium.
• 2. Identifiziere Test und Kriterium, sammle die Punktzahlen.
• 3. Administriere Gruppe und bestimme eine repräsentative Stichprobe.
• 4. Erhalte Messungen des Kriteriums.
• 5. Bestimme die Intensität der Korrelation zwischen Testpunktzahlen und Leistung.

Typisches Scheitern und Bilanz

Erlaubt eine bessere Punktzahl in der Prognose der Statistik durch die Verwendung unseres Wissens und statistischer Inferenz.

Kriteriumsweite

Interesse:

• 1. Variable oder Charakter der wirklichen Absicht des Tests, die es zu vorhersagen oder zu inferieren gilt.
• 2. Notwendigkeit, geeignete Kriterien zu etablieren.
• 3. Entscheidungsfindung: Klinische Diagnostik und Zuweisung von Personal, Auswahl von Behandlungsprogrammen.

Einige externe Kriterien

• Intelligenz- und Aptitudentests (akademische Leistung).
• Klinische Tests für spezifische Aptituden und Diagnostik.
• Tests mit kontrastierenden Gruppen für die Validierung.

Schritte der Validierung

• 1. Identifiziere ein relevantes Kriterium und eine repräsentative Stichprobe, um es zu messen.
• 2. Identifiziere die Bevölkerung der Stichprobe, die für den Test verwendet wird.
• 3. Administriere das Kriterium.
• 4. Erhalte die Messung des Tests.
• 5. Bestimme den Grad der Beziehung zwischen dem Test und dem Kriterium: Korrelationskoeffizient (Pearson, Spearman...), der Validitätskoeffizient genannt wird.

Validitätskoeffizient

• 1. Variiert zwischen -1 und 1 (Wert 0 indiziert die Abwesenheit von Beziehung).
• 2. Kein Grund impliziert eine Beziehung zum Effektkoeffizienten.
• 3. Eine Änderung der Länge des Tests provoziert eine Änderung des Validitätskoeffizienten.
• 4. Eine Änderung der Länge des Kriteriums provoziert eine Änderung des Validitätskoeffizienten.
• 5. Eine Änderung der Variabilität der Punktzahlen des Tests/Kriteriums provoziert eine Änderung des Validitätskoeffizienten.

Faktoren, die den Validitätskoeffizienten beeinflussen

Zuverlässigkeit des Tests, des Kriteriums und die Länge desselben.

Dämpfungsformeln nach Spearman

• Fall I: Koeffizient der Testvalidität, wenn Test und Kriterium perfekte Zuverlässigkeit aufweisen.
• Fall II: Validitätskoeffizient des Tests, wenn die Zuverlässigkeit des Tests perfekt ist.
• Fall III: Validitätskoeffizient des Tests, wenn das Kriterium perfekt ist.
• Fall IV: Validitätskoeffizient, wenn das Kriterium besser ist.
• Fall V: Validitätskoeffizient des Tests, wo das Kriterium besser ist.
• Fall IV Allgemein: Validitätskoeffizient, wenn das Kriterium und der Test besser sind.

K

Anzahl der Vektoren, die eine Erhöhung der ursprünglichen Testlänge bewirken.