Grundlagen der Bewertung: Prozesse, Kriterien und Methoden

Definition und Arten der Bewertung

Bewertung ist ein komplexer Prozess, der die Erlangung nützlicher Informationen über alle relevanten Fragen umfasst. Dies ermöglicht es uns, Urteile abzugeben und fundierte Entscheidungen zu treffen.

• Home?
• Summative Bewertung (final): Ermittelt das Endergebnis.
• Formative Bewertung (prozessbegleitend): Bewertet und ermöglicht es, den EA-Prozess zu verbessern.

Stake-Modell zur Evaluation von Lernprogrammen

Das Modell von Stake bewertet Lernprogramme anhand folgender Aspekte:

• Der Hintergrund: Die vorhandene Erfahrung.
• Transaktionen des Unterrichts: Begegnungen zwischen Menschen (Studenten, Professoren, Eltern, Gleichaltrige etc.).
• Ergebnisse: Die Resultate des Programms.

Diese Informationseinheiten werden in vier Rubriken unterteilt:

• Intentions (Absichten)
• Kommentare
• Standards (was gewöhnlich angenommen wird)
• Trials (was über das Programm geglaubt wird)

Zwei Arten der Analyse

• Konsistenz: Prüfung, ob die Absichten erreicht wurden.
• Kontingenz: Prüfung, ob Ziele aufgrund des Hintergrunds oder primär durch die Aktivitäten erreicht wurden.

Maßnahme und Bewertung

Maßnahme: Bereitstellung quantifizierbarer Daten.

Bewerten: Vergleich dieser Daten mit den festgelegten Kriterien.

Bezugsnormen (Normal Type)

Der Bezugspunkt, mit dem wir vergleichen:

• Statistisch: Dies hängt von der Gruppe ab, mit der verglichen wird.
• Kriterienorientiert: Vergleich mit einem festen Ziel.
• Individuell: Vergleich mit anderen Ergebnissen derselben Person in derselben Prüfung.

Gütekriterien der Bewertung

Zuverlässigkeit (Reliabilität)

Bezieht sich auf den Grad der Dauerhaftigkeit und Stabilität von Messungen:

• Wiederholung: Wiederholung desselben Tests.
• Paralleltest: Korrelation gleichwertiger Prüfungen.
• Split-Half (Even-Odd): Korrelation der beiden Testhälften.

Gültigkeit (Validität)

Bezieht sich auf den Grad der Genauigkeit, mit der ein Instrument das misst, was wir messen wollen:

• Scheinbare Validität: Der allgemeine Eindruck.
• Inhaltsvalidität: Basierend auf der Rationalisierung von Prozessen, Literaturangaben und Erfahrung.
• Konstruktvalidität: Bei zwei Gruppen mit unterschiedlichen Eigenschaften sollten die Ergebnisse wesentlich anders ausfallen.
• Konsequente Validität: Vergleich mit anderen standardisierten Instrumenten und denselben Kriterien.
• Concurrent (Übereinstimmungsvalidität): Vergleich mit unterschiedlichen Kriterien.
• Predictive (Vorhersagevalidität): Erfordert einen längeren Zeitraum, um zu prüfen, ob Vorhersagen zutreffen.

Objektivität

Zweck: Wenn die Ergebnisse unabhängig von der Haltung oder persönlichen Einschätzung des Gutachters sind. Eine Gruppe erzielt bei unterschiedlichen Gutachtern ähnliche Ergebnisse.

Auswerteverfahren und Werkzeuge

Dies sind Werkzeuge, Situationen, Ressourcen und Verfahren, die eingesetzt werden, um Informationen über den Fortschritt eines Prozesses zu erhalten.

Beobachtung und Kommentar: Ein selektiver Prozess (identifizieren, bewerten und definieren, was wir wann und wie beobachten). Er umfasst immer auch die Wahl eines Anmeldeformulars, das auf einer Hypothese oder einem Zweck beruht.

• Anekdoten: Eine episodische Sammlung von Highlights. Sie sollten nur die Tatsachen beschreiben sowie die Handlungen ohne Werturteile wiedergeben.
• Tagebücher oder Berichte: Erzählend und rückblickend. Diese können auch Meinungen, Gedanken und Überlegungen zur besseren Planung künftiger Maßnahmen enthalten.
• Checklisten: Dies sind Listen von Verhaltensweisen, Gewohnheiten oder Aktionsfolgen, bei denen der Lehrer angibt, ob diese manifest sind oder nicht. Sie erfordern eine sorgfältige Vorbereitung, Beobachtungsgabe und Zeit. Sie unterstützen keine Benotung (Qualifikationen) und können für Einzel- oder Gruppenberatungen genutzt werden.
• Rating-Skalen: Sie ähneln Checklisten, enthalten jedoch zusätzliche Auskünfte über das Ausmaß.
• Beobachtungsgitter: Erfassung von Ereignissen in realen Situationen. Es werden Kategorien und Parameter festgelegt, die sich auf die zu bewertenden Ereignisse oder Verhaltensweisen beziehen.
  • Meilensteine: Erfassung des Verhaltens bei jedem Auftreten.
  • Zeitstichproben: Der Beobachter prüft in kurzen, festen Zeitabständen, ob das definierte Verhalten auftritt.
  • Intervallprotokoll: Wie oben, jedoch genügt ein einmaliges Auftreten im Zeitraum für die Registrierung.
  • Timing: Zeitdauer, in der Lehrer oder Schüler eine bestimmte Tätigkeit ausüben.
• Praktische Tests: Motorische Aufgaben zur Überprüfung der Lerneffektivität. Erfordern den Einsatz von Checklisten und Skalen.
• Standardisierte Tests: Experimentelle Situationen zum statistischen Vergleich von Individuen, die dieselbe Situation durchlaufen haben.
• Testbatterien (Akku-Tests): Ein Satz von Tests zur Beurteilung verschiedener Aspekte oder der allgemeinen Persönlichkeit eines Subjekts.
• Soziometrische Techniken: Bewertung von persönlichen oder Gruppensituationen (Teilnahme, Führung, Akzeptanz/Ablehnung). Drei Felder: Affinität, Wirksamkeit und Emotionalität.