01 Einführung

• Populationsunabhängiges Kriterium

• ggf. wenig Streuung, auf Inhaltsvalidität beschränkt

• Lernen steigert interindividuelle Streuung

• Rohwerteverteilung des Tests X für Stichprobe

• Mittelwert und Standardabweichung

• Perzentile —> keine positiv lineare Transformation

= Ist-Zustand

• Vergleiche oft interindividuell oder kriterial

• Stabilität vorausgesetzt

—> Veränderung pber Zeit

—> Vergleich von Messzeitpunkten

=> Auswahl von Personen bzw. Bedingungen

1. Personenselektion

2. Bedingungsselektion

i.d.R. Statusdiagnostik (Hochschulzulassung oder Berufsberatung)

=> Veränderung von Verhalten/Bedingungen

1. Verhaltensmodifikation

2. Bedingungsmodifikation

(Unterricht, Verbesserung des Arbeitsplatzes…)

Cattell

• Life data

  • Objektive Lebensdaten (Anzahl Geschwister)

  • Verhaltensbeobachtungen

  • Fremdbeurteilung

• Questionnaire data

  • Selbstbeurteilung insbesondere via Fragebogen aber auch Interview

• Test data

  • Leistungstestdaten (objektive Richtigantworten), Reaktionen aus objektiven Tests (undurchschaubar für VPN)

Cronbach

Maximale Anstrengung

• Person weiß, dass Leistung beurteilt wird

• Person willens und in der Lage, ihr Bestes zu geben

• Bewertungsstandards angemessen —> objektive Verhaltensbewertung; wenig Antwortverzerrung

• “Fähigkeiten”, “Fertigkeiten”, “Kompetenzen”

• T-Data sensu Cattell

Typisches Verhalten

• Erfassung durch Selbstberichte, Präferenzen

• Q-Data sensu Cattell

1. Verständlichkeit

   • Items positiv formulieren

   • Klare Satzkonstruktion

   • Keine Abkürzungen

   • Fachbegriffe vermeiden

2. Eindeutigkeit des Inhalts

   • Keine Universalausdrücke (immer, nie,…)

   • Schwieriges definieren, Mehrdeutigkeiten vermeiden

   • Keine Verknüpfung von Aussagen

   • Vorwissen beachten

   • Zeitspannen klar angeben

1. Wörter mit mehr als einer Bedeutung sollten vermieden werden

2. Vermeiden Sie Formulierungen, die nicht allen VPN bekannt sind (depressive vs. depressed)

3. Nur ein Inhalt/Konzept pro Item!

4. Keine doppelten Verneinungen

5. Vermeiden Sie Generalisierungen

6. Vermeiden Sie lange Sätze und Abkürzungen

7. Klare Zeitangaben

8. Nach Möglichkeit Fremdwörter vermeiden

1. Gruppengleiche Repräsentation => gleiche Bestehensquoten interessierter Untergruppen

   • beseitigt Haupteffekte zwischen Gruppen

2. Fairness als gleichartige Behandlung aller Testteilnehmer

   • keine strukturelle Benachteiligung akzeptieren (Testablauf, Leistungsrückmeldung…)

3. Gleichheit der Lerngelegenheiten

   • im pädagogischen Kontext sinnvoll, im Selektionskontext weniger

4. Abwesenheit von Vorhersagebias

   • Gleiche Regression in mehreren Gruppen (garantiert nicht automatisch Fairness)

—> Bias hier: konstrukt-irrelevanter Einfluss auf Tests

• Messbias:

  • sofern Varianzen manifester Variablen betroffen

• Vorhersagebias

  • Regressionsparameter für Gruppen variieren

=> Fairness aus Perspektive von Testentwickler und Testanden nicht unbedingt gleich

=> Fairness ist ethische Haltung

=> wenn Items in zwei oder mehr Personengruppen ungleiche Schwierigkeit aufweisen, obwohl Gruppen gleich fähig sind

• CMM 1-3 für Kinder

  • Welches Tier passt nicht?

    • Schwein

    • Katze

    • Hirsch

    • Kuh

    • Elefant

• Kinder ohne Migrationshintergrund: Elefant

• Kinder mit islamischen Migrationshintergrund: Schwein