Vl5 Objektivität

Ausmaß, indem Ergebnisse eines diagnostischen verfahrens unabhängig davon zustande kommen, wer die Untersuchungm die Auswertung und die Interpretation durchführt

Objektivität ist Voraussetung für Reliabilität

Denn: Sind Testwerte abhängig davon wer Verfahren leitet, dann wird nicht die wahre Merkmalsausprägung gemessen und es gibt viele Messfehler

-> Die Messungenauigkeit (Standardmessfehler) steigt, die Messgenauigkeit (Reliabilität) sinkt

Ausmaß der Eindeutigkeit der Quantifizierung

wenn ICC=1

Theoretisch möglich

-> Validierungsstichprobe darf= Normstichprobe sein

ABER: Normstichprobe benötigt mind. 1000 Menschen und muss sehr repräsentativ für Stichprobe sein -> sehr aufwändig

—> Test darf etwas kürzer sein

Validierungsstichprobe hat gleichen (langen) Test wie Konstruktionsstichprobe und darf von Anzahl kleiner sein als Normstichprobe

-> es ist ökonomischer als wenn 1000 Menschen den langen Test der Konstruierungstichprobe bearbeiten

1. Konstruktionsstichprobe

   • Ziel: Test entwickeln, Items auswählen, Parameter a,b,ca, b, ca,b,c schätzen

   • Hier wird alles „gebaut“

2. Validierungsstichprobe

   • Ziel: Prüfen, ob der Test / die Parameter stabil und reproduzierbar sind

   • Muss exakt den gleichen Test wie Konstruktionsstichprobe enthalten

   • Vergleich erfolgt mit den Parametern der Konstruktionsstichprobe

3. Normierungsstichprobe

   • Ziel: Normwerte für Population

   • Darf ggf. gekürzt sein (ökonomisch)

   • Dient später als Referenz

4. „Richtige Stichprobe“ / Anwendungspopulation

   • Jetzt wird der Test tatsächlich eingesetzt

   • Ergebnisse können auf Normen oder validierte Modelle bezogen werd

• Durchführungsobjektivität

• Auswertungsobjektivität

• Interpretationsobjektivität

Grad, zu dem alle Aspekte der Testsituation bei verschiedenen Testdurchführungen konstant sind

• sandardisierte Instruktion für Testperson

• Instruktion für Testleiter -> Einheitlicher Umgang mit Fragen und Störungen

• Art der Testvorgabe, Material, Arbeitsplatz

• mehrere Beobachter

• einheitlicher Umgang mit Doppelkreuzen etc

• Quantitative Bestimmung : Aggregation von Beobachtungen -> Beobachterübereinstimmung

Also: Nicht mit Korrelation, sondern mit Intraklassen Korrelation ICC

-> ICC kann maximal 1 sein= perfekte Übereinstimmung

Quantitative Bestimmung der Auswertungsobjektivität

-> Bewertungen von zwei Beurteilern vergleichen

Die Korrelation prüft nur, ob die Rangordnung übereinstimmt

-> Beurteiler 1 und Beurteiler 2 können gleiche Rangordnung haben und daher wäre Korrelation =1

OBWOHL sie eigentlich anders bewertet haben

ICC besseres Maß

Ausmaß, in dem man aus den gleichen Testwerten, identische Schlüsse zieht

• Vorgaben zur Interpretation: Einführung von Normen -> Normtabellen, Interpretationshilfen mit denen man ergebnisse vergleich

• Maximale Standardisierung -> vorgegebene Definition des gemessenen Merkmals

• Fallbeschreibungen als Beispiel

• Konstruktionsstichprobe

• Validierungsstichprobe

• Normierungsstichprobe

• wird während der Testentwicklung genutzt

• für Itemauswahl (EFA)

-> DARF NICHt = Validierungsstichprobe sein

• prüft Objektivität, Reliabilität, Validität

• -> prüft alsom ob Test auch bei einer neuen, unabhängigen Stichprobe funktoniert und nicht nur bei KOnstrzktionsstichprobe

Erstellen Normwerte, um Testergebnisse einordnen zu können

-> darf= Validierungsstichprobe sein

Konstruktionsstichprobe ist dafür da um Items zu erstellen

Validierungsstichprobe prüft, ob die Items und die ensprechend geprüfte Reliabilität/Objektivität/Validität auch in einer unabhängigen Stichprobe gegeben wäre