VL2

1. Merkmalsarten

2. Testarten

3. Zielgruppe und Geltungsbereich

4. Format des Tests

Personen über die der Test eine Aussage machen soll

-> Bei wem soll der Test eingesetzt werden

induktiver Methode Basis: vage Vorstellung über Konstrukt und über Unterschiede zw. Personen hinsichtlich Eigenschaft

Deduktive Methode: eleborierte Theorie über Unterschiede zwischen Personen hinsichtlich des interessierenden Merkmals

• Dichtotomes Antwortformat

• Einstufungsskala

• Multiple Choice

• Zuordnungsaufgaben

• Umordnungsaufgaben

• mehrere Antwortmöglichkeiten

• plausible Distraktoren

• offenes Antwotformat

dient der Faktorenanalyse -> Gruppierung von Items, die hohen Zusammenhang aufweisen um dann daraus übergeordnetes Konstrukt zu finden

Induktiv= Bottom up= Schluss vom Speziellen auf das Allgemeine

Basis= Vorstellung über das Konstrukt und über Unterschiede zw. Personen in einem Merkmal

Vorgehen:

1. Zusammenstellung von Itempool

2. Items einer Stichprobe vorlegen

3. Faktorenanalyse: Gruppierung von Items, die hohen Zusammenhang aufweisen -> homogene, distinkte Faktoren

ABER: man muss Faktoren interpretieren

geschlossenes Antwortformat

Universalsatz!!

Sollte man vermeiden, um Irritationen oder Zufallsantworten zu verhindern

Eindeutigkeit wird hier missachtet!

Wichtig ist ein klarer zeitlicher Bezug -> Trait vs. State

Qualitativ

Vorüberlegung des Tests

• Zweck des Test

• Kontext

• Testlänge (Anzahl Items)

• Testzeit

• Paper-Pencil vs. Computer

• Einzel- vs. Gruppentestung

Externale Konstruktion

Nicht unbedingt interpretierbare Items

Externale Konstruktion

-> Man prüft, ob Test auch in einer unabhängigen Stichprobe funktionieren würde

• Sprachniveau der Zielgruppe anpassen

• einfache Grammatik verwenden

• Konditionalsätze nur, wenn Bedingung für alle Menschen gilt

• möglichst einfache Worte

• Doppelte Verneinungen vermeiden

• keine Items, die zur Beantwortung zusätzliche Informationen benötigen

• eine Aussage pro Item

• klarer zeitlicher Bezug-> traits vs. States

• Vermeiden, dass sich Kontext auf die Beantwortung von Items auswirken kann

• disjunkte Antwortkategorien (Pro Item darf nur eine Antwort zutreffen )

Oft gemischte/mehrstufige Vorgehensweise

Deduktiv zum ersten Testentwurd und Generierung von Items -> z.B: Items auf Basis von Theorien zu Extraversion generieren

Induktiv um Struktur festzustellen und Test anzupassen

.> z.B. Facetten: Gesprächigkeit, Energielevel

müssen dafür sorgen, dass alle Personen das Item (gleich) verstehen, und dass Irritationen und Zufallsantworten verhindert werden

Ziel: möglichst eindeutige Differenzierung zwischen Personen, die sich in einem zuvor festgelegtem Kriterium unerscheiden

Vorgehen:

1. Zusammenstellung von großem Itempool

2. Items Personen vorlegen, die sich hinsichtlich des Kriteriums möglichst stark unterscheiden

3. Auswahl von Items, die das Kriterium gut vorhersagen (oft: Items mit großem Mittelwertsunterschied zw. zwei Gruppen)

ALSO: heterogene, nicht unbedingt interpretierbare Items

-> Kreuzvalidierung nötig(=Test in separater Stichprobe)

• Verständlichkeit

• Eindeutigkeit

• Sprachniveau der Zielgruppe beachten

• möglichst einfache Grammatik

• einfache Wörter -> keine Fachbegriffe/Fremdwörter/veraltete Begriffe -> ansonsen vorher definieren

• Doppelte Verneinungen vermeiden

• Konditionalsätze nur wenn sinnvoll

• keine Items, die zur Beantwortung zusätzliche Infos benötigen

• Eine Aussage pro Item (NICHT: ich fahre gerne und schnell Auto)

• klarer zeitlicher Bezug (Traits vs States)

• Vermeiden, dass Kontext Einfluss hat (z.B. durch Vorfrage)

• disjunkte Antwortkategorien

• keine Wertung in die Items bringen

• keine hypothethischen Fragen-> Sonst Hineinversetzen schwierig

• Universalsätze vermeiden

• Passung von Itemstamm und Antwortformat für jedes Item prüfen

Freies Antwortformat: Testperson generiert eine Antwort

Gebundenes Antwortformat: Testperson wählt aus vorgegebenen Antwortmöglichkeiten korrekte Antwort aus

• Freitextfelder

• Felder für Zahlen

• Feld für Zeichnung

• Antwortspielraum

• Raten ist unwahrscheinlicher

• Dichotomes Antwortformat: 2 Antwortmöglichkeiten

• Einstufungsskala

• Multiple Choice

• Zuordnungaufgaben

• Umordnungsaufgaben

• Auswertungsökonomie

• Auswertungsobjektivität

möglichst genaue Vorstellung über Eigenschaften des zu messenden Merkmals

Mögliche Methoden: Sichtung empirischer Befunde und Tests, Theorien

Merkmale unterscheiden sich nämlich in:

Qualitativ oder Quantitativ?

Zeitlich stabil (Trait) vs. zeitlich veränderbar(State)?

Unidimensional oder Multidimensional?

Qualitativ: Personen sind in Kategorien einteilbar (Raucher( Nicht Raucher)

Quantitativ: Graduell abgestufte Merkmalsauspräung (z.B. Skala 1-10)

• einfacher und verständlicher

• feine Unterscheidung möglich

• keine Stigmatisierung

zeitlich stabil= Trait (eigenschaft)

-> längerfristig stabile Erlebens- und Verhaltensmuster

-> Itemformulierungen z.B. Ich neige dazu…

zeitlich veränderbar = State (Zustand)

-> relativ kurzfristige, über die Zeit hinweg fluktuierende Erlebens- und Verhaltensweise

-> Itemformulierungen “Jetzt gerade bin ich..”

Unidimensional: Merkmal repräsentiert nur ein Konstrukt -> Test umfasst nur eine Skala -> er besteht aus einer Sammlung von Items, die alle dasselbe Merkmal abbilden sollen

Multidimensional: Merkmal umfasst mind. zwei Konstrukte /Facetten eines KOnstrukts -> besteht aus mehreren Skalen -> der Test besteht aus Items. die den Skalen jeweils eindeutig zugeordnet sind

Wichtige Vorüberlegung, welche Art von Test nötig ist

Leistungstest: Test des maximalen Verhaltens -> richtig oder falsch

Persönlichkeitstest: Test des typischen Verhaltens -> kein richtig oder falsch

Zielgruppe

= Personen, über die der Test Aussagen machen soll

—>Bei WEM soll der Test eingesetzt werden?

Geltungsbereich

= Anwendungsfeld, in dem der Test eingesetzt werden soll

-> Wo, Wofür und Worüber sollen Aussagen möglich sein?

-> diese beiden Kriterien müssen wöhrend des gesamten Testkonstruktionsprozesses berücksichtig werden (z.b. Itemformulierung, Testerprobung etc)

Beispiele:

Testlänge = Anzahl der Items

Testzeit= Zeit zur Bearbeitung des Tests

Paper-Pencil vs Computer vs Handy

Einzeltestung vs Gruppentestung

mögliche generelle Vorgehensweise, um einen ersten Testentwurd zu erstellen

• Deduktive/Rationale Konstruktion

• Induktive /Internale/ Faktorenanalytische Konstruktion

• Externale/Kriteriumsorientierte Konstruktion

-> in der Praxis gemischte bzw mehrstufige Vorgehensweie

Deduktive= TOP DOWN -> Schluss vom Allgemeinen auf Spezifisches

Basis: UNterschiede zw. Personen hinsichtlich eines Merkmals

Vorgehen:

1. Definition udn Spezifikation des Merkmals

2. Ableitung des Items aus den theoretischen Vorstellungen

WICHTIG: Test muss trotzdem valide sein! (also das richtige Merkmal messen)

• Freitextfelder

• Felder für Zahlen

• Feld für Zeichnubg

• Antwortspielraum

• geringere Ratewahrscheinlichkeit

eher kurz bei State Messungen