VL11 Güte und Nutzen

nur valide positive oder valide negative Entscheidungen

d.h. Erfolgsquote = 1

denn Validität= 1

• Validität

• Basisquote

• Selektionsquote

Erfolgsquote als Funktion von Basisquote, Selektionsquote und Validität

• Je höher Basisquote, desto höehr Erolgsquote

  —> Basisquote sagt: Wenn wir raten würden, wie viele würden wir per Zufall treffen —> Erfolgsquote kann dann durch valides Verfahren erhöht werden

• Je höher Validität, desto höher Erfolgsquote im Vergleich zur Basisquote

• Je geringer Basisquote, desto wichtiger validität

• Hohe Selektionsquote bedeutet, dass ich mehr Personen auswähle -> gerineg Selektionsquote bei hoher Validitäten also höhere Erfolgsquote

• Bei hoher Basisquote (z.B. Jobs mit geringen Anforderungen) wenig verbesserung der diagnostischen Entscheidung durch Auswahlverfahren

früher dacthte man, dass die Güte diagnostischer Entscheidungen bei Selektionsentscheidungen nur durch prädiktive Validität determiniert wird

—> durch Taylor Russel Tafel sieht man, dass Erfolgsquote meben Validität auch von Basis- und Selektionsqupte determiniert wird und diese auch interagieren

Auch falsch negtive und falsch positive Entscheidungen

Valide Positive+ Valide Negative)/ Gesamtpersonen

ABER

• man müsste auch KandidatInnen mit ungünstiger Prognose zunächst einmal akzeptieren (also Falsch positive)

• Man weiss nie wie gut die Teilnehmer tatsächlich gewesen wären-> Falsch Negative lassen sich nicht ermitteln

Vp / (VP+FP) = Anteil der Geeigneten an den Akzeptieren

= positiver Prädiktorwert

früher dachte man, dass die Güte nur anhand prädiktiver VAlidität bestimmt werden kann

-> Je höher die Validität, desto höher die Güte d.h. desto höher ist die Erfolgsquote

Bezugsgröße zur Beurteilung der Erfolgsquote (=Anteil der tatsächlich Geeigneten der Bewerber)

1. Basisquote = Wie viele Geeignete gibt es von Anfang an in der Bewerbergruppe?

2. Erfolgsquote = Wie viele Geeignete sind unter den Eingestellten?

Würden wir raten dann wäre

Erfolgsquote- Basisquote= NULL

-> Verfahren bringt kein Nutzen gegenüber Zufall

Machen wir etwas richtig (Entscheidung hat Güte):

Erfolgsquote- Basisquote = ÜBER Null

Beispiel

100 Bewerber und 30 sind geeignet-> Basisquote ist 30Prozent

ist die Erfolgsquote nun auch=30 so sind 30 prozent geeignet -> Verfahren genauso gut wie Zufall

ist erfolgsqote größer als Basisquote, so konnte ich also durch Verfahren mehr als 30 Prozent der Ausgewählten als geeignet auswählen

Je niedriger die Basisquote…

• desto höher der Anteil an Falsch positivn

• desto geringer der Anteil an Falsch Negativen

Je höher die Basisquote

• desto geringer der Anteil an Falsch Positiven

• desto höher der Anteil an Falsch Negativen

Güte ist abhängig von Selektionsquote

Je höher die Selektionsquote desto…

• weniger Falsch Negative

• mehr Falsch Positive

Je niedriger die Selektionsquote desto…

• weniger Falsch positive

• mehr Falsch Negative

JA -> auch die Ablehnung von eigentlich geeigneten Bewerbern kann Güte beinflussen

DENN:

• erfolgreicher Einsatz bei Konkurrenzunternehmen

• Negative Reputation (schlechter Ruf)

NOCH problematischer in anderen Kontexten

-> z.b. Nicht Erkennen einer psychischen Störung kann Konsequenzen für Individuum und Kollektiv haben

Wahrscheinlichkeit mit der eine positive Diagnose zutreffend ist

VP / VP+FP)

Wahrsch. mit der eine negative Diagnose zutreffend ist

VN/(VN+ FN)

Wahrsch. mit der ein vorliegender positiver Zustand als solcher erkannt wird

VP/ (FN+VP)

Wahrsch.,dass ein negativerZustand als solcher erkannt wird

VN/(VN+ FP)

• Festlegung eines Cutoffs Wert -> aber unmöglich da man keinen Zugang zu abgelehnten Bewerbern hat

• demnach: Cut off Wert wird durch Quote festgelegt

In der klinischen:

• Festlegung eines Cut off werts so dass test hohe Sensitivittä und hohe Spezifität hat

Voraussetzung: Erhebung einer Stichprobe mit tatsächlich gesunden und tatsächlich kranken

• an Stichprobe werden für verschiedene Cut off werte sensitivitäten und Spezifitäten bestimmt , Wahl des Werts bei dem Sensitivität und Spezifität maximal ist

KREUZVALIDIERUNG WICHTIG

• negativer Prädiktionswert

• Sensitivität

• Spezifität

• Güte des Cutoff-werts

Was nicht berücksichtig wird:

• Geeignete unterscheiden sich im Ausmaß der Eignung

• Personalentscheidungen haben für Insitution ökonomische Folgen (Gewinn vs Verlust)

• Entwicklung und Durchführung von diagnostischen Prozeduren verursachenKosten

Entscheidungstheoretische Nutzenerwägungen haben das Ziel, den Nutzen einer diagnostischen Prozedur für eine Selektionsaufgabe zu quantiizieren = in Geldeinheiten auszudrücken

-> AV: Ökonomischer Nutzen

Modelle prüfen, ob Prozedur profitabel ist

• Bestimmung des ökonomischen Nutzen eines Verfahrens

wird bestimmt durch:

• prädiktive Validität des Verfahrens (wie hoch korelliert Intelligenztest mit Erfolg)

• Ausmaß in dem die Akzeptierten im Auswahlverfahren überdurchschnittlich gut abschneiden (Z Wert)

• wie viel Gewinn überdurchschnittlich erfolgreiche Mitarbeiter im Vergleich zu durchschnittlochen erwirtschaften

Kosten

Boudreau-Modell

• Erweiter BCF Modell um Steuern, Zinsen, Inflation