Buffl

VL08_IRT2_Ordinale_Items

df
by diana F.

IRT 2: Item Response Modelle für Ordinale Items

Partial Credit Model

Schwellenwahrscheinlichkeiten

Was sind Swchwellen?

Gleichung

bei Items mit mehr als zwei Kategorien gilt: (Gleichung)

Interpretation

rekursive Gleichung

Woher stammt die allgemeine Modellgleichung des „Partial Credit Modells?


Schwellenwahrscheinlichkeiten (Herleitung):

𝑃(𝑋𝑝𝑖 = 𝑐|𝜃𝑝) / 𝑃(𝑋𝑝𝑖 = 𝑐|𝜃𝑝) + 𝑃(𝑋𝑝𝑖 = 𝑐 − 1|𝜃𝑝) =

𝑒(𝜃𝑝 − 𝜏𝑖𝑐) / 1 + 𝑒(𝜃𝑝 − 𝜏𝑖𝑐) 𝑚𝑖𝑡 𝑐 ∈ {1, … , 𝐾 − 1}

Interpretation der Schwellenwahrscheinlichkeiten:

Wahrscheinlichkeit, eine bestimmte Kategorie 𝑐 anzukreuzen, unter der Bedingung, dass entweder Kategorie 𝑐 oder Kategorie 𝑐 − 1 angekreuzt wird.

• Anders als bei dichotomen Items gilt bei Items mit mehr als zwei Kategorien:

𝑃(𝑋𝑝𝑖 = 𝑐|𝜃𝑝) + 𝑃(𝑋𝑝𝑖 = 𝑐 − 1|𝜃𝑝) = < 1

• La fórmula para la probabilidad umbral se puede resolver según 𝑃(𝑋𝑝𝑖 =𝑐|𝜃𝑝). Esto da como resultado la siguiente ecuación recursiva:

𝑃 (𝑋𝑝𝑖 = 𝑐∣ 𝜃𝑝 ) = 𝑒 (𝜃𝑝−𝜏𝑖𝑐) ∙ 𝑃 (𝑋𝑝𝑖 = 𝑐 - 1∣ 𝜃𝑝 )

• Si, por ejemplo, se elige para 𝑐 el valor 𝐾 − 1, se puede aplicar la ecuación recursiva repetidamente hasta llegar a 𝑃 (𝑋𝑝𝑖 = 𝑐∣ 𝜃𝑝 ).

• Se obtiene otra ecuación para calcular 𝑃 (𝑋𝑝𝑖 = 0∣ 𝜃𝑝) mediante la información adicional:

𝑃 (𝑋𝑝𝑖 = 0∣ 𝜃𝑝) + ⋯ + 𝑃( 𝑋𝑝𝑖 = 𝐾 − 1∣ 𝜃𝑝) = 1

Si se resuelve esta fórmula para 𝑃 (𝑋𝑝𝑖 = 0∣ 𝜃𝑝) y se combina con la ecuación recursiva mostrada anteriormente, se obtiene la ecuación general del «modelo de crédito parcial».


IRT 2: Item Response Modelle für Ordinale Items

Partial Credit Model

Ankerformulierung → Verschiebung der Schwellenwerte

Wie kommt man zur Graphischen Darstellung der Itemantworten in einem Balkendiagramm?


• Para cada valor 𝜃𝑝 se aplica lo siguiente: 𝑃( 𝑋𝑝𝑖 = 0 ∣𝜃𝑝) + ⋯ + 𝑃( 𝑋𝑝𝑖 = 𝐾 − 1 ∣𝜃𝑝) = 1

• El «parámetro umbral» 𝜏𝑖𝑐 marca el punto en el que se cruzan los CCC de las categorías 𝑐 y 𝑐 − 1 del ítem 𝑖.

• Para una persona con 𝜃𝑝 = 𝜏𝑖𝑐, la probabilidad de marcar la categoría 𝑐 es igual a la probabilidad de marcar la categoría 𝑐 − 1.

Fórmula de referencia → Desplazamiento de los valores umbral

1. Para interpretar los CCC de un ítem: considerar qué distribución teórica de las respuestas al ítem implican los CCC.

  1. Tener en cuenta que las respuestas al ítem no solo dependen de los parámetros del ítem, sino también de la distribución de las personas en la variable latente.

OJO: Por razones de normalización, para la distribución de las personas en la variable latente: asumir una distribución normal estándar.

—> Para poder representar gráficamente la distribución de las respuestas a los ítems en un diagrama de barras para un ítem con valores umbrales dados, primero se extrae una gran cantidad de 𝜃𝑝 de la distribución normal estándar y, a continuación, se simula una respuesta al ítem para cada 𝑝 utilizando la ecuación del modelo.

• Nota: Todos los ejemplos, se extrajeron aleatoriamente 𝑃 = 1000 «personas» de la distribución normal estándar para representar los diagramas de barras.


IRT 2: Item Response Modelle für Ordinale Items

Partial Credit Model

Item Characteristic Curve (ICC) für ordinale Items

Was ist die ICC im Rahmen der PCMs, wann verwendet man die und wie berechnet nan dies?

Interpretation?



Curva característica del ítem (ICC) para ítems ordinales

• Como alternativa a las regiones con la mayor probabilidad para una categoría de respuesta determinada según las CCC, también se puede representar gráficamente la ICC para un ítem ordinal.

• En el caso de los ítems dicotómicos, la ICC indica la respuesta esperada al item para un valor determinado en la variable latente:

𝐸 (𝑋𝑝𝑖∣ 𝜃𝑝) = 𝑃 (𝑋𝑝𝑖 = 1∣ 𝜃𝑝)

• Interpretación: supongamos que la persona 𝑝 procesa el ítem 𝑖 infinitas veces, entonces 𝐸 (𝑋𝑝𝑖 ∣𝜃𝑝) corresponde al valor medio de estas infinitas respuestas al ítem.


Cálculo de la respuesta esperada al ítem (condicionada al valor de la persona en la variable latente) en el PCM para ítems ordinales:

𝐸 (𝑋𝑝𝑖∣ 𝜃𝑝) = Suma ∑ de 𝐾−1 a 𝑘=0 𝑘 ∙ 𝑃 (𝑋𝑝𝑖 = 𝑘 ∣𝜃𝑝)

Forma general del valor esperado (condicional) de una variable aleatoria discreta.

También

fórmula para el cálculo de probabilidades de categorías a partir de la ecuación del modelo del PCM.

Folie 21:


Los límites en esta representación del ICC del ítem ordinal de la diapositiva 21 no corresponden a los valores umbral 𝜏𝑖𝑐, sino que representan una subdivisión alternativa de la variable latente.

→ 𝐸 (𝑋𝑝𝑖∣ 𝜃𝑝) se calcula para todas las categorías de respuesta y se «redondea».


IRT 2: Item Response Modelle für Ordinale Items

Partial Credit Model

Ordnung der Schwellenparameter

Was ist die Relevanz der Ordnung der Schwellenparameter und was gilt implizit?

Was passiert, wenn im CCCs die Schwellen ungeordnet sind?

Kann diese Modell diese Abbilden?

Im Bild 2: Welche Punkte sind am wahrscheinlichsten für Phillip? Bei welchem Wert ist bei ihm genauso wahrscheinlich welche Punkte zu erzielen? Welche Wahrscheinlichkeiten hat er insgesamt?


Orden de los parámetros umbral

• se aplicaba implícitamente 𝜏𝑖1 < 𝜏𝑖2 < ⋯ < 𝜏𝑖,𝐾−1.

• este orden intuitivo de los umbrales no está prescrito por el PCM. De hecho, el modelo permite cualquier orden de los parámetros umbral 𝜏𝑖𝑐.

• Por lo tanto, el PCM es lo suficientemente flexible como para poder representar ítems con distribuciones complicadas de las categorías de respuesta.

• Los ítems con umbrales desordenados no son una construcción puramente teórica, sino que también aparecen con frecuencia en la evaluación práctica de cuestionarios.

• Aunque los umbrales desordenados no constituyen en sí mismos una violación del modelo de prueba, a menudo indican problemas, por ejemplo, en la formulación de los ítems, la comprensión de los mismos o la elección de las categorías de respuesta.

• En el caso de los umbrales no ordenados, hay ciertas categorías de respuesta que no son las más probables para ninguna característica de las personas en la variable latente.

Estos ítems suelen presentar una distribución llamativa de las respuestas.

Supongamos que el ítem representado es una pregunta de examen: en esta pregunta, Philipp tiene las mismas probabilidades de obtener 2 puntos que 3 puntos (circulo naranja). Es más probable que obtenga 0 puntos que 1 punto (circulos rojos). Sin embargo, lo más probable es que Philipp obtenga 4 puntos.


Author

diana F.

Information

Last changed