Você está na página 1de 12

PSICOMETRA

PROBLEMAS TIPO (TEMA N 8)

PRESENTACIN TEMA N 8 (ANLISIS DE LA CALIDAD MTRICA DE LOS


TEMS)
El anlisis de los tems pretende obtener evidencias sobre su calidad con
objeto de identificar los que se han de descartar, reformular los que
puedan ser mejorados y conservar los que presenten buenas propiedades
psicomtricas.
ASPECTOS A EVALUAR (VARIABLES COGNITIVAS: APTITUDES,
RENDIMIENTO, ETC)
Existe una alternativa correcta y una o varias incorrectas
1.- ANLISIS DE LA RESPUESTA CORRECTA:
A) NDICE DE DIFICULTAD DE UN TEM: Para cuantificar la dificultad de
los tems dicotmicos o dicotomizados se utiliza la proporcin de
sujetos que han respondido correctamente al tem. En tems de
eleccin mltiple, se debe hacer una correccin en el clculo de la
dificultad del tem que controle las respuestas al azar. A mayor
nmero de distractores (alternativas incorrectas) menos probables
son los aciertos por azar. Pgina 49 del formulario.
B) NDICE DE DISCRIMINACIN DE UN TEM: Permite diferenciar entre
los sujetos en funcin de su nivel de competencia. En general, el
clculo del poder discriminativo de un tem implica contrastar la
proporcin de aciertos entre dos grupos extremos de aptitud, uno
bajo y otro alto. Se consideran ndices de discriminacin basados en
la correlacin y en los grupos extremos. Entre los factores que
afectan al poder discriminativo de los tems destacan la variabilidad
de los tems y la fiabilidad del test (pginas 50 a 54 del formulario).
En tem de actitudes se utilizan la correlacin de Pearson, el ndice
de homogeneidad (IH), la correlacin corregida y el ndice de
discriminacin basado en los grupos extremos.
C) NDICE DE FIABILIDAD DEL TEM (criterio interno) se utiliza para
cuantificar el grado que el tem en cuestin est midiendo con
precisin el atributo de inters.
D) NDICE DE VALIDEZ DEL TEM (criterio externo) Implica
correlacionar las puntuaciones obtenidas por una muestra de
sujetos en el tem con las puntuaciones obtenidas por los mismos
sujetos en algn criterio externo de inters.
Nota: Los ndices de dificultad y discriminacin estn relacionados con la
media y la varianza de las puntuaciones totales del test; la fiabilidad y la
validez con la desviacin tpica.
2.- ANLISIS DE LAS RESPUESTAS INCORRECTAS (DISTRACTORES):
Aportan evidencias sobre la utilidad de cada alternativa y su contribucin
a la calidad mtrica del tem.
A) EQUIPROBABILIDAD DE LOS DISTRACTORES: Los distractores son
equiprobables si son seleccionados por un nmero mnimo de
sujetos y son igualmente atractivos para los que no conocen la
respuesta correcta.
B) PODER DISCRIMINATIVO DE LOS DISTRACTORES: Si, normalmente,
esperamos que la correlacin entre el test y la opcin correcta sea
R. MEDRANO (TUTOR)

Pgina 1

PSICOMETRA

PROBLEMAS TIPO (TEMA N 8)

alta y positiva; en el caso de los distractores, lo esperable es que su


correlacin sea negativa (cuando aumenta la aptitud de los sujetos,
disminuye la proporcin de sujetos que elige la opcin incorrecta)
3.- FUNCIONAMIENTO DIFERENCIAL DEL TEM (FDI): Detecta que un tem
est funcionando de manera distinta en dos grupos con el mismo nivel de
aptitud (Detectada la circunstancia, no apunta posibles causas)

PROBLEMAS TIPO (TEMA N 8 ANLISIS DE LA CALIDAD MTRICA


DE LOS TEMS)
1.- NDICE DE DIFICULTAD // FUNCIONAMIENTO DISTRACTORES
En la tabla aparecen las respuestas de 200 sujetos a un tem con 3 alternativas (A,
B, C), donde la opcin B es la correcta. Por filas aparece la frecuencia de sujetos
que han seleccionado cada alternativa y que han obtenido puntuaciones superiores
e inferiores al 50% de su muestra. Averiguar el ndice de dificultad del tem,
corrigiendo los efectos del azar:
50%
superior
50%
inferior

B*

19
35
54

73
10
83

47
16
63

200

Se trata de un tem de eleccin mltiple (3 alternativas); por tanto, de la tabla se


obtienen 83 aciertos (73+10) (83/200 = 0,415) y 117 errores (54+63)
(117/200 = 0,585). Si los tems fueran dicotmicos o dicotomizados se utilizara la
proporcin de sujetos que responden correctamente el tem (ID = A/N).
IDC = A - [E / (K 1)] / N IDC = 83 - (117 / 2) / 200 = 0,1225 (Para tems de
eleccin mltiple)
Tambin IDC = p (q / K-1) (0,415) - (0,585/2) = 0,1225
El tem tiene una dificultad excesiva (0,1225), dado que se sita por debajo de
0,20.
Nota: Pgina 49 del formulario. El ndice de dificultad oscila entre 0 (difcil:
nadie lo acierta) y 1(fcil: lo aciertan todos). El ndice de dificultad debe situarse
entre 0,20 y 0,80.

2.- NDICE DE DISCRIMINACIN BASADO EN LOS GRUPOS EXTREMOS


Las respuestas de los sujetos de una muestra a un elemento de un test, se
distribuyeron segn la tabla adjunta. La respuesta correcta es la C y tanto las
puntuaciones en el test como en el tem se distribuyen normalmente. Averiguar el
ndice de discriminacin del tem.

27%
Superior
27% Inferior

R. MEDRANO (TUTOR)

Alternativas del tem


A
B
C*
D
10
0
12
10
0
10
0
30
10
0

120 30
0,64
140
Discrimina muy bien

D PS Pi

Pgina 2

PSICOMETRA

PROBLEMAS TIPO (TEMA N 8)

Lgica del procedimiento (discriminar) diferenciar entre los sujetos en funcin de su


nivel de competencia.
Nota: Segn el marco de referencia que proporciona Ebel (1965), los valores por
encima de 0,30 indican que el tem discrimina bien (pgina 50 del formulario).
El ndice oscila entre (-1 y 1). Los valores negativos indican ms aciertos en el
grupo inferior y los positivos ms en el grupo superior.

3.- NDICES DE DISCRIMINACIN BASADOS EN LA CORRELACIN


A partir de los datos de la tabla calcular el poder discriminativo del tem n 2,
utilizando la correlacin biserial y la biserial puntual.
Sujetos

1 (a)

A
B
C
D
E

1
1
0
0
1

tems
2
(b*)
1
0
1
0
1

3 (c)
1
1
1
0
1

Total (Test)
X
(X i2)
3
2
2
0
3

2
2
1
0
2

Lgica del procedimiento Si el tem discrimina, la correlacin entre las


puntuaciones obtenidas por los sujetos en el tem y en el test total (descontando la
puntuacin del tem) ser positiva.

Sujetos que aciertan el tem n 2 = A, C, E // Media en el test = (2+1+2 =


5) / 3 = 1,67
Media total test = (2+2+1+0+2 = 7) / 5 = 1,40
X2
13
Desviacin tpica test S x2
X 2 Sx
1,4 2 S x 2,6 1,96 0,8
n
5
Proporcin sujetos que han acertado / fallado el tem: p (3/5) = 0,6 y q
(2/5) = 0,4
(y = 0,3863) valor recogido en la tabla n 7 del formulario, con p =
0,60.

XT
SX
= 0,41)
rbp

rb

p
1,67 1,4
rbp
q
0,8

0,6
0,41 // Correlacin biserial puntual (rbp
0,4

XT p
1,67 1,4 0,6
rb
0,52 // Correlacin biserial (rb = 0,52)
SX
y
0,8
0,3863

Relacin entre correlacin biserial puntual y biserial (la biserial siempre


es la mayor)
rbp rb

y
pq

0,52

0,3863
0,24

0,41

Conclusin tem con buen ndice de discriminacin.


Nota: Puntuaciones para las correlaciones: tem (variable dicotmica
dicotomizada) y test (variable continua) y Pginas 51 y 52 del formulario.
R. MEDRANO (TUTOR)

Pgina 3

PSICOMETRA

PROBLEMAS TIPO (TEMA N 8)

4.- NDICE DE DISCRIMINACIN BASADO EN LA CORRELACIN


Se ha construido un test que se corrige clasificando a los sujetos en dos categoras:
aptos y no aptos. Todos los elementos del test son dicotmicos. Se aplica el test a
un grupo normativo y obtenemos la siguiente tabla:
Datos ndices de discriminacin basados en la correlacin (entre la puntuacin
de los sujetos en el tem y sus puntuaciones en el test)

Test
(Y)
Criteri
o

Aptos
(1)

tem 6 (X)
Acierta (1)
Falla (0)
120
30
120/330 =
0,36

Pxy
No
Aptos
(0)

20

Py

180
180/330 = 0,55

qy
140
140/330 =
0,42

Px

160

150
150/330 = 0,45

p XY p X pY

p X q X pY qY

190
190/330 =
0,58

330

qx

0,36 (0,42 0,45)


0,171

0,69
0,42 0,58 0,45 0,55 0,245

Nota: Distintas proporciones de los sujetos recogidos en el cuadro.


Coeficiente (tem y test variables dicotmicas). Formulario pgina 50.
DISCRIMINACIN EN LOS TEMS DE ACTITUDES

1.- Los tems de actitudes se caracterizan porque no recogen respuestas


correctas e incorrectas.
2.- Para estudiar el ndice de discriminacin se utiliza la correlacin:
Entre la puntuacin en el tem y la puntuacin en el test, descontada
la puntuacin en el tem (Procedimiento Directo)
Entre la puntuacin en el tem y la puntuacin en el test y, a
continuacin, se aplica la frmula de correccin (Procedimiento
Indirecto)
3.- La correlacin tambin se puede interpretar como un ndice de
homogeneidad (IH). Hasta qu punto el tem est midiendo la misma
dimensin que el resto de tems de la escala. En general, los tems con IH
< 0,20 se deben eliminar de la escala.
5.- NDICE DE DISCRIMINACIN BASADO EN LA CORRELACIN (TEMS
ACTITUDES)
La siguiente matriz de datos representa las respuestas dadas por ocho sujetos a un
test de eleccin mltiple de seis elementos, cada uno de ellos con cuatro
alternativas de respuesta. Por simplicidad, en la matriz se ha indicado nicamente
si el sujeto ha elegido la opcin correcta (con un 1) o una opcin incorrecta (con un
0). Calcular El ndice de homogeneidad del elemento n 4.
tems
R. MEDRANO (TUTOR)

Total (Test)
Pgina 4

PSICOMETRA

Sujet
os
1
2
3
4
5
6
7
8

PROBLEMAS TIPO (TEMA N 8)

X1

X2

X3

1
1
1
1
1
1
1
1

1
1
1
0
1
1
0
1

0
1
1
0
0
1
0
0

X4
(J)
0
1
0
1
0
1
0
0
3

X5

X6

XTOTA

1
1
0
0
0
0
0
1

0
0
0
0
0
0
0
0

3
5
3
2
2
4
1
3
23

XJ
(X4)
0
5
0
2
0
4
0
0
11

X2

X24 (J)

9
25
9
4
4
16
1
9
77

0
1
0
1
0
1
0
0
3

ndice de homogeneidad (IH) Primero averiguamos medias, varianzas y


desviaciones tpicas del test y del tem n 4. Despus aplicamos el ndice de
homogeneidad y la correlacin corregida.
2
X2
77
X
2,875 2 1,36
N
8
23
1,36 1,17 X
2,875
8

2
J2
3
J 0,375 2 0,23
N
8
3
S J 0,23 0,48 J 0,375
8

S X2
SX

R JX

S J2

ndice de homogeneidad
N JY X J
(8 11) (23 3)
19

0,53
2
2
2
2
2
2
87

15
(
8

77

23
)(
8

3
)
N X X N J J

RJ ( X J )

Correlacin corregida
(0,53 1,17) 0,48
0,14

0,14
(1,36 0,23 2 0,53 1,17 0,48
1
2 R JX S X S J

R JX S X S J
S 2X S 2J

R J ( X J ) correlacin entre las puntuaciones de los sujetos en el elemento J y en


la escala total (descontando la puntuacin del tem)

Nota: ndices de discriminacin en los tems de actitudes (Formulario


pginas 5 y 52)
6.- TEMS ACTITUDES // NDICE DE DISCRIMINACIN BASADO EN LOS GRUPOS
EXTREMOS

En la tabla se representan las puntuaciones dadas al tem n 9 por el 25% de los


sujetos con puntuaciones ms altas, y el 25% con puntuaciones ms bajas en un
test de actitudes formado por tem de tipo Likert con 10 categoras de respuesta.
Sabiendo que la varianza de ambos grupos (superior e inferior) es igual a 1,56,
podemos decir que el elemento n 9 discrimina de manera estadsticamente
significativa? (NC = 95% / Contraste unilateral)

25%
Superior
25%
Inferior

R. MEDRANO (TUTOR)

Sujet
o
20
2
13
3
5
8

Punt
os
10
9
7
4
5
2

Medias (10+9+7)/3
(4+5+2)/3 = 3,67

8,67

Varianzas SS = Si = 1,56
T = 4,9

Pgina 5

PSICOMETRA

PROBLEMAS TIPO (TEMA N 8)

X SJ X IJ
(n S 1) S 2 SJ (ni 1) S 2 IJ
1 / n S 1 / ni
n S ni 2

8,67 3,67
(2 1,56) (2 1,56)
(1 / 3) (1 / 3)
4

4,9

El elemento n 9 discrimina de forma significativa entre los grupos superior e inferior


porque el resultado: TEMPRICA = 4,9 > TTERICA = 2,132 (tabla n 3 con 4 grados de libertad
y probabilidad = 0,95 / contraste unilateral: H 1: la media del grupo superior es mayor que
la del grupo inferior)
Nota: ndice de discriminacin en los grupos extremos. El procedimiento es
menos eficiente que la correlacin corregida porque no utiliza toda la muestra.
Pgina 53 del formulario.
FACTORES QUE AFECTAN A LA DISCRIMINACIN

1.- La variabilidad de los tems (si no hay variabilidad en las respuestas, el

tem no discrimina)

2.- La fiabilidad del test (tems con poco poder discriminativo se asocian a
test poco fiables)
3.- Dificultad del tem (con dificultad media p = 0,5 el tem mximo poder
discriminativo)
4.- Unidimensionalidad del test (el test debe medir un nico concepto)
7.- NDICE DE FIABILIDAD DEL TEM
En la siguiente tabla se presentan los ndices de dificultad y discriminacin de los
seis tems dicotmicos de un test de comprensin lectora. Calcular el ndice de
fiabilidad del tem que mejor contribuye a la medida de la comprensin lectora:
TEMS
1
2
3
4
5
6

p
0,71
0,97
0,80
0,47
0,34
0,73

rbp
0,35
0,03
-0,04
0,50
0,45
0,20

El tem que contribuye ms a la medida de la comprensin lectora es el n 4 (r bp =


0,50), debido a que muestra el ms alto poder discriminativo (ID J). Para el clculo
del ndice de fiabilidad del tem, utilizamos la expresin: IF = SJ rJ (X-J) IF = SJ IDJ
(IDJ = rJ (X-J))
TEM
tem n 4

p
0,47

S2J = pq
0,470,53 =
0,25

SJ
0,50

IDJ = rJ (X-J)
0,50

IF
0,25

Nota: ndice de fiabilidad del tem (pgina 54 del formulario); IF (criterio


interno) se utiliza para cuantificar el grado que el tem en cuestin est
midiendo con precisin el atributo de inters.

8.- NDICE DE VALIDEZ DEL TEM


Suponiendo que las correlaciones obtenidas entre los tems 1, 6 y 14 de un test ,
con un criterio externo son respectivamente: 0,63, 0,75, 0,80 y sabiendo que la
proporcin de sujetos que acierta cada tem es: tem 1 (0,518) // tem 6 (0,885) //
tem 14 (0,162). Qu tem presenta un mayor ndice de validez?:
Correlaciones y Proporciones r1Y = 0,63 y p = 0,518 // r6Y = 0,75 y p = 0,885 // r14Y
R. MEDRANO (TUTOR)

Pgina 6

PSICOMETRA

PROBLEMAS TIPO (TEMA N 8)

= 0,80 y p = 0,162
Averiguamos
dicotmicos)
S1

las

correspondientes

0,518 0,482 0,5 // S 6

desviaciones

tpicas

0,885 0,115 0,32 // S14

S1

pq

(tem

0,162 0,838 0,37

Aplicamos la frmula para averiguar el ndice de validez de cada tem IV S J rJY


IV1 = (0,5 0,63) 0,315
IV6 = (0,32 0,75) 0,24
IV14 = (0,37 0,8) 0,296

TEM N 1
TEM N 6
TEM N 14

IV1 = 0,315
IV6 = 0,24
IV14 = 0,296

IV = SJ rJY SJ = desviacin tpica puntuaciones tem J // rJY = correlacin puntuaciones


tem J y criterio.

Conclusin El tem con mayor ndice de validez es el n 1 (IV1 = 0,315)


Nota: ndice de validez del tem (pgina 55 del formulario); IV (criterio externo)
Implica correlacionar las puntuaciones obtenidas por una muestra de sujetos
en el tem con las puntuaciones obtenidas por los mismos sujetos en algn
criterio externo de inters.

9.- RELACIN ENTRE LOS PARMETROS DEL TEM Y LA FIABILIDAD Y


VALIDEZ DEL TEST
A partir de los datos de la tabla averiguar el coeficiente de validez del test.
Sabemos que los ndices de validez son (r JY) A = (0,20) // B = (0,40) // C =
(0,60).
tems
Sujet
os
A
B
C
D
E
Prob
=

A (1)

B (2)

C (3)

0
1
1
1
1
0,8

0
1
0
1
1
0,6

1
1
0
1
1
0,8

TOTAL TEST
MENOS TEM
X
X-i1
X-i2
X-i3
1
3
1
3
3

1
2
0
2
2

1
2
1
2
2

0
2
1
2
2

Lgica del procedimiento En la medida que los tems tengan mayor ndice de
fiabilidad (IF), mejor ser la fiabilidad del test (el sumatorio al cuadrado de los
ndices de fiabilidad de los tems, coincide con la varianza de las
puntuaciones de los sujetos en el test / pginas 53 y 54 del formulario).
Asimismo, cuanto mayor son los ndices de validez de los tems, mejor ser la
validez del test.
Calculamos la desviacin tpica de cada elemento (los tems son dicotmicos: 1
acierto y 0 fallo)
tem A (p = 4 aciertos / 5 respuestas = 0,8; por tanto, 1 fallo / 5
respuestas = 0,2)
tem B (p = 3 aciertos / 5 respuestas = 0,6; por tanto, 2 fallo / 5
respuestas = 0,4)
tem C (p = 4 aciertos / 5 respuestas = 0,8; por tanto, 1 fallo / 5
respuestas = 0,2)
Desviacin Tpica de cada tem
R. MEDRANO (TUTOR)

Pgina 7

PSICOMETRA

PROBLEMAS TIPO (TEMA N 8)

SJ

pq S A (4 / 5) (1 / 5) 0,16 S A 0,40

SJ

pq S B (3 / 5) (2 / 5) 0,24 S A 0,49

SJ

pq SC (4 / 5) (1 / 5) 0,16 S A 0,40

ndices de Validez (rJY) IV A = (0,20) // B = (0,40) // C = (0,60)

Pasamos a calcular los datos necesarios para averiguar las correlaciones entre
cada tem (1, 2 y 3) y la puntuacin total en el test (eliminando la correspondiente
al tem implicado):
Media en el test de los sujetos que aciertan el tem
tem 1 (2+0+2+2) / 4 = 1,5 // tem 2 (2+2+2) / 3 = 2
tem 3 (0+2+2+2) / 4 = 1,5
Media total del test eliminando el valor de cada tem
X X 1 (1 2 0 2 2) / 5 1,4
X X 2 (1 2 1 2 2) / 5 1,6
X X 3 (0 2 1 2 2) / 5 1,4

Desviacin tpica de las puntuaciones del test


Para tems 1 y 3 S X2

Para tems 2 S X2

2
X2
(0 2 2 2 12 2 2 2 2 )
X
(1,4) 2 0,64 S X 0,8
N
5

2
X2
(12 2 2 12 2 2 2 2 )
X
(1,6) 2 0,24 S X 0,49
N
5

ndices de discriminacin ( rbpJY )

X A XT
1,5 1,4
p / q rbp
0,8 / 0,2 rbp ( X 1 ) 0,125 2 0,25
SX
0,8
X XT
2 1,6
rbp A
p / q rbp
0,6 / 0,4 rbp ( X 2 ) 0,816 1,22 0,99
SX
0,49
X XT
1,5 1,4
rbp A
p / q rbp
0,8 / 0,2 rbp ( X 3 ) 0,125 2 0,25
SX
0,8

rbp

A partir de los ndices de validez y fiabilidad de los tems calculamos el coeficiente


de validez del test:

rXY

S
S

J JY

J JX

rXY

(0,40 x0,20) (0,49 x0,40) (0,40 x0,60) 0,76


(0,40 x0,25) (0,49 x0,99) (0,40 x0,25)

SA = 0,40 / SB = 0,49 / SC = 0,40


(rJY) A = 0,20 / B = 0,40 / C = 0,60
R. MEDRANO (TUTOR)

Pgina 8

PSICOMETRA

PROBLEMAS TIPO (TEMA N 8)

(rbp) 1 = 0,25 / 2 = 0,99 / 3 = 0,25


Nota: Relacin entre los parmetros del tem y la fiabilidad y validez del test.
(Formulario pgina 55).

ANLISIS DE DISTRACTORES (DISEO CORRECTO DE UN TEM)


Un tem se considera correctamente diseado cuando:
1.- Ms de un 10% de los sujetos responde a cada distractor.
2.- Los distractores discriminan en sentido contrario a la alternativa correcta.
3.- El tem no es demasiado difcil (dificultad media Entre 0,20 y 0,80)
4.- El tem tiene una capacidad discriminativa adecuada (En general D 0,30)

10.- ANLISIS DE LAS RESPUESTAS INCORRECTAS (DISTRACTORES) //


EQUIPROBABILIDAD
Se sospecha que las alternativas incorrectas de un tem del ltimo examen de
Psicometra no son equiprobables. En la siguiente tabla se muestra la frecuencia
de sujetos que seleccionaron cada una de las tres alternativas del tem, donde la B
es la correcta. Averiguar si las alternativas incorrectas son estadsticamente
equiprobables a un nivel de confianza del 95%.

A
36

B*
389

C
52

( FT FO) 2 (44 36) 2 (44 52) 2

2,91
FT
44
44
F. Tericas = media de las respuestas incorrectas
(88/2 = 44)
F. Observadas
= n de respuestas incorrectas
(36+52 = 88)

Buscamos el valor terico X2 (Tabla con k 1 = 2 1 = 1 gl y 1- = 0,95) 3,84


Como el valor emprico (2,91) < 3,84 (valor terico) Aceptamos H0 (las
alternativas incorrectas de ese tem son igualmente atractivas para todos los
sujetos)
Nota: Anlisis de distractores (Equiprobabilidad). Pgina s 55 y 56 del
formulario.

11.- ANLISIS DE DISTRACTORES // PODER DISCRIMINATIVO BASADO EN LA


CORRELACIN
En la tabla se recogen las caractersticas psicomtricas de dos tems 1 y 14
(dificultad, discriminacin, % de respuestas a cada una de las opciones y
correlacin biserial). En amarillo la opcin correcta. La discriminacin se
corresponde con la correlacin (RBIS) de la opcin correcta.
te
ms
1

Dificult
ad
0,277

Discriminac
in
0,023

14

- 0,257

0,377

%1
0,1
41
0,1
62

RBIS
1
0,156
0,377
+

%2

RBIS 2

%3

RBIS 3

0,1
78
0,2
04

- 0,157

0,5
18
0,0
99

0,023
+
0,157

0,513

ID1 = (0,518) - (0,482/2) = (0,277) // ID14 = (0,162) - (0,838/2) = (- 0,257)

Nota: Los tems ms difciles son los que tienen una mayor correccin debido al azar. De
hecho, cuando, por ejemplo, se calculan las notas de aquellos alumnos que han respondido
R. MEDRANO (TUTOR)

Pgina 9

PSICOMETRA

PROBLEMAS TIPO (TEMA N 8)

completamente al azar a un test, es frecuente hallar notas negativas (que se traducen


directamente a 0). Cuando al considerar el efecto del azar aparecen ndices de Dificultad
(ID) negativos, estn indicando que han sido acertados ms veces por azar que por
conocer la respuesta correcta.

11.1.- El tem 1 est correctamente diseado?:


Respuesta Ambos distractores estn correctamente diseados (responden ms
de un 10% de los sujetos y discriminan en sentido contrario a la alternativa
correcta) por lo que no deben modificarse. El tem no es demasiado difcil (dificultad
> 0,20) y su capacidad discriminativa es muy baja (< 0,10) por lo que carece de
utilidad.
11.2.- El tem 14 est correctamente diseado?:
Respuesta No est correctamente diseado y debera eliminarse. Los
distractores 2 y 3 discriminan en el mismo sentido que la opcin correcta (los
sujetos con alto nivel de aptitud tienden a considerar ambos distractores como la
respuesta correcta). Tiene una dificultad excesiva (por debajo de 0,20) y la
capacidad discriminativa es adecuada (0,30 D 0,39) Discrimina bien
Nota: Anlisis de distractores (pginas 55 y 56 del formulario)

PODER DISCRIMINATIVO DE LOS DISTRACTORES


En la siguiente tabla se muestran las respuestas de cinco sujetos a un tem de tres
alternativas, donde la opcin correcta es la C, as como la opcin incorrecta
seleccionada y la puntuacin total obtenida en el test. Calcular la discriminacin
del distractor A utilizando la correlacin biserial puntual y comentar el resultado.
Sujet
o
1
2
3
4
5

tem

1
0 (A)
0 (A)
1
0 (B)

2
3
4
1
3

X- i

1
3
4
0
3

Media de A (3+4) / 2 =3,5 // Media total (1+3+4+0+3) /


5 = 2,2

S X2 i

2
(12 3 2 4 2 0 2 3 2 )
X2
X
(2,2) 2 2,16 S X 2,16 1,47
N
5

p y q (2/5 = 0,4 y 0,6)

rbp

X A XT
SX

p / q rbp

3,5 2,2
0,4 / 0,6 0,73
1,47

El resultado (rbp = 0,73), indica que el distractor est confundiendo a los


sujetos que obtienen mejores puntuaciones en el test; por tanto, no discrimina en
sentido contrario a la alternativa correcta, tal como cabra esperar de un buen
distractor.
Nota: Poder discriminativo de los distractores basado en la correlacin biserial
puntual (Formulario pgina 56)

12.- FUNCIONAMIENTO DIFERENCIAL DEL TEM (FDI)


R. MEDRANO (TUTOR)

Pgina 10

PSICOMETRA

PROBLEMAS TIPO (TEMA N 8)

Con el fin de descartar la posibilidad de sesgo en contra de las nias en un test de


lgebra, se llev a cabo un anlisis del funcionamiento diferencial de los tems. Por
este motivo, se formaron dos grupos de nivel de aptitud a partir de las
puntuaciones en el test. En la siguiente tabla se muestra el nmero de respuestas
correctas (C) e incorrectas (I) de los nios y de las nias en funcin del nivel de
aptitud en el primer tem del test. Analizar si existe FDI tomando como grupo de
referencia el grupo de los nios.
NIOS
C
I
16
64
99
66

X
0-20
21-40

NIAS
C
I
12
58
60
125

Datos del problema El grupo de referencia lo forman los nios (GR) y el grupo
focal las nias (GF)
Calculamos el nmero de respuestas correctas e incorrectas para cada grupo y
nivel de aptitud:
GRUPO BAJA COMPETENCIA
Correctas
Nios
(GR)
Nias
(GF)
Suma
()

GRUPO ALTA
COMPETENCIA
Correctas
Incorrecta
s
99 (A)
66 (B)

16 (A)

Incorrecta
s
64 (B)

12 (C)

58 (D)

60 (C)

125 (D)

28

122

159

191

N = 150

N = 350

Calculamos MH (Mtodo de Mantel-Haenszel). Pginas 68 y 69 del


formulario

Grupo
Compete
ncia

Trminos de la expresin de Mantel-Haenszel


Ai Di

Ai Di / Ni

Bi C i

Bi Ci / Ni

Baja

(16 58 = 928)

Alta

(99 125 =
12375)

(928 / 150 =
6,19)
(12375 / 350 =
35,36)

(64 12 =
768)
(66 60 =
3960)

(768 / 150 =
5,12)
(3960 / 350 =
11,31)

Suma ()

MH

Ai Di
Ni
41,55

2,53
Bi C i 16,43
N
i

41,55

16,43

Dado que MH (2,53) > 1, el tem presenta FDI y


favorece al grupo de referencia (nios)

Dado que MH > 1 El tem favorece claramente al grupo de referencia (grupo de


nios), tal y como se haba supuesto inicialmente.
[Valores >1 indican que el tem favorece al grupo de referencia (GR) y menores al
grupo focal (GF)]
[Valores iguales o prximos a 1 indican que el tem no presenta FDI.
Nota: Funcionamiento diferencial del tem (pginas 56 y 57 del formulario)
R. MEDRANO (TUTOR)

Pgina 11

PSICOMETRA

PROBLEMAS TIPO (TEMA N 8)

DIFERENCIACIN IMPORTANTE
FDI (Funcionamiento Diferencial de los tems) Detecta que un tem est
funcionando de manera distinta en dos grupos con el mismo nivel de aptitud
(detectada la circunstancia, no apunta posibles causas)
Sesgo Sujetos igualmente hbiles no tienen la misma probabilidad de
acertar el tem por el hecho de pertenecer a subpoblaciones distintas. El
sesgo est relacionado con la validez de constructo e indica que est
actuando alguna variable extraa (interpreta las causas del funcionamiento
diferencial).
IMPACTO Diferencias reales entre grupos que se deben a diferencias en el
nivel de competencia de las subpoblaciones).Mientras que en el FDI las
diferencias se deben a motivos distintos al nivel de competencia, en el
impacto hay un grupo de sujetos ms competentes)
INTERPRETACIN (NIVEL DISCRIMINACIN DEL
TEM) / EBEL
Valores
Interpretacin
D 0,40
Discrimina muy bien
0,30 D 0,39
Discrimina bien
0,20 D 0,29
Discrimina poco
0,10 D 0,19
Necesita revisin
D 0,10
Carece de utilidad

R. MEDRANO (TUTOR)

Pgina 12

Você também pode gostar