Fiabilidad y variabilidad

El

coeficiente de fiabilidad de un test se ve afectado por la variabilidad de la muestra. Un test tiende a manifestar un coeficiente de fiabilidad mayor cuanto mayor sea su variabilidad. Basndose en que:
El error tpico de medida es independiente de la variabilidad de la muestra => e1 = e2

Fiabilidad y variabilidad
= (1 11 ) = (1 22 ) =
2 e1 2 x1 2 x2 2 e2

despejando

(1 11 ) 22 = 1 2 x2
2 x1

Fiabilidad y longitud
Spearman

Brown, para n=2

2 xx R xx = 1 + xx
Siendo Rxx la fiabilidad del test de longitud doble y xx la fiabilidad del test primitivo

Fiabilidad y longitud
Ejemplo:

El coeficiente de correlacin de Pearson entre dos mitades aleatorias de un test es de 0,85. Cul es el coeficiente de fiabilidad de dicho test?

2 x 0,85 R xx = = 0,92 1 + 0,85

Fiabilidad y longitud
Spearman

Brown, caso general

R xx =

n xx 1+ ( n 1) xx

Siendo: Rxx, el coeficiente de fiabilidad del test resultante n, el nmero de veces que se aumenta la longitud del test xx, el coeficiente de fiabilidad del test original

Fiabilidad y longitud
Ejemplo:

Un test tiene 10 tems y un coeficiente de fiabilidad de 0,8. Se le aaden 20 tems ms, paralelos a los que ya posea. Cul es el coeficiente de fiabilidad del test resultante?

Rxx =

3 x 0 ,8 1+(31) 0,8

= 0,92

Fiabilidad y longitud
De

la frmula anterior si se despeja la n

n=

R xx (1 xx ) xx (1 R xx )

Donde cada smbolo representa lo mismo que en la frmula de Spearman-Brown

Esta frmula sirve para calcular directamente el valor de N con el fin de conseguir un determinado coeficiente de fiabilidad

Ejemplo

Se dispone de un test de 10 tems para llevar a cabo una investigacin. El coeficiente de fiabilidad del test es de 0,75. Cuntos elementos hay que aadir al test si se quiere que su fiabilidad sea de 0,9?

0,9(1 0,75) n= =3 0,75(1 0,9)

Es decir, al test habr que aadirle 20 elementos paralelos a los que ya tiene.

Otras frmulas para el clculo del coeficiente de fiabilidad

Frmulas

basadas en la consistencia interna entre las dos mitades del test: Frmula de Rulon: 2

p i xx = 1 2 x

Frmula

de Guttman y Flanagan:
2 2 p +i 1 xx = 2 2 x

Sujetos 1 1 2 3 4 5 6 7 8 9 10 Media Media2 1 1 1 1 1 1 1 1 1 1 2 0 1 1 1 1 0 1 1 1 1

tems 3 0 1 0 1 1 0 0 1 1 1 4 0 1 0 1 1 0 1 0 1 1 5 0 0 0 0 1 0 0 0 0 1 6 0 0 0 0 1 0 0 0 0 1

p-i

i2

p2

(p-i)2

X2

1 2 1 2 3 1 1 2 2 3 18 1,8 3,24

0 2 1 2 3 0 2 1 2 3 16 1,6 2,56

-1 0 0 0 0 -1 1 -1 0 0 -2 -0,2 0,04

1 4 1 4 9 1 1 4 4 9 38 3,8

0 4 1 4 9 0 4 1 4 9 36 3,6

1 0 0 0 0 1 1 1 0 0 4 0,4

1 4 2 4 6 1 3 3 4 6 34 3,4 11,56

1 16 4 16 36 1 9 9 16 36 144 14,4

2(p-i)= 0,4 - 0.04 = 0,36 2(p)= 3,6 - 2,56 = 1,04 2(i)= 3,8 3,24 = 0,56 2(x)= 14,4 11,56 = 2,84

Rulon

= 1

0 , 36 = 0 , 87 2 , 84

Guttman

1, 04 + 0 , 56 = 21 = 0 , 87 2 , 84

La consistencia interna como estimacin de la fiabilidad

El coeficiente
En 1951, Cronbach, publica en Psychometrika un artculo titulado:

Coefficient alpha and the internal structure of tests

El coeficiente
El coeficiente de Conbrach es, sin duda, el mtodo

ms conocido y ms utilizado para el estudio de la consistencia interna del test como estimacin de su fiabilidad. Su valor se estima a partir de la siguiente ecuacin:
n 2 j n j =1 = 1 2 n 1 x

El coeficiente
Sujetos 1 1 2 3 4 5 6 7 8 9 10 Varianza 2 4 5 2 3 3 1 1 0 5 2,64 2 2 3 3 1 2 3 1 1 1 3 0,80 3 3 3 5 3 5 5 3 3 2 5 1,21 4 1 1 3 2 4 4 2 1 0 3 1,69 5 3 3 4 3 5 5 3 4 3 3 0,64 tems 6 4 5 5 4 5 5 3 3 3 5 0,76 7 1 2 3 1 2 2 0 0 0 3 1,24 8 2 4 5 3 4 4 2 1 1 5 2,09 9 4 5 5 5 5 5 4 3 3 5 0,64 10 1 2 2 1 1 1 2 0 0 3 0,81

2x = 87,6

10 12 , 4 = 1 = 0,95 87 ,6 9

Frmulas basadas en el coeficiente

pi q i n i =1 KR20 = 1 2 x n 1
n

Esta frmula est basada en el coeficiente y puede utilizarse cuando los tems son dicotmicos

Frmulas basadas en el coeficiente

2 X X n n 1 = 2 n 1 x

KR

21

La frmula es equivalente al de Cronbach cuando los tems son dicotmicos y tienen todos ellos la misma probabilidad de ser acertados

Frmulas basadas en el anlisis factorial

Coeficiente

de Carmines

En 1979 Carmines y Zeller propusieron el coeficiente como una aproximacin al coeficiente .

n 1 = 1 n 1 1
Donde 1 es el primer autovalor de la matriz de datos sometida a anlisis factorial

Frmulas basadas en el anlisis factorial

Se puede demostrar que:

xx

Coeficiente
Raju

en 1977 propone el coeficiente , generalizacin de , que permite resolver el problema que se plantea para estimar el coeficiente de de la batera, slo se dispone de las puntuaciones en los subtests y stos no tienen el mismo nmero de tems. Si bajo estas condiciones se calcula , se obtiene una infraestimacin del coeficiente

Coeficiente

2 x

j =1 k

2 j 2

2 x 1

nj j =1 n

K: Nmero de subtests de la batera 2x: Varianza de las puntuaciones en la batera 2j : Varianza de cada subtest nj: Nmero de tems de cada subtest n: Nmero de tems de la batera

Fiabilidad de una batera de tests

Para

el clculo de la fiabilidad de una batera de tests Yela (1987) propone la siguiente frmula:

Rn = 1

j =1 2 j

j =1 2 x

2 j

jj '

Inferencias sobre
En

muchas ocasiones interesa comparar el valor del coeficiente cuando un test se aplica en dos muestras diferentes. Por ejemplo puede ser interesante comprobar si la fiabilidad o la consistencia interna de un test es la misma en hombres y mujeres.

Feldt

en 1.969 propone un estadstico de contraste que permite esta comparacin:

Inferencias sobre
H0 :

1 = 2

H1 :

1 2

H1: 1 < 2

Inferencias sobre

1 1 w= 12
Donde w se distribuye segn la distribucin F con (N1- 1) y (N2-1) g. l.

Inferencias sobre

Se pasa un test de Neuroticismo a 121 mujeres y 61 varones. El coeficiente en el grupo de las mujeres fue de 0,92 y 0,87 en el grupo de varones. Al nivel de confianza del 95% se puede decir que el test tiene la misma consistencia interna en ambos grupos?

1 0,87 W = = 1,625 1 0,92

F60,120 g.l. = 1,53; 1,625 > 1,53

Fiabilidad de las diferencias

Diferencias

inter e intraindividuales en el mismo tests o en tests paralelos

H0: V1 = V2 H1: V1 V2 H1: V1 > V2

1 X

xx '

RC

Fiabilidad de las diferencias

Diferencias

intraindividuales en tests diferentes:

d = x 2 x x x x
1 1

2 2

Fiabilidad de las diferencias

Ejemplo

1: A un paciente se le diagnostica una depresin por haber obtenido en un test que mide este trastorno 54 puntos. Tras una terapia se le vuelve a aplicar el test y obtiene 30 puntos. La fiabilidad del test es de 0,9 y su varianza 121. Al nivel de confianza del 95% se puede decir que la terapia fue eficaz?

Fiabilidad de las diferencias

1.-

Nivel de confianza 95%=Z=1,645

2.- d 3.-

= 11 1 0,9 2 = 4,92

54 30 RC = = 4,88 4,92
1,645 < 4,88

4.-

Definicin
Un

test, como cualquier otro instrumento de medida, es vlido si sirve para medir adecuadamente aquello para lo que fue pensado como tal instrumento de medida

Diferentes tipos de validez

Validez

de contenido.

Validez aparente. Validez muestral. Validez curricular.

Validez

de constructo.

Validez convergente. Validez discriminante. Validez factorial.

Validez

en relacin con un criterio.

Validez predictiva. Validez concurrente. Validez retrospectiva.