Professional Documents
Culture Documents
Investigacin
Nro. Proyecto:
NOMBRE
FUNCIN
DH(*)
Directora
Docente Investigador
Docente Investigador
Docente Investigador
15
10
10
10
[1]
10 de marzo de 2011
2.- OBJETIVOS DEL PROYECTO
2.1.
Objetivo General
1. Informatizar completamente (nivel 3) el Test de Aptitudes
Diferenciales, en su versin con los reactivos grficos escaneados, en
la que se pueda realizar el procesamiento de la informacin adquirida
en el test de modo informatizado; permitiendo esto una rpida
administracin y puntuacin del test, as como una interpretacin
ms acelerada de los resultados, todo ello sin que se vea
comprometida la validez de dicha prueba para el anlisis de las
aptitudes que presentan los individuos.
2. Crear una nueva versin completamente informatizada (nivel 3) del
Test de Aptitudes Diferenciales en la que los reactivos grficos de los
subtest sean ms cercanos a la realidad (no escaneados),
aumentando as la validez de constructo del test; as como hacer que
el mismo sea ms atrayente a los usuarios, aumentando la
motivacin de los mismos hacia la prueba.
Objetivos Especficos
-
2.2.
PROBLEMTICA
PLANTEADA,
INCLUYENDO
HIPTESIS
TERICAS
Y
METODOLGICAS,
CONCLUSIONES
ANTICIPADAS
Y
MEDIOS
DE
TRABAJO
[2]
[3]
[4]
[5]
Prez Ruiz. (1999, siguiendo a Olea y cols., 1998) seal que, como con la
informatizacin de las pruebas psicolgicas lo que se pretende es la
optimizacin de diferentes aspectos de aplicacin, correccin e
interpretacin de un test, se puede hablar de ciertos grados de
automatizacin en el proceso. As habl de tres niveles de automatizacin
de los test: a) nivel mnimo de automatizacin, donde la prestacin de los
tems se realiza en formato de papel y lpiz, las respuestas tambin estn
hechas en papel en una hoja llamada hoja electrnica y la correccin de
las respuestas es la que se realiza de manera informatizadas por medio de
la lectora electrnica; b) el segundo nivel consiste en la presentacin de los
tems en formato de papel y lpiz, mientras que tanto la respuesta como el
procesamiento de los datos se realiza en la computadora; c) el tercer nivel
y ltimo, es el
de mxima informatizacin, e incluye adems
la
presentacin de los test e instrucciones por pantalla o por otro tipo de
perifrico como altavoces, DVD, etc.
Teniendo en cuenta los orgenes de los test informatizados, Bunderson y
cols. (1989, en Schade y cols., 2005) afirman que lo que se ha dado en
llamar la primera generacin de test informatizados, correspondi e la
implementacin de test convencionales de papel y lpiz en una
computadora y la aplicacin de los mismos a travs del teclado y la
pantalla. Estos primero test informatizados pretendan solucionar problemas
relacionados con la correccin e interpretacin de las pruebas psicolgicas
convencionales existentes ya en papel y lpiz.
Sin embargo, hay que ser cuidadosos a la hora de automatizar un test de
papel y lpiz. Si bien, hay autores (Bunderson y cols., 1989, en Schade y
cols., 2005; Olea y cols., 1998 Prez Gil, 1999) que consideran que esto no
debera de cambiar en nada la esencia del test, y solo aporta ventajas; hay
otros autores que no comparten esta visin (Schade y cols., 2005), y
sealan que hay que analizar la posibilidad de que el cambio en la
modalidad puede traer cambios en los resultados obtenidos y, por lo tanto
en las baremaciones, as como tambin la validez de constructo del test
informatizado. Dentro de esta ltima lnea tenemos a Kristen y Sireci (2001,
en Schade y cols., 2005). Segn estos autores, para estimar la validez de un
test informatizado, no basta con realizar comparaciones entre la versin
informatizada y la de papel y lpiz, sino que hay que comprobar la validez
de constructo. Esto es necesario, segn dichos autores, dado que los test
informatizados presentan diferencias que se deben principalmente a este
nuevo formato (familiaridad con la tecnologa, con este formato o con el
diseo del test) que pueden poner en tela de juicio la validez de constructo
del mismo.
Teniendo en cuenta las directrices de la APA (1986), cuando se cambia algn
tipo de equipamiento estndar, as como las condiciones o los
procedimientos, respeto a los que se describen en el manual del test, debe
demostrarse que no afecta de forma apreciable a las puntuaciones del test.
Concretamente, hace referencia a que cuando se interpretan puntuaciones
de versiones informatizadas de test convencionales, debe establecerse y
documentarse la equivalencia de las puntuaciones de las versiones
informatizadas con las del test convencional. Estas directrices dadas por la
APA (1986) tambin insisten en que se deben proporcionar estudios
comparativos de las versiones convencionales e informatizadas para
establecer fiabilidad de la aplicacin informatizada.
[6]
[7]
[8]
de las formas en ninguno de los subtest del test o de los ndices obtenidos al
combinar los mismos; a excepcin del subtest de Lenguaje, donde se
observ que si haba una diferencia significativa entre las versin
informatizada y la manual, siendo mejores las puntuaciones obtenidas en la
versin informatizada. Un anlisis ms detallado de este ltimo resultado
revel que estas diferencias en el subtest de Lenguaje, se observaban solo
en las mujeres, ya que eran ellas las que obtenan mejor puntuacin en la
versin informatizada que en la manual; mientras que en el caso de los
varones no se observaron diferencias.
Todo esto nos llev, como grupo de investigacin a plantearnos la
posibilidad de crear una nueva versin informatizada del DAT, en la que
estos problemas fueran analizados y resueltos y que, por otra parte, fuera
ms llamativa y motivadora para los usuarios.
Con esta nueva versin informatizada, adems de las ventajas ya sealadas
sobre la rapidez y precisin en la aplicacin y anlisis de los datos, se
consiga una versin ms motivadora. Nos permitir el uso de estmulos
tridimensionales y formatos interactivos, propuestos por varios autores
(Harris-Bowlshey, 1983; Visweswaran, 2000; Huff y Sirece, 2001; Schade y
cols., 2005). Todo esto har que, como sealan Muniz y Hambleton (1999),
el test sea cada vez ms complejo y cercano a la realidad, asegurando as la
validez de los que pretende medir. Esto puede hacer a la prueba incluso
ms atrayente para el usuario, aumentando as la motivacin del mismo a
completar la misma (Harris-Bowlsbey, 1983, en Rivas y cols., 2005). Es por
ello que, adems de mejorar el proceso de procesamiento de los datos en la
versin que ya se est informatizando del DAT, en la que los grficos de los
reactivos slo se estn escaneando, en esta propuesta que hoy se presenta
se pretender mejorar esas presentaciones grficas, hacindolas ms
cercanas a la realidad, y ms atrayentes para los alumnos, lo cual
consideramos que podra mejorar el procesamiento de informacin por
parte de los alumnos. Esta nueva versin ms atrayente tambin tendra
que ser validad y comparar los resultados que se obtengan con ella con los
obtenidos en la prueba de lpiz y papel y en la otra versin ya informatizada
(la de las grficas de los reactivos escaneadas).
De conseguirse todas estas ventajas con el DAT una vez que se informatice,
lo hara de un gran atractivo, sobre todo, como en nuestro caso durante la
evaluacin en el curso de ingreso a la universidad, donde se administran
pruebas a grandes grupos en un corto lapso de tiempo.
No obstante, hay que tener en cuanta que segn las directrices de la APA
(1986), cuando se cambia algn tipo de equipamiento estndar, as como
las condiciones o los procedimientos, respeto a los que se describen en el
manual del test, debe demostrarse que no afecta de forma apreciable a las
puntuaciones del test. Concretamente, hace referencia a que cuando se
interpretan
puntuaciones
de
versiones
informatizadas
de
test
convencionales, debe establecerse y documentarse la equivalencia de las
puntuaciones de las versiones informatizadas con las del test convencional.
Estas directrices dadas por la APA (1986) tambin insisten en que se deben
proporcionar estudios comparativos de las versiones convencionales e
informatizadas para establecer fiabilidad de la aplicacin informatizada.
Es por todo ello que la propuesta que presentamos en este momento
tendra dos grandes momentos:
[9]
[10]
[11]
[12]
[13]
[14]
versin
[15]
[16]
Con todo esto se pretende recolectar informacin que nos permita asegurar
que la versin informatizada del DAT a la que lleguemos y que, como se ha
dicho, ser la base para la versin mejorada, sea vlida y mida lo que
pretende medir.
4.- RESULTADOS OBTENIDOS
4.1.
[17]
Moreno Angel, L.; Hernndez, J.M.; Garca Leal, O.; Santacreu, J. (2000): Un
test informatizado para la evaluacin de la tolerancia a la frustracin.
Anales de Psicologa, 16 (2): 143-155.
Olea, J. Abad, F.J. y Barrada, J.R. (2010): Test informatizados y otros nuevos
tipos de test. Papeles del Psiclogo, 31(1): 94-107.
Olea, J. y Ponsoda, V. (1998). Tests informatizados y adaptativos
informatizados: investigacin en Espaa.. RELIEVE, vol. 4, n. 2.
Consultado en http://www.uv.es/RELIEVE/v4n2/RELIEVEv4n2_0.htm en
febrero de 2011.
Prieto, G.; Carro, J.; Orgaz, B.; Pulido, R.F. (1993): Anlisis Cognitivo de un
Test Informatizado de Visualizacin Espacial. Psicothema, 5(2): 293-301.
Romero, C; Ventura, S.; Hervs, C.; Rider, I, Martn-Palomo, S. (2006):
Herramienta Autor para la gestin de Test Informatizados dentro del
sistema AHA!. Revista Iberoamericana de Informtica Educativa. N 3: 4354.
Tambin se ha establecido conexin con los siguientes investigadores y
grupos de trabajo, todos ellos realizando investigaciones relacionadas a la
informatizacin de test y validacin de test informatizados:
Nombre del
Investigador
Principal
Correo electrnico
Universidad de
Procedencia
laura.moreno@uam.es
Universidad Autnoma de
Madrid. Espaa
Cristobal Moreno
cromero@uco.es
Julio Olea
julio.olea@uam.es
Universidad de Crdoba.
Espaa
Departamento de Informtica
y Anlisis Numrico
Universidad Autnoma de
Madrid. Espaa
Universidad de Salamanca.
Espaa
Gerardo Prieto
gprieto@usal.es
Facultad de Psicologa
Departamento de Psicologa
Bsica, Psicobiologa y
Metodologa
Victor Rubio
victor.rubio@uam.es
Universidad Autnoma de
Madrid. Espaa
jclares@us.es
Universidad de Sevilla
Investigador
Principal
Correo electrnico
Universidad de
Procedencia
perezgil@us.es
Universidad de Sevilla
Nombre del
[18]
Nieves Schade
nschade@udec.cl
Eduardo Cabrera
labesam.uple@gmail.com
Universidad de Concepcin
Chile
Universidad de Valparaiso.
Chile
Nombre del
Investigador
Principal
Correo electrnico
Universidad de
Procedencia
Universidad de Sevilla
Facultad de Cs. de la
Educacin
carlos6262@us.es
Departamento de Mtodos de
Investigacin y Diagnostico
en Orientacin
Universitat de Girona
Facultad de Pedagoga
Montserrat Tesouro
montse.tesouro@udg.edu
Sergio Domnguez
Lara
sdominguezlara@gmail.co
m
Departament de Mtodes
d'investigaci i diagnstic en
educaci
Lima. Per
[19]
versin
Informatizada
Mujere
[20]
Varones
Manual
Mujeres
Varones
s
Razonamiento Verbal (RV)
z = 0.75
p > 0.05
z = 0.44
p > 0.05
z = 0.48
p > 0.05
Clculo (C)
z = 0.88
p > 0.05
z = 0.18
p > 0.05
z = 0.78
p > 0.05
z=
1.004
p > 0.05
z = 0.90
p > 0.05
Razonamiento Abstracto
(RA)
z = 0.64
p > 0.05
z = -0.09
p > 0.05
z = 0.27
p > 0.05
z = 0.61
p > 0.05
z = 1.44
p > 0.05
Razonamiento Mecnico
(RM)
z = 0.47
p > 0.05
z = 1.26
p > 0.05
z=
-0.022
p > 0.05
z = 0.62
p > 0.05
z=
0.044
p > 0.05
z = 0.11
p > 0.05
z = 0.19
p > 0.05
z = 0.57
p > 0.05
z = 0.28
p > 0.05
z = 0.27
p > 0.05
z = 0.48
p > 0.05
z = 1.56
p > 0.05
z=
-0.014
p > 0.05
z=
-0.095
p > 0.05
z = 0.28
p > 0.05
z = -0.37
p > 0.05
z = 0.95
p > 0.05
z = 0.42
p > 0.05
z = 0.70
p > 0.05
z = 1.18
p > 0.05
z = 0.84
p > 0.05
z = 0.17
p > 0.05
z = 0.44
p > 0.05
z = 0.93
p > 0.05
Ortografa (O)
Lenguaje (L)
ndice de Educabilidad
(RV+C)
ndice General de
Inteligencia
(RV+RA)
z = 0.53
p > 0.05
z = 0.67
p > 0.05
z = 0.27
p > 0.05
[21]
Subtest
Prueba t
[22]
[23]
4.3.
PRODUCTOS OBTENIDOS
INVESTIGACIN.
DERIVADOS
DE
LA
4.1.
[24]
6. OBSERVACIONES GENERALES
Ninguna
[25]