You are on page 1of 25

Uso rea de

Investigacin

Nro. Proyecto:

UNIVERSIDAD CATOLICA DE SANTIAGO DEL ESTERO


SECRETARA DE CIENCIA Y TCNICA

CONCURSO DE PROYECTOS DE INVESTIGACIN Y


DESARROLLO
CONVOCATORIA 2009
INFORME DE AVANCE

UNIDAD ACADMICA/INSTITUTO: San Salvador (DASS)


REA TEMTICA: Ciencias Humanas y Sociales

1.- IDENTIFICACIN DEL PROYECTO


1.1. TITULO DEL PROYECTO
INFORMATIZACIN DEL TEST DE APTITUDES DIFERENCIALES (Nivel
3), VERSIN MEJORADA: CREACIN, APLICACIN Y VALIDACIN PARA
LOS INGRESANTES A LA UCSE-DASS Y COMPARACIN CON OTRAS
VERSIONES INFORMATIZADAS EN EL DASS.

1.2. NOMBRE DEL DIRECTOR E INTEGRANTES DEL EQUIPO CON


CARGO DOCENTE

NOMBRE

FUNCIN

DH(*)

Ana Josefa Martos Mula


Mara Carmen Langellotti
Noelia Vanesa Pearanda
Marcelo Andrs Brunet

Directora
Docente Investigador
Docente Investigador
Docente Investigador

15
10
10
10

1.3. UNIDAD ACADMICA


Departamento Acadmico San Salvador (DASS)
1.4. PERIODO QUE COMPRENDE LA ETAPA DE INVESTIGACIN
Meses de Junio de 2010 a Febrero del ao 2011. 1 Parte en el Plan de
Trabajo
1.5. FECHA DE PRESENTACIN DEL INFORME

[1]

10 de marzo de 2011
2.- OBJETIVOS DEL PROYECTO
2.1.

OBJETIVO GENERAL Y ESPECFICOS

Objetivo General
1. Informatizar completamente (nivel 3) el Test de Aptitudes
Diferenciales, en su versin con los reactivos grficos escaneados, en
la que se pueda realizar el procesamiento de la informacin adquirida
en el test de modo informatizado; permitiendo esto una rpida
administracin y puntuacin del test, as como una interpretacin
ms acelerada de los resultados, todo ello sin que se vea
comprometida la validez de dicha prueba para el anlisis de las
aptitudes que presentan los individuos.
2. Crear una nueva versin completamente informatizada (nivel 3) del
Test de Aptitudes Diferenciales en la que los reactivos grficos de los
subtest sean ms cercanos a la realidad (no escaneados),
aumentando as la validez de constructo del test; as como hacer que
el mismo sea ms atrayente a los usuarios, aumentando la
motivacin de los mismos hacia la prueba.

Objetivos Especficos
-

Mejorar, si se encontrasen, todos aquellos aspectos que pudieran


estar comprometiendo la validez del test en su versin informarizada
en la que las grficas de los reactivos estn escaneadas de la versin
de lpiz y papel.
Informatizar el procesamiento de la informacin obtenida en cada uno
de los subtet, as como de las combinaciones de subtest, que permita
el anlisis rpido de dicha informacin tanto a nivel individual, como
a nivel grupal, en funcin de la carrera seleccionada por el individuo.
Elaborar una versin informatizada del DAT, que adems de ser ms
esttica, consiga ser ms atrayente para el individuo al que se la
administra, mejorando la presentacin de las grficas que aparecen
en algunos reactivos de los subtest, hacindolas ms realistas y
motivadores para los usuarios.
Incluir en esta nueva versin las instrucciones auditivas, adems de
las visuales, en los subtest para mejorar la focalizacin de la atencin
y una mayor compresin de la tarea.
Validar este nuevo formato informatizado del DAT.
Analizar cul de las dos versiones informatizadas es la ms atrayente
para los usuarios y proponer sta para su aplicacin y posible
comerzializacin.

2.2.

PROBLEMTICA
PLANTEADA,
INCLUYENDO
HIPTESIS
TERICAS
Y
METODOLGICAS,
CONCLUSIONES
ANTICIPADAS
Y
MEDIOS
DE
TRABAJO
[2]

La necesidad de proporcionar ayuda a los alumnos en su paso de los


estudios secundarios a los estudios universitarios, as como en su
adaptacin a estos ltimos, ha hecho que desde la psicologa nos
planteemos la posibilidad de que, por medio de test psicomtricos, podamos
detectar caractersticas o peculiaridades de los individuos ingresantes que,
captadas de modos temprano, podran ser empleadas para establecer
planes de accin dirigidos a ayudarlos en este momento de transicin.
No obstante, dado el caudal de ingresantes a nuestras universidades, la
aplicacin manual de estos test, y especialmente el procesamiento de los
datos y la obtencin de los resultados, se puede convertir en una empresa
titnica y, en el mejor de los casos, los resultados llegaran tardamente,
cuando mucho de los alumnos podran haber abandonado sus estudios
terciarios
Es por ello que se consider que la informatizacin de ciertos test
psicomtricos podra ser de gran utilidad para el mbito educacional, ya que
agilizara todo el proceso, haciendo factible su utilizacin en los ingresos
universitarios.
Todo convertira al proceso en algo susceptible de ser empleado, aspecto
que antes era impensable por el gasto temporal, monetario y energtico
que implicaba. As mismo tambin permitira una mayor objetivizacin en la
correccin de las pruebas y una menor probabilidad de error en la
calificacin de las mismas, ya que este proceso se eliminara el componente
humano.
Nuestro trabajo centr su inters concretamente en la informatizacin
completa del Test de Aptitudes Diferenciales (DAT) (Bennet y cols., 1949)
El DAT es una prueba psicomtrica de gran utilidad en el mbito acadmico.
Este test permite analizar las diferentes aptitudes que los individuos tienen
para hacer frente a las demandas ambientales, permitiendo as conocer las
fortalezas y debilidades que los mismos puedan tener en este proceso de
adaptacin.
Este test, se basa en la teora de las inteligencias mltiples propuesta por
Gardner (1984, 1994), segn la cual para poder investigar adecuadamente
los diferentes procesos cognitivos es necesario incluir en los test un
repertorio amplio de aptitudes. El DAT, siguiendo a estas teoras, considera
que la inteligencia no es una facultad unitaria sino que su composicin est
vinculada a varias aptitudes diferentes en magnitud e interindividualmente.
Segn el diccionario de psicologia Warren plantea que una Aptitud es:
Condicin o conjunto de caractersticas consideradas como sintomticas de
la capacidad de un individuo para adquirir mediante capacitacin, algn
conocimiento o destreza o conjunto de respuestas (que por lo general se
especifican) tales como la capacidad de hablar un idioma, para producir
msica, etc. A partir de esta definicin, los autores del DAT (Bennett y cols.,
1949) refieren que: 1) la aptitud es resultado de la interaccin entre la
herencia y ambiente; 2) La aptitud es cualquier caracterstica que
predispone al aprendizaje, incluyendo constructos como los de inteligencia,
rendimiento, personalidad, intereses y destrezas especiales; 3) El test de
aptitud describe la capacidad potencial del estudiante para aprender en el
estudio de cierto nmero de asignaturas o de actividades vocacionales. 4)
La aptitud educacional, que es uno de los ndices que se pueden obtener

[3]

con dicho test, es considerada como la capacidad para aprender en forma


completa y con xito un curriculum amplio.
El DAT es una batera de integrada por ocho subtest (Razonamiento verbal;
Clculo; Razonamiento Abstracto; Velocidad y Precisin; Razonamiento
mecnico; Relaciones Espaciales; Ortografa y Lenguaje). Los test se
confeccionaron de manera tal que se pueden administrar y puntuar de
forma independientes unos de otros, examinando por separado cada una de
las capacidades que se trata de medir.
Se pudo comprobar en nuestra propia institucin (Martos Mula y cols.,
2007), que este test tena una gran capacidad predicitiva sobre los
rendimiento de los alumnos en el primer ao de su carrera universitaria;
ms concretamente las aptitudes vinculadas con el Razonamiento Verbal, la
Ortografa, el Lenguaje, el Clculo y el Razonamiento Espacial. Las
puntuaciones obtenidas en estos subtest del DAT tenan un mayor poder
predictivo en cuanto a los rendimientos presentados por los alumnos en su
primer ao de vida universitaria, que las puntuaciones del WAIS-III, otro test
de inteligencia.
Por este motivo el Centro de Orientacin Estudiantil (COE) de la Universidad
Catlica de Santiago del Estero-Departamento Acadmico San Salvador
(UCSE-DASS) usa este test para realizar una evaluacin diagnostica de los
aspirantes al ingreso con la finalidad de efectuar planificaciones acadmicas
institucionales que respondan a las caractersticas de los nuevos
ingresantes.
El nmero de alumnos evaluados con este test cada ao es de una gran
magnitud, (unos 200 alumnos en la instancia de ingreso adelantado; y ms
de 400 alumnos en la instancia de verano). A pesar del gran caudal de
ingresantes a nuestra institucin, esta informacin recolectada en el ingreso
tiene que estar codificada, analizada e interpretada con la mayor celeridad
posible, con el fin de que permita establecer intervenciones y acciones para
aquellos alumnos que lo necesiten o lo requieran.
Es por ello que una versin informatizada del DAT podra disminuir de modo
significativo el tiempo que transcurre entre la aplicacin y la calificacin e
interpretacin de la misma, permitiendo as, en nuestro caso particular,
responder con celeridad a las necesidades institucionales de elaborar
prontamente un perfil de las aptitudes de los ingresantes a las diferentes
carreras en cada ciclo acadmico.
Por otra parte, la creciente presencia del ordenador en la vida cotidiana ha
propiciado que el mismo comience a influir tambin en la evaluacin
psicolgica y educativa (Prez Gil, 1999; Rojas Tejada, 2001; Rivas 2005).
A pesar de los duros comienzos en los intentos por informatizar los test, los
esfuerzos realizados por una serie de investigadores hicieron que los
intentos continuaran y dieran sus frutos. As. Muiz y Hambleton (1999) ya
sealaban que el uso de la computadora en psicometra permitira la
realizacin de tems cada vez ms complejos y cercanos a la realidad
(incluso pudiendo simularla), lo que traera asociado posibles mejoras en la
validez predictiva de las pruebas, al acercarse ms el test a la realidad
criterial que con l se pretende medir. Y es por ello que poco a poco se ha
ido pudiendo sortear escollos y en la dcada de 1980 se produjo un
incremento exponencial de versiones informatizadas de test convencionales
de diversos contenidos, aplicado en contextos escolares, organizacionales y
clnicos (Olea y cols., 1998; Prez Gil, 1999). Todos estos avances han

[4]

permitido que hoy en da se estn creacin de test informatizados cada vez


ms complejos (Rojas Tejada, 2001; Rivas, 2005).
Son varios los autores que sealan que la utilidad de los test informatizados
es tal que pueden llegar a sustituir en algunos campos a los test clsicos de
lpiz y papel (Bejar, 1985; Embretson, 1985; Prieto y cols., 1993)
De hecho, son varios los autores que sealan diferentes ventajas que
acompaan a la informatizacin de los tests psicomtricos y que,
consideramos que podran acompaar tambin a la informatizacin del DAT
de realizarse.
Como ya se ha dicho, entre las ventajas presentadas por estos test
informatizados est la de hacer a la exploracin psicolgica ms rpida y
menos costosa (Harris-Bowlshey, 1983; Butcher, 1987; Olea y cols., 1998;
Visweswaran, 2000; Huff y Sirece, 2001; Schade y cols., 2005).
Tambin permite el uso de estmulos tridimensionales y formatos
interactivos (Harris-Bowlshey, 1983; Visweswaran, 2000; Huff y Sirece,
2001; Schade y cols., 2005). Todo esto hace que, como sealan Muniz y
Hambleton (1999), los test son cada vez ms complejos y cercanos a la
realidad, asegurando as la validez de los que pretende medir. Lo cual puede
hacerlas incluso ms atrayentes para el usuario, aumentando as la
motivacin del mismo a completar la prueba (Harris-Bowlsbey, 1983, en
Rivas y cols., 2005).
Tambin permiten un mayor control del proceso ya que al ser las
instrucciones y los modos de presentacin estandarizados reduce el sesgo
del evaluador, el cual, sin pretenderlo, puede influenciar en los resultados
de los sujetos (Harris-Bowlshey, 1983; Olea y cols., 1998; Schade y cols.,
1995). Tambin reduce la posibilidad de copia, al reducir la posibilidad de
que los sujetos conozcan el contenido de los tems o las respuestas
correctas (Olea y cols., 1998, Prez Gil, 1999). Por otro lado permite el
control adecuado del tiempo de presentacin de los tems, as como el
registro de los tiempos de latencia en aquellas pruebas que requieran del
registro de la velocidad de ejecucin (Prieto y cols., 1993; Olea y cols., 1998,
Prez Gil, 1999; Visweswaran, 2000; Huff y Sirece, 2001; Schade y cols.,
2005). Segn Prieto y cols. (1993), estos test informatizados admiten
adems el control de correcciones a cada respuesta, aspecto que es de gran
importancia para el desarrollo de test actitudinales a partir del enfoque del
procesamiento de la informacin.
Por ltimos, como otra de las grandes ventajas que presentan las versiones
informatizadas de los test sobre las no informatizadas es el hecho de que, al
almacenar los datos sin la etapa previa de codificacin y lectura; posibilita la
calificacin inmediata de los sujetos en diferentes variables, modelos de
puntuacin y baremos. Todo esto con una gran rapidez y precisin, ya que al
no intervenir el ser humano en la correccin de las pruebas estn menos
sujetas a errores (Prieto y cols., 1993; Olea y cols., 1998, Prez Gil, 1999;
Visweswaran, 2000; Huff y Sirece, 2001; Rivas y cols., 2005; Schade y cols.,
2005).
De conseguirse todas estas ventajas con el DAT una vez que se informatice,
lo haran de un gran atractivo, sobre todo, como en nuestro caso durante la
evaluacin en el curso de ingreso a la universidad, donde, como ya se ha
dicho, se administran pruebas a grandes grupos en un corto lapso de
tiempo.

[5]

Prez Ruiz. (1999, siguiendo a Olea y cols., 1998) seal que, como con la
informatizacin de las pruebas psicolgicas lo que se pretende es la
optimizacin de diferentes aspectos de aplicacin, correccin e
interpretacin de un test, se puede hablar de ciertos grados de
automatizacin en el proceso. As habl de tres niveles de automatizacin
de los test: a) nivel mnimo de automatizacin, donde la prestacin de los
tems se realiza en formato de papel y lpiz, las respuestas tambin estn
hechas en papel en una hoja llamada hoja electrnica y la correccin de
las respuestas es la que se realiza de manera informatizadas por medio de
la lectora electrnica; b) el segundo nivel consiste en la presentacin de los
tems en formato de papel y lpiz, mientras que tanto la respuesta como el
procesamiento de los datos se realiza en la computadora; c) el tercer nivel
y ltimo, es el
de mxima informatizacin, e incluye adems
la
presentacin de los test e instrucciones por pantalla o por otro tipo de
perifrico como altavoces, DVD, etc.
Teniendo en cuenta los orgenes de los test informatizados, Bunderson y
cols. (1989, en Schade y cols., 2005) afirman que lo que se ha dado en
llamar la primera generacin de test informatizados, correspondi e la
implementacin de test convencionales de papel y lpiz en una
computadora y la aplicacin de los mismos a travs del teclado y la
pantalla. Estos primero test informatizados pretendan solucionar problemas
relacionados con la correccin e interpretacin de las pruebas psicolgicas
convencionales existentes ya en papel y lpiz.
Sin embargo, hay que ser cuidadosos a la hora de automatizar un test de
papel y lpiz. Si bien, hay autores (Bunderson y cols., 1989, en Schade y
cols., 2005; Olea y cols., 1998 Prez Gil, 1999) que consideran que esto no
debera de cambiar en nada la esencia del test, y solo aporta ventajas; hay
otros autores que no comparten esta visin (Schade y cols., 2005), y
sealan que hay que analizar la posibilidad de que el cambio en la
modalidad puede traer cambios en los resultados obtenidos y, por lo tanto
en las baremaciones, as como tambin la validez de constructo del test
informatizado. Dentro de esta ltima lnea tenemos a Kristen y Sireci (2001,
en Schade y cols., 2005). Segn estos autores, para estimar la validez de un
test informatizado, no basta con realizar comparaciones entre la versin
informatizada y la de papel y lpiz, sino que hay que comprobar la validez
de constructo. Esto es necesario, segn dichos autores, dado que los test
informatizados presentan diferencias que se deben principalmente a este
nuevo formato (familiaridad con la tecnologa, con este formato o con el
diseo del test) que pueden poner en tela de juicio la validez de constructo
del mismo.
Teniendo en cuenta las directrices de la APA (1986), cuando se cambia algn
tipo de equipamiento estndar, as como las condiciones o los
procedimientos, respeto a los que se describen en el manual del test, debe
demostrarse que no afecta de forma apreciable a las puntuaciones del test.
Concretamente, hace referencia a que cuando se interpretan puntuaciones
de versiones informatizadas de test convencionales, debe establecerse y
documentarse la equivalencia de las puntuaciones de las versiones
informatizadas con las del test convencional. Estas directrices dadas por la
APA (1986) tambin insisten en que se deben proporcionar estudios
comparativos de las versiones convencionales e informatizadas para
establecer fiabilidad de la aplicacin informatizada.

[6]

Nuestro propio grupo de investigacin, en el ao 2007 realiz un primer


intento de informatizacin del DAT, que correspondera con los que Prez
Ruiz. (1999, siguiendo a Olea y cols., 1998) denomina segundo nivel de
informatizacin, ya que nicamente se informatiz el registro de las
respuesta y el procesamiento de los datos como puntuaciones generales. Es
decir, los reactivos se le presenta de modo manual, donde el cuadernillo de
administracin que se utiliza, donde aparecen las preguntas y los estmulos,
es el mismo que posee la versin original del test editada por Paids.
Lo nico que se informatiz fue la hoja de respuesta, que se presenta en la
pantalla, y el evaluado tiene que elegir una opcin de respuesta haciendo
clic con el ratn entre mltiples opciones que se le presentan en la pantalla.
La puntuacin del test por cada alumno la realiza el software creado,
almacenndola en una base de datos permitiendo al examinador visualizar
la informacin de diferentes maneras. 1) Las respuestas dadas por cada uno
de los alumnos en forma individual en la pantalla, en cada uno de los tems
de cada tests; el puntaje bruto asignado y el puntaje de aleatorizacin con
la indicacin de si es menor o mayor a este. 2) La presentacin de la
informacin de todas las tomas realizadas, en una planilla Excel
identificando los datos personales de cada alumno, con las puntuaciones
brutas obtenidas en cada uno de los subtest mas las dos combinaciones.
Otro avance realizado consisti en la incorporacin de los datos del baremo
intrainstitucional elaborado (Langellotti y Martos Mula, 2007), con el fin de
obtener directamente puntuaciones percentilares en el software y las
variables descriptivas cualitativas de los puntajes logrados por los alumnos.
Aunque la informatizacin del test no era completa an, como se seal
anteriormente, la APA (1986) considera que cuando se cambia algn tipo de
equipamiento estndar, se tena que realizar estudios comparativos de las
versiones convencionales e informatizadas para establecer fiabilidad de la
aplicacin informatizada.
Es por ello que se realiz un estudio en el que se compararon las
puntuaciones de dos muestras similares, pero que una de ellas (n = 128)
pasaron la prueba de modo convencional (en lpiz y papel) y otra (n = 91)
en la versin informatizada en el segundo nivel de informatizacin (Prez
Ruiz, 1999, siguiendo a Olea y cols., 1998). Los resultados demostraron que
las diferencias halladas entre la administracin tradicional y la
administracin
informatizada
no
resultaron
ser
estadsticamente
significativas por lo que la versin pudo ser validada. Solamente la pruebas
de Velocidad y Precisin en el caso general y si se consideran a las mujeres
por separado, y la prueba de Razonamiento Mecnico en el caso de los
varones presentaron diferencias. No obstante, mientras que en los dos
primero casos la ejecucin en la computadora podra estar perjudicando el
rendimiento de los alumnos; en el caso de las diferencias encontradas en los
varones parece estar beneficindolos.
Si bien las diferencias no son muy llamativas, no podemos pasarlas por alto
a la hora de seguir avanzando en nuestro estudio.
Se pens que las diferencias encontradas entre la versin manual y la
informatizada de test de velocidad y precisin podran venir determinada
por el hecho de que las instrucciones, preguntas y estmulos vinieran en
formato de lpiz y papel, mientras que la respuesta se tena que dar en la
terminal de la computadora. Bejar (1985, en Rojas Tejada, 2001), seala que
cuando se trabajaban en los primero test informatizados, que dada la poca

[7]

capacidad de las computadoras requeran de un apoyo de material en papel


para presentar los estmulos, los evaluados se quejaban de que el
procedimiento se volva engorroso por el pase de un formato a otro y, por
ello se perfeccionaron los test para convertirlos en totalmente
informatizados.
Es por ello que se pens que una solucin a estas escasas pero
significativas diferencias encontradas podra ser la creacin de una versin
completamente informatizada de la prueba. Para ello se consideraron
muchas de las recomendaciones dadas por la APA (1986, 1992), como el
hecho de que las instrucciones y estmulos se presenten en la pantalla de la
computadora, que los mismos sean legibles, que se creen instrucciones
precisas y especficas para la versin informatizada y en pantallas
separadas, que los ejemplos tambin se presente de modo informatizados,
entre otras cosas.
Es por ello que, en el ao 2009-2010, se realiz un proyecto de ctedra en
el que se propuso la informatizacin completa del test, en un nivel 3. Para
ello, se llevaron a reactivos informatizados todos y cada uno de los subtest
con los que cuenta el DAT, mediante el escaneo de los reactivos grficos, y
la presentacin en computadora de los mismos.
La realizacin de ste trabajo implic, como sealan Schade y cols. (2005)
el esfuerzo de todo un equipo interdisciplinario de ingenieros informticos,
programadores, diseadores grficos y psiclogos, trabajando en conjunto
en este proyecto. Es por ello que, para llevar a cabo este proyecto se
trabaj codo a codo con profesionales y alumnos de las carreras de
Psicologa, Ingeniera en Computacin y Comunicacin Social (Tecnicatura
en Diseo Grfico).
Este interdisciplinariedad fue gran importancia ya que el pase de las
preguntas de un formato de lpiz y papel a una versin informatizada
requiso de expertos en informtica que aseguren los tiempos de
presentacin, asegurar que las respuestas se fueran registrando en una
base de datos que permita despus la evaluacin del alumno as como. Por
otro lado se requiso tambin de expertos en psicologa, con el fin de poder
velar para que en el pase de una versin de lpiz y papel a un informatizada
los constructos que se estn midiendo se respetasen y, as, el test
informatizado siguiera midiendo lo mismo que el de lpiz y papel; la
presencia del psiclogo en este estudio fue necesaria tambin para la
realizacin de los pases del test en el modo tradicional (lpiz y papl), con el
fin de compara luego los resultados obtenidos en la versin tradicionadl (de
lpiz y papel) con los obtenidos en la versin informatizada, buscando as la
validacin de sta ltima. Por ltimo, pero no por eso de menos
importancia, se requiso tambin de expertos en Comunicacin Social,
especficamente de la rama ms vinculada al Diseo Grfico, con el fin de
crear un entorno de presentacin para las pruebas informatizadas que sea
agradable y equilibrado.
Una vez concluida la informatizacin del test, llev a cabo la validacin del
mimo. Para ello, se eligi a un grupo de 76 alumnos ingresantes a la UCSEDASS y se repartieron en dos grupos, a 35 de ellos se les administr la
prueba de modo manual; y a los 41 restantes se les administr de forma
totalmente informatizada (en su versin de reactivos escaneados). Una vez
obtenidos los datos se procedi a comparar las puntuaciones de ambos
grupos, con el fin de validar la versin informatizada. Los resultados
revelaron que no haba diferencias en los resultados obtenidos en cada una

[8]

de las formas en ninguno de los subtest del test o de los ndices obtenidos al
combinar los mismos; a excepcin del subtest de Lenguaje, donde se
observ que si haba una diferencia significativa entre las versin
informatizada y la manual, siendo mejores las puntuaciones obtenidas en la
versin informatizada. Un anlisis ms detallado de este ltimo resultado
revel que estas diferencias en el subtest de Lenguaje, se observaban solo
en las mujeres, ya que eran ellas las que obtenan mejor puntuacin en la
versin informatizada que en la manual; mientras que en el caso de los
varones no se observaron diferencias.
Todo esto nos llev, como grupo de investigacin a plantearnos la
posibilidad de crear una nueva versin informatizada del DAT, en la que
estos problemas fueran analizados y resueltos y que, por otra parte, fuera
ms llamativa y motivadora para los usuarios.
Con esta nueva versin informatizada, adems de las ventajas ya sealadas
sobre la rapidez y precisin en la aplicacin y anlisis de los datos, se
consiga una versin ms motivadora. Nos permitir el uso de estmulos
tridimensionales y formatos interactivos, propuestos por varios autores
(Harris-Bowlshey, 1983; Visweswaran, 2000; Huff y Sirece, 2001; Schade y
cols., 2005). Todo esto har que, como sealan Muniz y Hambleton (1999),
el test sea cada vez ms complejo y cercano a la realidad, asegurando as la
validez de los que pretende medir. Esto puede hacer a la prueba incluso
ms atrayente para el usuario, aumentando as la motivacin del mismo a
completar la misma (Harris-Bowlsbey, 1983, en Rivas y cols., 2005). Es por
ello que, adems de mejorar el proceso de procesamiento de los datos en la
versin que ya se est informatizando del DAT, en la que los grficos de los
reactivos slo se estn escaneando, en esta propuesta que hoy se presenta
se pretender mejorar esas presentaciones grficas, hacindolas ms
cercanas a la realidad, y ms atrayentes para los alumnos, lo cual
consideramos que podra mejorar el procesamiento de informacin por
parte de los alumnos. Esta nueva versin ms atrayente tambin tendra
que ser validad y comparar los resultados que se obtengan con ella con los
obtenidos en la prueba de lpiz y papel y en la otra versin ya informatizada
(la de las grficas de los reactivos escaneadas).
De conseguirse todas estas ventajas con el DAT una vez que se informatice,
lo hara de un gran atractivo, sobre todo, como en nuestro caso durante la
evaluacin en el curso de ingreso a la universidad, donde se administran
pruebas a grandes grupos en un corto lapso de tiempo.
No obstante, hay que tener en cuanta que segn las directrices de la APA
(1986), cuando se cambia algn tipo de equipamiento estndar, as como
las condiciones o los procedimientos, respeto a los que se describen en el
manual del test, debe demostrarse que no afecta de forma apreciable a las
puntuaciones del test. Concretamente, hace referencia a que cuando se
interpretan
puntuaciones
de
versiones
informatizadas
de
test
convencionales, debe establecerse y documentarse la equivalencia de las
puntuaciones de las versiones informatizadas con las del test convencional.
Estas directrices dadas por la APA (1986) tambin insisten en que se deben
proporcionar estudios comparativos de las versiones convencionales e
informatizadas para establecer fiabilidad de la aplicacin informatizada.
Es por todo ello que la propuesta que presentamos en este momento
tendra dos grandes momentos:

[9]

1) En un primer momento se pretende trabajar con la versin informatizada


que ya existe en la que se haba conseguido informatizar todos y cada uno
de los subtest con los que cuenta el DAT, utilizando el escano de los
grficos incluidos en los reactivos. Se ajustarn todos aquellos aspectos
que pudieran estar comprometiendo la validez del test, si se encontrasen y,
una vez ajustado este proceso, se proceder a la informatizacin del
procesamiento de la informacin obtenida en cada uno de los subtest, as
como de las combinaciones de subtest que nos permitan obtener el ndice
de Educabilidad de los individuos (conjuncin de la puntuacin en los
subtest de Razonamiento Verbal y Clculo) y el ndice General de
Inteligencia (conjuncin de la puntuacin en los subtest de Razonamiento
Verbal y Razonamiento Abstracto). Dicha informatizacin del procesamiento
de la Informacin implicara, entre otros aspectos, los siguientes pasos:
conversin de la puntuacin bruta en puntuacin percentil dentro del grupo
de referencia; representacin grfica de dicho perfil, resaltando
potencialidades o deficiencias detectadas, elaboracin de informe
cualitativo/orientativos que sirva de partida para la elaboracin del informe
final del profesional. Todo estos, se considera oportuno conseguirlo tanto de
modo aislado, por individuo, con el fin de conseguir informes particulares;
como as tambin para cada grupo de carrera, de tal manera que nos
permita realizar tambin un perfil ptimo para cada orientacin.
2) En paralelo se ir procediendo a la elaboracin de una versin
informatizada del DAT, que adems de ser ms esttica, consiga ser ms
atrayente al individuo al que se la administra. Esto se considera que se
podr conseguir mejorando la presentacin de las grficas que aparecen en
algunos reactivos de los subtest. Si mejoramos esas grficas, acercndolas
ms a la realidad aseguraramos tambin, segn Muiz y Hambleton (1999),
la validez de lo que se pretende medir; as como tambin conseguiramos
hacerlas ms atrayentes para los usuarios, tal cual resalta Harris-Bowlsbey
(1983, en Rivas y cols., 2005), aumentando tambin la motivacin de los
mismos a completar la prueba. En esta nueva versin, y siguiendo el
ejemplo de otros estudios donde se informatizaron test (Adaez y cols.) se
proceder a la presentacin de las instrucciones, no solo de modo visual,
sino tambin sonoro. Segn prieto Adez y cols. (2000) esto permitir la
focalizacin de la atencin y una mayor compresin de la tarea. No
obstante, esta nueva versin, al incluir cambios con la versin informatizada
ya existente, implicara tener que volver a validar este nuevo formato, tal
cual seala la APA (1986). Para llevar a cabo este proceso, se tendra que
comparar los resultados obtenidos en lpiz y papel y los resultados
obtenidos en la versin informatizada anterior (la de los reactivos
escaneados), con los resultados en esta nueva versin informatizada. De
encontrase diferencias, habra que asegurarse que el nuevo test sigue
midiendo las misma aptitudes del test original, es decir, corroborar la
validez de constructo y, una vez corroborada esta, crear los nuevos varemos
que se ajusten a esta nueva versin del test. En caso de no encontrar
diferencias en los resultados entre las tres versiones, se tendra que realizar
un proceso de anlisis segn el cual los individuos que pasan por el test
determinen cul de las dos versiones informatizadas es la ms agradable,
cmoda y motivadora para los usuarios.
Con todo esto, esperamos llegar a la obtencin de una versin del DAT que
podra traer una gran cantidad de beneficios en su uso debido,
principalmente, a la practicidad de la misma.

[10]

Para todo lo dicho con anterioridad es imprescindible el trabajo conjunto de


diferentes
profesionales:
Psiclogos,
Ingenieros
en
Computacin,
Diseadores Grficos, entre otros. Este aspecto es considerado como otro
gran aporte que se conseguir desde el plano acadmico. Decimos esto ya
que tradicionalmente se ha tendido a investigar de modo aislado, cada
disciplina por su parte, e incluso dentro de reas especficas dentro de cada
disciplina; aspecto este que impeda el intercambio de conocimientos y el
anlisis multidisciplinario de un mismo objeto de estudio. En nuestra
propuesta, es imprescindible romper con esa separacin ya que es
necesario que Diseadores, Ingenieros en Informtica y Psiclogos, incluso
se requerir de conocimientos procedente de diferentes reas dentro de
cada una de stas disciplinas (por ejemplo desde la psicologa ser requiere
de conocimientos procedentes de Psicometra, Psicoestadsticas y Mtodos y
Tcnicas de Exploracin Psicolgica).
Otra de las ventajas acadmicas que este equipo de investigacin
interdisciplinario podra aportar a nuestra Universidad es la de servir a la
formacin de recursos humanos en la investigacin. Nuestra Universidad ha
apostado fuertemente a uno de los grandes pilares de las grandes casas de
conocimiento, la investigacin. Conseguir recursos humanos interesados en
este mbito asegura tambin el fortalecimiento de los otros dos grandes
pilares en los que se asienta toda Universidad, la docencia y la extensin. La
investigacin colabora con la docencia porque permite nuevos insumos y
nuevos aportes que poder brindar al aprendizaje de los alumnos; mientras
que la investigacin tambin aporta a la extensin ya que con ella, como es
en nuestro caso, se pueden adquirir insumos que sean beneficiosos para la
comunidad integra, pudiendo hacer uso de ellos en otros mbitos del
contexto.
Es por ello que la Universidad tiene que fomentar tambin la realizacin de
investigacin entre sus integrantes. En este sentido, nuestro grupo de
investigacin, plantea desde un primer momento la necesidad de incluir
alumnos becarios entre sus componentes, no solo para colaborar a la
formacin de los mismos y fomentar entre ellos el ansia de investigar, sino
tambin reconocindolos como fuente de invaluables aportes con los que
toda investigacin debe contar.
Adems, sera de gran inters y una fuente de gran orgullo, si algunos de
nuestros alumnos, de cualquier de las ramas del saber incluidas en este
estudio, se interesara en el mismo como posible base para su Trabajo Final
de Grado, ofrecindonos como posibles orientadores del mismo y
comprometindonos a fomentar esta inquietud entre los alumnos de los
ltimos aos de las carreras de Ingeniera en Computacin, Comunicacin
Social y Psicologa, de cada una de las Sedes de la UCSE.
Por ltimo, ya desde el plano de la extensin de los resultados, como hemos
dicho antes los resultados obtenidos con nuestro estudio podra beneficiar,
no solo a nuestra Sede, sino que, podran ser de utilidad para otras
instituciones de educacin terciaria del medio y, haciendo algunos ajustes,
incluso podra convertirse en un insumo informtico que podra ser aplicado
en otras partes del pas o del exterior. Es por ello que nuestro objetivo
ltimo es conseguir una versin adecuada del DAT que pueda ser ofrecida a
Paidos, referente en lo que se refiere a la comercializacin de Test en
nuestro pas, para su eventual comercializacin.

[11]

Estos son los aportes que, desde lo ms personal y acadmico, hasta lo ms


general, pensamos se podran realizar con los avances que consigamos
realizar con el presente proyecto.
Concretamente, y resumiendo lo antes dicho, las hiptesis que subyecen a
nuestro trabajo son:
1. La realizacin de una informatizacin completa del DAT permitir la
obtencin de las evaluaciones cognitivas de los alumnos en una
menor cantidad de tiempo, as como con una menor probabilidad de
errores, sin que ello implique cambios significativos con respecto a los
resultados que se habran obtenido de aplicar la prueba de modo
manual.
2. La creacin de una versin completamente informatizada (nivel 3) del
Test de Aptitudes Diferenciales en la que los reactivos grficos de los
subtest sean ms cercanos a la realidad no pondr en peligro la
validez de constructo del test, sino que ms bien la aumentar.
Adems, esta versin ms realista ser ms atrayente a los usuarios,
aumentando la motivacin de los mismos hacia la prueba; por lo que
se espera que sea la ptima para su aplicacin y comercializacin.
Todo esto espera conseguirse desde un Paradigma Positivista, usando una
metodologa cuantitativa. Se tratar de una investigacin aplicada, ya que
su fin ltimo es la aplicacin de los conocimientos para la produccin
tecnolgica.
En un primer momento, y partiendo de los resultados obtenidos en estudios
precedente con la versin informatizada del test ya existente, en la que las
grficas de los reactivos estn escaneadas de la versin de lpiz y papel, se
proceder a la mejora de aquellos aspectos que se vieron podran estar
comprometiendo la validez del test, en caso de encontrase (subtest en los
que se encontraron diferencias entre la versin manual y la informatizada
escaneada).
Una vez ajustada la primera versin informatizada del DAT (con reactivos
escaneados), dicha versin se aplicar a la mitad de aspirantes al ingreso
anticipado al DASS 2011 (noviembre 2010) de cada una de las carreras que
se imparten en esta Sede; mientras que a la otra mitad de ingresantes a
cada una de las carreras se le administrara el DAT en su versin de lpiz y
papel. El reparto de alumnos a cada una de las condiciones se realizar
mediante un muestreo probabilstico por estratos. Una vez obtenidas las
puntuaciones de los alumnos en cada uno de los formatos del DAT (lpiz y
papel e informatizado primera versin), se compararn las puntuaciones de
cada uno de los subtest en cada una de las versiones, usando para ello
pruebas t de Student para muestras independientes, con el fin de comparar
si hay o no diferencias estadsticamente significativas entre las
puntuaciones de los subtest y sus combinatorias obtenidas con el modo
convencional, y las obtenidas con el modo informatizado; y con ello
corroborar o no la validez de la primera versin informatizada.
Una vez asegurada la validez de cada uno de los subtest en la primera
versin informatizada, se proceder a incluir en esta versin un sistema
informtico que permita la informatizacin del procesamiento de la
informacin recolectada durante el pase del test. Para ello los psiclogos

[12]

tendrn que trabajar en conjuncin con los ingenieros y diseadores


grficos con el fin de asociar las respuestas con las puntuaciones
percentilares de los baremos obtenidos para la UCSE-DASS, obteniendo as
las puntuaciones brutas de cada una de las pruebas, as como sus
puntuaciones percentilares. Tambin se trabajar obteniendo la puntuacin
bruta y su traduccin a percentiles en el caso de las combinaciones entre
varios subtest, concretamente los de Razonamiento Abstracto y
Razonamiento Verbal, y la de Razonamiento Verbal y Clculo, ya que dichas
combinaciones nos proporcionan informacin de gran vala para un anlisis
acadmico, como ser el ndice General de Inteligencia en el primer caso y el
ndice de Educabilidad en el segundo. Adems, se pretende que una ves
obtenido estas puntuaciones percentilares se presente tambin la
representacin grfica de las mismas, que permita visualizar rpidamente
las potencialidades y falencias que presentan, ya sean los individuos en
particular o un grupo de individuos agrupados en funcin de la carrera u
orientacin elegida. Tambin se pretende que el programa sea capaz de
asociar esas puntuaciones percentilares con un baremo cualitativo (creado
por nuestro propio grupo de investigacin) que sealar si el individuo, o
grupo, se encuentra dentro de los esperado para su grupo de referencia, o
bien si se encuentra por encima o por debajo de los esperado para cada una
de las aptitudes e ndices analizados. Con todo esto se pretende conseguir
un breve informa que permita al profesional realizar de modo rpido una
lectura de la situacin del individuo o grupo y basarse en l para la
realizacin del informe.
Para asegurar que el procesamiento de la informacin e informe de la
misma que lleva a cabo el programa es acorde con el que llevara a cabo un
profesional de hacerlo manualmente, se proceder a comparar los
resultados arrojados por la computadora, con el realizado por personal
especializado. Para ello se seleccionar mediante muestreo intencional a
todos aquellos alumnos ingresantes que en los aos 2010 y 2011 pasaron la
prueba de modo manual. Un grupo de investigadores realizarn el anlisis
de la informacin de dichos alumnos de modo manual; mientras que otro
grupo diferente de investigadores, y que no conoce los resultados de los
alumnos a los que se est analizando, se encargar de introducir las
respuestas que estos mismos alumnos dieron en la versin manual en la
computadora, simulando as un pase informatizado, con el fin de que el
programa pueda acceder a la informacin para procesarla y emitir el
informe. Luego se proceder a la comparacin de la informacin obtenida en
la versin manual y en la informatizada, asegurndose de que los
percentiles reflejados en cada subtest e ndice, as como la calificacin
cualitativa obtenida en cada uno de ellos.
En paralelo a este proceso se ir diseando una nueva versin
informatizada del DAT, que adems de ser ms esttica, consiga ser ms
atrayente al individuo al que se la administra. Para ello, los investigadores
vinculados al Diseo Grfico y a la Informtica, mejorarn la presentacin
de las grficas que aparecen en algunos reactivos de los subtest,
hacindolas ms realistas y motivadoras para los usuarios. Tambin se
considerar una versin no solo visual, sino tambin donde la informacin
aparezca de modo auditivo, que permita la focalizacin de la atencin y una
mayor compresin de la tarea. Esta nueva versin ya incluir el
procesamiento automtica de la informacin obtenida en el test.
Al incluir nuevos cambios en la versin pre-existente del DAT, ser necesario
volver a validar este nuevo formato. Para ello se deber comparar la

[13]

ejecucin en este formato con la ejecucin en otros formatos del DAT ya


validados.
Para ello se requerir de otro universo de ingresantes al DASS para poder
validarla. En este caso se trabajar con los ingresantes al DASS en el ao
2012. En esta ocasin, a un tercio de los nuevos ingresantes de cada carrera
se les administrar la versin de lpiz y papel, a otro tercio la primera
versin informatizada del DAT (reactivos escaneados), y al tercio restante la
versin informatizada mejorada del DAT (reactivos no escaneados). El
reparto de alumnos a cada una de las condiciones se realizar mediante un
muestreo probabilstico por estratos. Una vez obtenidas las puntuaciones de
los alumnos en cada uno de los formatos del DAT (lpiz y papel, primera
versin informatizada, y versin informatizada mejorada), se compararn
las puntuaciones de cada uno de los subtest e ndices en cada una de las
versiones, usando para ello Anlisis de Varianza (ANOVA), con el fin de
comparar si hay o no diferencias estadsticamente significativas entre las
puntuaciones de los subtest y sus combinatorias obtenidas con el modo
convencional, y las obtenidas con los modelos informatizados.
En caso de encontrar diferencias entre los test ya validados y la nueva
versin mejorada habra que asegurarse que nuevo test sigue midiendo las
mismas aptitudes que el test original. Es decir, se tendr que corroborar la
validez de constructo, por lo que todos aquellos alumnos ingresantes al
2012 a los que se les haya administrado la versin informatizada del test,
pasarn por una versin no informatizada del mismo, o por el pase de otros
test que midan el mismo constructo, con el fin de asegurar que la
puntuacin obtenida en la versin informatizada mejorada del DAT refleje
realmente las aptitudes que tienen los individuos, mediante correlaciones
entre ambos resultados. Y una vez corroborada dicha validez, quedara
indagar mediante un cuestionario elaborado expresamente para la situacin
el grado de satisfaccin que se alcanza con cada una de las versiones. Para
ello, se solicitar a un grupo de alumnos de aos superiores de la carrera de
psicologa, que en su ingreso haya pasado la prueba del DAT de modo
manual, se sometan al pase del mismo test en sus dos versiones
informatizadas y validadas, para sealar las ventajas y desventajas de cada
una de ellas. Esto permitir detectar la versin informatizada del test ms
motivadora y estticamente agradable, con el fin de que sea esta la que se
aplique y se proponga para una eventual comercializacin a Paidos.
En caso de no encontrar diferencias entre los test ya validados y la nueva
versin mejorada, quedara asegurada la validez de ste ltima. Solamente
quedara entonces analizar cul de las versiones informatizadas es la que
tiene ms aceptacin entre los usuarios, siendo el proceso similar al que se
ha sealado con anterioridad.
3.- CRONOGRAMA DE ACTIVIDADES

3.1. CRONOGRAMA INICIAL, ACTIVIDADES REALIZADAS


HASTA LA FECHA Y ACTIVIDADES POR REALIZAR
INDICANDO EL TIEMPO.
Entre las actividades que estaban previstas hasta la fecha y que se han
realizado hasta el momento se encuentran:

[14]

(1) Revisin bibliogrfica y puesta en contacto con otras instituciones


que se encuentren realizando estudios en el mismo campo (junio de
2010 a marzo de 2012)

(2) Posible ajuste para la validacin de la primera


informatizada del DAT (junio de 2010 a febrero de 2011).

versin

Otro de los objetivos que se tena previsto estar ya en marcha en estas


fechas era:
-

(4) Creacin de una versin informatizada mejorada del DAT, en la


que se incluye tambin el sistema de procesamiento automtico de la
informacin (junio de 2010 a junio de 2011)

No obstante este objetivo, an no se ha comenzado por los motivos que se


expresarn ms adelante en el apartado 4.2 donde se har referencia a los
principales problemas encontrados.
No obstantes, se considera que este objetivo ya se podr iniciar a finales del
mes de marzo.
Otro objetivo planteado que, segn el cronograma tendra que haber
comenzado ya pero se va con demora con respecto a lo previsto es:
-

(3) Creacin, puesta a prueba y comprobacin del sistema informtico


para el procesamiento informatizado de la primera versin
informatizada del DAT.

Este objetivo se esperaba haber comenzado en febrero del 2011 siendo su


conclusin en junio de este mismo ao, pero por cuestiones observadas en
la primera versin informatizada que requieren de un mayor estudio (ver
punto 3.2, 4.1 y 4.2), con el fin de determinar si la existente ser la versin
definitiva del test, o bien ser necesario realizar algunas modificaciones que
puedan influir en este procesamiento de la informacin, an no se ha
iniciado. Se estima que a mediados del mes de abril se pueda iniciar dicho
proceso.
Estos dos ltimos objetivos, junto con los previstos para el segundo ao de
trabajo (junio de 2011 a mayo de 2012), se esperan realizarlos a lo largo del
segundo ao de trabajo. Los objetivos planteados para ese segundo ao de
trabajo son los siguientes:
-

(5) Posible ajuste para la presentacin y procesamiento de la versin


informatizada mejorada del DAT (julio de 2011 a noviembre de 2011).

(6) Puesta a prueba para la validacin de esta versin informatizada


mejorada del DAT (noviembre de 2011 a marzo de 2012)

(7) Posible anlisis de la validez de constructo de la nueva versin


informatizada mejorada del DAT (marzo de 2012 a abril de 2012)

(8) Seleccin de la versin informatizada ms aceptadas por los


usuarios y contactos para su comercializacin (abril de 2012 a mayo
de 2012)

(9) Realizacin de informe final.

3.2. CAMBIOS Y JUSTIFICACIN DE LOS MISMOS.


Adems de los objetivos planteados en la propuesta inicial y que sieguen en
pie sin ninguna modificacin se ha hecho necesario incluir una serie de
actividades, que no estaban previstas en un principio, para terminar de

[15]

ajustar la primera versin informatizada del DAT, sobre la que se asentar la


segunda mejorada.
Como se podr comprobar en el apartado 4.1, cuando se hable de los
resultados obtenidos hasta el momento, en el anlisis de la administracin y
de los resultados obtenidos en la primera versin informatizada del DAT se
encontraron algunos aspectos que llamaron la atencin a los investigadores
y que, con el fin de poder validar esta primer versin y asegurarnos que
mide los mismos resultados que la versin manual, habr que comprobar si
fueron simples impresiones de los administradores y efectos aleatorios; o si
por el contrario estos efectos son propios de esta administracin
informatizada y, si lo son, si eso podra en tela de juicio su validez a la hora
de evaluar las aptitudes de los ingresantes.
Todo esto es de fundamental importancia antes de proceder a la creacin de
una versin informatizada mejorada ya que la misma, as como el
procesamiento informatizado de los datos, se asentarn sobre el software
de esta primera versin informatizada; por lo cual tiene que estar
completamente validado para poder seguir el resto de los pasos.
Para poder dar respuesta a algunas dudas e interrogantes surgidos (ver
apartado 4.1) se requerir de dos procesos que no estaban originalmente
incluidos en la propuesta:

a) Realizacin de una encuesta sobre aspectos vinculados con la


comprensin de esta primera versin informatizada (sobre la forma
en la que se solicita el ingreso de los datos, sobre el procedimiento a
seguir en el momento de entrar en la sesin o en un subtest
especfico de la misma, sobre la comprensin de las instrucciones
dadas al comienzo de las pruebas, la opinin sobre el tiempo que se
deja para la lectura de las instrucciones, sobre la posibilidad de
comprensin o no de los ejemplos y sobre la manera de volver atrs
para responder preguntas que se haban dejado sin responder, entre
otras cosas); as como otra encuesta relacionada con aspectos
estticos de esta versin informatizada del DAT (colores empleados,
tamaos de las letras, formato de iconos, el modo con el que se tiene
que responder a las preguntas, distribucin de los estmulos en la
pantalla, calidad de los estmulos). Esta encuesta ser administrada a
los individuos que realicen el test en su versin informatizada, con el
fin de obtener informacin relevante para mejorar la presentacin del
test. Tambin se realizar una encuesta muy similar, pero ajustada a
las caractersticas del pase del test en forma manual, que ser
administrada a los alumnos que pasen por esta modalidad de
aplicacin. El objetivos ser que, con la informacin recolectada en
ambas encuestas, poder obtener tambin una comparacin sobre la
preferencia entre el test informatizado y el manual.

b) Se realizar una encuesta muy similar a las sealada en el caso


anterior, pero en esta ocasin para cada subtest en concreto en su
versin informatizada, ya que otra parte del proceso de validacin
consistir en: seleccionar alumnos de psicologa de aos anteriores,
as como colegas psiclogos y administrarle dos o tres subtest tanto
en la versin manual como en la informatizada, y mediante la
encuesta recabar informacin sobre lo que le parece la versin
informatizada en comparacin con la manual.

[16]

Con todo esto se pretende recolectar informacin que nos permita asegurar
que la versin informatizada del DAT a la que lleguemos y que, como se ha
dicho, ser la base para la versin mejorada, sea vlida y mida lo que
pretende medir.
4.- RESULTADOS OBTENIDOS

4.1.

RESULTADOS ALCANZADOS, EXPLICANDO LAS


RAZONES POR LAS CUALES LOS RESULTADOS SON O
NO SATISFACTORIOS, DE ACUERDO CON SUS
OBJETIVOS PLANTEADOS.

A continuacin se proceder a explicitar los avances realizados en las


actividades realizadas hasta el momento.
-

(1) Revisin bibliogrfica y puesta en contacto con otras instituciones


que se encuentren realizando estudios en el mismo campo (junio de
2010 a marzo de 2012)

En lo referente a esta actividad, se ha de sealar que se ha realizado una


profunda bsqueda de informacin en revistas especializadas y libreras.
Se han procedido a la adquisicin del libro:
Olea, J.; Ponsada, V. y Prieto, G. (1998): Test informatizados. Fundamentos y
aplicaciones. Madrid. Editorial Pirmide. (adquirido con otras fuente de
financiamiento).
Entre los artculos conseguidos podemos distinguir entre:

Aquellos vinculados con la aplicacin del DAT propiamente dicho:


Prez, E.; Cupani, M.; Aylln, S. (2005): Predictores de rendimiento
acadmico en la escuela media: habilidades, autoeficacia y rasgos de
personalidad.
Redelico, F.; Pita. M.; Corengia, A. Validacin del resultado del Test de
Aptitudes Diferenciales como predictor de la Desercin Acadmica.
Universidad Austral, Facultad de Ingeniera. Buenos Aires Argentina.
Tesouro, M. (1995): Mejora de los aprendizajes de estudiantes de 13-14 aos
mediante el uso de nuevas tecnologas. Departamento de Pedagoga.
Universitat de Girona.
Aquellos vinculados con la informatizacin de test psicomtricos:
Cabrera, E.; Gonzlez, J.; Montenegro, E.; Nettle, A.; Guevara, M. (2010): Test
informatizados y el registro del tiempo de respuesta, una va para la
precisin en la determinacin del nivel de logro de un saber matemtico.
Estudios Pedaggicos. XXXVI, N1: 69-84.
Clares Lpez, J. (2008): Propuesta de desarrollo de test informatizado
adaptndolo a la respuesta del usuario. Pixel-Bit. Revista de Medios y
Educacin. 31: 19-30.
Menndez L.; Hierro, P.; Muiz, J. (2008): Actitudes hacia los test
informatizados aplicados por internet con formato responder hasta
acertar. Accin Psicolgica, 5(2): 25-36.

[17]

Moreno Angel, L.; Hernndez, J.M.; Garca Leal, O.; Santacreu, J. (2000): Un
test informatizado para la evaluacin de la tolerancia a la frustracin.
Anales de Psicologa, 16 (2): 143-155.
Olea, J. Abad, F.J. y Barrada, J.R. (2010): Test informatizados y otros nuevos
tipos de test. Papeles del Psiclogo, 31(1): 94-107.
Olea, J. y Ponsoda, V. (1998). Tests informatizados y adaptativos
informatizados: investigacin en Espaa.. RELIEVE, vol. 4, n. 2.
Consultado en http://www.uv.es/RELIEVE/v4n2/RELIEVEv4n2_0.htm en
febrero de 2011.
Prieto, G.; Carro, J.; Orgaz, B.; Pulido, R.F. (1993): Anlisis Cognitivo de un
Test Informatizado de Visualizacin Espacial. Psicothema, 5(2): 293-301.
Romero, C; Ventura, S.; Hervs, C.; Rider, I, Martn-Palomo, S. (2006):
Herramienta Autor para la gestin de Test Informatizados dentro del
sistema AHA!. Revista Iberoamericana de Informtica Educativa. N 3: 4354.
Tambin se ha establecido conexin con los siguientes investigadores y
grupos de trabajo, todos ellos realizando investigaciones relacionadas a la
informatizacin de test y validacin de test informatizados:
Nombre del
Investigador
Principal

Correo electrnico

Universidad de
Procedencia

Laura Moreno Angel

laura.moreno@uam.es

Universidad Autnoma de
Madrid. Espaa

Cristobal Moreno

cromero@uco.es

Julio Olea

julio.olea@uam.es

Universidad de Crdoba.
Espaa
Departamento de Informtica
y Anlisis Numrico
Universidad Autnoma de
Madrid. Espaa
Universidad de Salamanca.
Espaa

Gerardo Prieto

gprieto@usal.es

Facultad de Psicologa
Departamento de Psicologa
Bsica, Psicobiologa y
Metodologa

Victor Rubio

victor.rubio@uam.es

Universidad Autnoma de
Madrid. Espaa

Jos Clares Lpez

jclares@us.es

Universidad de Sevilla

Investigador
Principal

Correo electrnico

Universidad de
Procedencia

Jos Antonio Prez Gil

perezgil@us.es

Universidad de Sevilla

Nombre del

[18]

Nieves Schade

nschade@udec.cl

Eduardo Cabrera

labesam.uple@gmail.com

Universidad de Concepcin
Chile
Universidad de Valparaiso.
Chile

En algunos de estos casos, los investigadores han contestado a nuestros


mail, en muchos casos interesndose en los progresos de nuestro trabajo,
en otros muchos casos ofrecindose para cualquier necesidad que
pudiramos tener en nuestra investigacin y, casi en la mayora de los
casos, enviando bibliografa digitalizada que les fue de utilidad en sus
investigaciones o que fue el resultados de su investigacin.
Tambin nos intentamos contactar con L. Menndez, de la Universidad de
Oviedo, quien es una de los referentes en Psicometra en Espaa; pero hasta
el momento no hemos tenido suerte al intentar encontrar un mail de
contacto.
Tambin se est intentando establecer contactos (o ya se han establecido)
con investigadores o grupos de investigacin que trabajan con el DAT, o con
subtest relacionados vinculndolos a la informatizacin del mismo.

Nombre del
Investigador
Principal

Correo electrnico

Universidad de
Procedencia
Universidad de Sevilla

Crispin Calvo Prez

Facultad de Cs. de la
Educacin
carlos6262@us.es

Departamento de Mtodos de
Investigacin y Diagnostico
en Orientacin
Universitat de Girona
Facultad de Pedagoga

Montserrat Tesouro

montse.tesouro@udg.edu

Sergio Domnguez
Lara

sdominguezlara@gmail.co
m

Departament de Mtodes
d'investigaci i diagnstic en
educaci

Lima. Per

Este ltimo cobra especial importancia en nuestro trabajo, ya que presenta


una versin informatizada de la planilla de correccin del DAT, con la
presentacin del perfil del alumno que podra estar ntimamente ligada al
objetivo (3) de nuestra propuesta que se plante llevar a cabo desde el mes
en curso a junio del presente ao.
-

(2) Posible ajuste para la validacin de la primera


informatizada del DAT (junio de 2010 a febrero de 2011).

[19]

versin

En lo referente al objetivo (2), se han realizado algunas observaciones al


respecto que merecieron la discusin del grupo y la toma de
determinaciones sobre qu hacer al respecto.
As, se analiz el motivo por el cual el puntaje que presentaban las mujeres
en el subtest de lenguaje en la versin informatizada era mayor que el
puntaje obtenido por las mujeres en este mismo subtest en la versin de
lpiz y papel (Datos obtenidos en otro estudio de Ctedra). Se pens en la
posibilidad de que alguna de las versiones (la manual o la informatizada), o
ambas, difiriera significativamente de lo esperado para los alumnos de la
UCSE-DASS. Para analizar esta posibilidad, considerando que se cuentan con
unos baremos propios para nuestra institucin realizados por miembros de
este mismo grupo de investigacin, se decidi comprobar si la puntuacin
obtenida en este subtest difera de lo esperado para los ingresantes a la
UCSE-DASS segn se obtuvo en esos baremos. Como a la hora de realizar
dichos baremos se encontraban diferencias significativas entre lo esperado
para los varones y para las mujeres, se decidi comparar la ejecucin de las
mujeres que pasaron por el test de lenguaje en su versin informatizada con
los promedios esperados para las mujeres ingresantes al DASS en este
subtest; as como tambin la ejecucin presentada por las mujeres que
pasaron por el subtest de lenguaje en su versin manual con los promedios
esperados para las mujeres ingresantes al DASS en este subtest.
Como se muestra en la Tabla 1, no se observaron diferencias significativas
en las comparaciones realizadas. Es decir, que tanto las mujeres que
pasaron el subtest de lenguaje en su versin informatizada, como aquellas
que lo pasaron en su versin no informatizada, presentaron el mismo
rendimiento; por lo que se lleg a la conclusin que las diferencias
encontradas entre los resultados en el test de lenguaje entre las dos
versiones (informatizada y no informatizada) no eran tan grandes y podra
haber sido ms un falso positivo. Por lo que se decidi no modificar nada del
test en su versin informatizada, aunque se seguir al tanto de este hecho
en los pases que se han de realizar en el presente ao, con el fin de ver si el
fenmeno se repite o no.
Dado que la realizacin de dicha comparacin nos result interesante, con el
fin de analizar si los resultados obtenidos diferan o no de lo esperado en su
grupo de referencia (los baremos obtenidos para la UCSE-DASS), se
realizaron las comparaciones de las puntuaciones obtenidos en cada uno de
los subtest, tanto en su versin informatizada como no informatizada, con
los baremos esperados, diferenciando entre varones y mujeres; todo ello
independientemente de que hubiera o no hubiera diferencia entre la versin
informatizada y la manual. Como se puede observar en la Tabla 1, no se
encontraron diferencias significativas entre los rendimientos observados en
nuestros grupos con los esperados para los ingresantes de la UCSE-DASS,
tanto en hombres como en mujeres, y tanto en la versin manual como en
la informatizada.

TABLA 1. Comparacin de los resultados obtenidos con los


ingresantes a la UCSE-DASS en el ao 2011 con los baremos
obtenidos para esta Sede.
Subtest

Informatizada
Mujere

[20]

Varones

Manual
Mujeres

Varones

s
Razonamiento Verbal (RV)

z = 0.75
p > 0.05

z = 0.44
p > 0.05

z = 0.48
p > 0.05

Clculo (C)

z = 0.88
p > 0.05

z = 0.18
p > 0.05

z = 0.78
p > 0.05

z=
1.004
p > 0.05
z = 0.90
p > 0.05

Razonamiento Abstracto
(RA)

z = 0.64
p > 0.05

z = -0.09
p > 0.05

z = 0.27
p > 0.05

z = 0.61
p > 0.05

Velocidad y Precisin (VP)

z = 1.44
p > 0.05

Razonamiento Mecnico
(RM)

z = 0.47
p > 0.05

z = 1.26
p > 0.05
z=
-0.022
p > 0.05

z = 0.62
p > 0.05
z=
0.044
p > 0.05

Relaciones Espaciales (RE)

z = 0.11
p > 0.05

z = 0.19
p > 0.05

z = 0.57
p > 0.05
z = 0.28
p > 0.05

z = 0.27
p > 0.05
z = 0.48
p > 0.05

z = 1.56
p > 0.05
z=
-0.014
p > 0.05
z=
-0.095
p > 0.05
z = 0.28
p > 0.05
z = -0.37
p > 0.05

z = 0.95
p > 0.05

z = 0.42
p > 0.05

z = 0.70
p > 0.05

z = 1.18
p > 0.05

z = 0.84
p > 0.05

z = 0.17
p > 0.05

z = 0.44
p > 0.05

z = 0.93
p > 0.05

Ortografa (O)
Lenguaje (L)
ndice de Educabilidad
(RV+C)
ndice General de
Inteligencia
(RV+RA)

z = 0.53
p > 0.05
z = 0.67
p > 0.05
z = 0.27
p > 0.05

Por otro lado, considerando que en el baremo realizado para la UCSE-DASS


en aos anteriores se realiz un baremos diferentes para varones y para
mujeres, ya que las diferencias entre ambos gnero en la mayora de los
subtest ameritaba dicha distincin; se consider entonces oportuno analizar
si esta nueva versin informatizada tambin era sensible a captar estas
diferencias, por lo que se realizaron pruebas t de Student para muestras
independientes con el fin de comparar la ejecucin de cada uno de los
gneros en cada uno de los subtest administrados de modo informatizado.
Los resultados se pueden ver en la Tabla 2.
Se puede apreciar, en este caso, que no existen diferencias entre las
puntuaciones entre varones y mujeres en ninguno de los subtest analizados.
Esto llama la atencin, ya que en estudios anteriores (Langellotti y Martos
Mula, 2007) se pudo observar que prcticamente en todos los subtest (a
excepcin del subtest de ortografa y el de Velocidad y Precisin), aparecan
diferencias en la puntuacin de cada gnero, siendo en la mayora de los
casos, mayor la puntuacin en los varones; a excepcin del subtest de
lenguaje, donde la puntuacin fue mayor en las mujeres. Estas diferencias
fueron las que hicieron necesario mantener dos baremos diferentes (al igual
que en la versin original del test), uno para mujeres y otro para varones.
Si bien este aspecto es llamativo, como ya dijimos los individuos de la
versin informatizada no difieren de lo esperado para su grupo de referencia
en cada uno de los subtest (tanto en varones como en mujeres); por lo tanto
es posible que esta ausencia de diferencias entre gneros sea debida a
otros factores como podra ser el escaso nmero de varones con los que se

[21]

trabaja. No obstante, en el pase que se va a realizar en el mes de marzo,


donde se estima que pasarn un total de alrededor de 300 individuos, se
seguir analizando este tema para ver si con un mayor nmero de varones
se sigue manteniendo esta ausencia de diferentes entre gneros.

Subtest

Prueba t

Razonamiento Verbal (RV)


Clculo (C)
Razonamiento Abstracto (RA)
Velocidad y Precisin (VP)
Razonamiento Mecnico (RM)
Relaciones Espaciales (RE)
Ortografa (O)
Lenguaje (L)
ndice de Educabilidad (RV+C)
ndice General de Inteligencia
(RV+RA)

T(39; 005) = -0.42; p >


0.05
T(39; 005) = 0.522; p >
0.05
T(39; 005) = 0.681; p >
0.05
T(30; 005) = 0.328; p >
0.05
T(38; 005) = -1.45; p >
0.05
T(38; 005) = -1.586; p >
0.05
T(38; 005) = 1.905; p >
0.05
T(38; 005) = 1.064; p >
0.05
T(39; 005) = -0.29; p >
0.05
T(39; 005) = 0.243; p >
0.05

Tambin se recab informacin sobre otros aspectos que hubieran podido


llamar la atencin en el pase informatizado realizando reuniones de
discusin entre los miembros del grupo de investigacin y los voluntarios
del Centro de Orientacin Educativa que participaron en la administracin
de la prueba. Entre las opiniones unificadas que parecan mostrar los
administradores de la prueba est:
a) El hecho de que en la versin informatizada, a los individuos les
sobraba mucho tiempo entre el trmino de un subtest (incluida la
revisin) y el tiempo que se le asigna a cada prueba para su
conclusin.
b) Tambin se observo que parecen existir ciertas dificultades en los
alumnos para encontrar aquellos tems que no contestaron cuando
dentro del tiempo destinado al subtest los alumnos quieren volver
atrs para contestarlos (una vez llegados al ltimo tems) o a corregir
una respuesta dada en la que presentaran dudas.
En el primero de los casos (a) se consider la posibilidad de reducir el
tiempo de pase para cada subtest, pero se desestimo porque eso implicara
cambiar sustancialmente el test original de lpiz y papel. Se consider
oportuno que para futuras presentaciones se siguiera analizando este
hecho, pero se opt por no modificar nada por el momento.

[22]

En el segundo de los casos (b) se consider la posibilidad de que, una vez


llegado el ltimo tems, cuando se le de al alumno la posibilidad de revisar,
en las pestaas que aparecen para guiarlo en la bsqueda de los tems, se
resaltara en rojo el nmero de la pregunta (o grupo de preguntas,
dependiendo del subtest) en las que quedara algn tems sin responder; no
encontrando solucin para guiarlos en la bsqueda de aquellas preguntas
en los que los alumnos pudieran dudar en su respuesta. No obstante, se
consider que por el momento, al ser todo esto determinado por
apreciaciones subjetivas de los administradores del test, no se realizaran
modificaciones, pero si que se indagara la opinin de los alumnos al
respectos por medio de encuetas. Estas, al ser una modificacin con
respecto a la propuesta inicial, se han explicitado su contenido y su modo
de aplicacin en el apartado 3.2.

4.2. PRINCIPALES PROBLEMAS QUE SE PRESENTARON


DURANTE
EL
TRABAJO
Y
MODO
COMO
SE
RESOLVIERON.
Las complicaciones ms llamativas encontradas en esta primera etapa del
trabajo estn relacionadas con la bsqueda de becarios interesados en la
participacin en el proyecto.
En un primer momento el proyecto pensaba contar con 1 becario en el
mbito de la Psicologa, 1 en el mbito de la Ingeniera, y 1 en el mbito del
Diseo Grfico, contando con otro becario extra en el mbito en el que
hubiera ms postulantes.
No obstante, ante los reiterados llamados que se realizaron en la bsqueda
de becarios, a finales de noviembre y a lo largo del mes de diciembre, los
nicos postulantes fueron alumnos de Psicologa; de entre los cuales se
seleccionaron dos becarios. Pero no se postul ningn alumno de Diseo
Grfico o de Ingeniera. Al indagar esa ausencia de inters, se lleg a la
conclusin de que en algunas carreras la investigacin no est muy
difundida y no supone un valor aadido en su curriculum; por lo tanto, y
dado que los montos de retribucin que se pueden ofrecer (tanto a becarios,
como a investigadores) no son en si motivadores por lo reducido de la
cuanta, los alumnos no se sintieron motivados a participar del proyecto.
Se buscaron otras alternativas, como son proponer el tiempo que se
dedique a esta investigacin, y el trabajo en ella realizado, al ser especficos
de un rea disciplinar, se podran considerar como parte de las prctica
preprofesionales que los alumnos de las carrera de Diseo Grfico e
Ingeniera tienen que realizar como parte de su curricula.
De este modo logramos captar el inters de un alumno de Diseo Grfico
que accedi a colaborar con nosotros como becario, reconocindosele su
trabajo en esta investigacin como parte de las Prctica Preprofesionales de
la Tecnicatura en Diseo Grfico. Por lo que, a pesar de que el comiendo en
la realizacin del objetivo 4 (Creacin de una versin informatizada
mejorada del DAT, en la que se incluye tambin el sistema de
procesamiento automtico de la informacin) se tuvo que postergar por
falta de personal, se considera que partir del mes abril ya se podr trabajar
fluidamente en l.

[23]

No obstante, en lo que se refiere a becarios desde el mbito de la


Ingeniera, se carece de los mismo, por lo que la Ingeniera investigadora de
nuestro equipo carece de ayuda para la realizacin de la versin del DAT en
la que se procese automticamente la informacin, as como la creacin del
software necesario para mantener la nueva versin mejorada de este test,
se est demorando; no viendo solucin al problema por el momento,
aunque se seguirn realizando llamado a alumnos de informtica
interesados en la colaboracin con el proyecto.
Otro problema importante con el que nos encontramos, y que no est en
nuestras manos resolverlo es el modo de acreditar los montos destinados
para salarios en nuestros proyecto. Ninguno de los componentes del grupo
es monotributista y, por la escasa retribucin que implica ser parte de este
proyecto, tampoco nos resulta conveniente convertirnos en monotributistas
o responsables inscriptos, ya que no realizamos ninguna otra actividad que
lo requiera. No obstante, a pesar de ser mnima la retribucin que est
destinada anualmente para cada uno de los investigadores, es
imprescindible que sea rentada ya que son horas que cualquiera de
nosotros destinamos haciendo uso de nuestro tiempo libre. Es por ello que
por este medio se aprovecha la ocasin para solicita a la institucin vea la
manera de poder
solucionar este tema por medio de otras vas
institucionales que permitan el cobro de los haberes por investigacin sin la
necesidad de facturas como monotributitas o responsables inscriptos.

4.3.

PRODUCTOS OBTENIDOS
INVESTIGACIN.

DERIVADOS

DE

LA

Hasta el momento, y dado que estamos en la primera etapa del proyecto,


no se ha obtenido an ningn producto derivado de la investigacin; no
obstante, se estima que en la prxima rendicin se podr tener ya algo al
respecto.
5.- UTILIZACIN DE LOS RECURSOS

4.1.

RENDICIN DE FONDOS: JUSTIFICAR CON LOS


COMPROBANTES
ORIGINALES
LOS
GASTOS
INCURRIDOS PARA LA EJECUCIN DEL PROYECTO.

VER ANEXO 1. RENDICION DE CUENTAS PRIMER DEPSITO

4.2. DISPONIBILIDAD Y UTILIZACIN DE LOS RECURSOS Y


EQUIPOS SUMINISTRADOS CON PRESUPUESTO DE LA
UNIVERSIDAD O DE OTRA INSTITUCIN, SI HA SIDO
COFINANCIADO.
El equipo ha contado con la colaboracin de la UCSE-DASS en los siguientes
aspectos:
-

Uso del DAT, habiendo este sido adquirido en una investigacin


previa.

[24]

Insumos informticos y mobiliarios del rea de Investigacin, del rea


de Ciencias de la Educacin y del Centro de Orientacin Educativa de
la UCSE-DASS.

Lugares fsicos para reuniones semanales: rea de Investigacin, del


rea de Ciencias de la Educacin y del Centro de Orientacin
Educativa de la UCSE-DASS.

Uso de los laboratorios de Informtica de la UCSE-DASS para el pase


del Test Informatizado. Y colaboracin del personal de esta rea para
la instalacin del test y para colaborar en la solucin los problemas
que pudieron ir apareciendo.

Uso de las aulas de la UCSE-DASS, para el pase del Test en su versin


manual.

6. OBSERVACIONES GENERALES
Ninguna

[25]

You might also like