Professional Documents
Culture Documents
OFICINA CENTRAL DE
ADMISIN E INFORMES
SISTEMA DE ADMISIN
A LA PONTIFICIA UNIVERSIDAD CATLICA DEL PER
OFICINA CENTRAL DE
ADMISIN E INFORMES
Sistema de Admisin a la PUCP
Pontificia Universidad Catlica del Per
ISBN: 978-612-47208-0-2
CONTENIDO
Presentacin............................................................................................................................................ 9
Introduccin............................................................................................................................................11
A. Lectura........................................................................................................................31
B. Redaccin....................................................................................................................32
C. Matemtica................................................................................................................. 33
D. Organizacin.............................................................................................................. 35
C. Nmero de preguntas..................................................................................................... 37
A. De admisin...................................................................................................................... 38
B. De nivelacin.................................................................................................................... 39
4.6. Casos especiales: La Primera Opcin e Ingreso por Tercio Superior (ITS)..................................40
ANEXOS
Anexo D3: Temas, subtemas y habilidades comunes a todas las pruebas OCAI.......................................57
Uno de los objetivos de la Oficina Central de Admisin e Informes de la Pontificia Universidad Catlica del Per es
evaluar a los postulantes al pregrado para determinar el nivel de logro que han alcanzado, antes de empezar sus
estudios de pregrado, en las competencias de lectura, redaccin y matemticas. De acuerdo al nmero de vacantes,
unos resultan admitidos y otros tendrn que volver a intentar ingresar, si as lo desean.
Con la finalidad de contar con un moderno sistema de evaluacin, basado en teoras y enfoques usados por la
comunidad internacional en el diseo de pruebas, la oficina promovi un trabajo con la comunidad universitaria,
bajo la asesora del doctor Agustn Tristn, reconocido experto en Amrica y Europa en modelos de evaluacin,
que dio por resultado el modelo de evaluacin para la admisin al pregrado PUCP, el mismo que fue aprobado
por Consejo Universitario en el ao 2009 y que, desde entonces, ha sido revisado y ha incorporado otros ajustes
y definiciones.
El presente documento tiene por objetivo presentar el modelo de evaluacin en el estado en que se encuentra
actualmente y tiene por finalidad compartir los puntos esenciales que lo caracterizan as como su justificacin tcnica,
de forma que pueda ser de ayuda y gua para quienes emprendan el camino de reflexionar sobre cmo seleccionar
nuevos alumnos que quieren empezar los estudios de pregrado en la Universidad. Ha sido elaborado bajo la
direccin del ingeniero Alberto Torreblanca Villavicencio, jefe de la seccin de Evaluacin de la Oficina Central de
Admisin e Informes de la Pontificia Universidad Catlica del Per. Esperamos que sea de ayuda.
En primer lugar, esto implica determinar un perfil de ingreso que contenga aquello que predice mejor el buen
desempeo dentro de la Universidad. Este aspecto se refiere al contenido de la evaluacin (qu medimos). Para
determinar qu medir, es necesario integrar dos fuentes de informacin: la investigacin emprica, con el objetivo
de seleccionar los indicadores con mayor valor predictivo, y las necesidades particulares de las unidades acadmicas
que reciben a los admitidos Estudios Generales Letras y Ciencias, as como las facultades de Arte, Educacin y
Arquitectura y Urbanismo.
En segundo lugar, es necesario definir qu aspectos del perfil de ingreso corresponden a la evaluacin para la
admisin y cules pueden conducir a estrategias remediales dentro de la Universidad, tales como los cursos de
nivelacin o complementarios.
En tercer lugar, el perfil de ingreso ha de ser medido con precisin, lo que nos lleva al tema de cmo medimos.
Este tercer aspecto se refiere al modelo de medicin que se utiliza y a la validez de los instrumentos, temas muy
importantes si se considera que los juicios que se hacen sobre los postulantes, a partir de los resultados obtenidos
en las pruebas, conducen a decisiones trascendentes para la vida de las personas (admitir o no admitir). Adems, los
resultados deben proporcionar informacin vlida sobre las fortalezas y deficiencias de los admitidos, con el fin de
orientar el trabajo inicial de las unidades acadmicas.
Por estos motivos, el equipo de la OCA trabaj durante casi cuatro aos (2006 a 2009) en la elaboracin de una
propuesta para mejorar el sistema de admisin que exista. Dicha propuesta incorpor valiosos aportes de distintos
profesionales, incluyendo a profesores representantes de las unidades acadmicas, directores de colegios, el equipo
de la Direccin de Informtica, docentes expertos en los temas de Lectura, Redaccin, Matemtica e Ingls, as como
asesores nacionales e internacionales especializados en Estadstica, Psicologa Educacional y Medicin Educativa2 .
En agosto de 2008, la OCA3 inici una serie de consultas sobre el documento preliminar, las mismas que concluyeron
en noviembre del mismo ao. Se sostuvieron reuniones con las autoridades de las cinco unidades acadmicas que
reciben postulantes, con CEPREPUC, con el equipo de la Direccin de Informtica, con la Direccin de Asuntos
Acadmicos y, finalmente, con el Vicerrectorado Acadmico. Paralelamente, fueron realizados dos estudios de
mercado con posibles postulantes a la PUCP, a fin de evaluar la percepcin del pblico usuario acerca de los cambios
propuestos y su potencial impacto en la postulacin.
En el 2009, el sistema de evaluacin para la admisin fue aprobado por el Consejo Universitario. Luego, durante los
aos de aplicacin de este modelo, se han ido incorporando las necesarias mejoras que han dado lugar a la reflexin
sobre la experiencia: eliminacin del puntaje negativo, elevacin del puntaje de aprobacin, revisin del nmero
de preguntas, entre otros.
Por ende, el sistema de evaluacin para la admisin es producto de un esfuerzo de integracin que ha buscado
incorporar las diversas solicitudes y sugerencias de las unidades consultadas y del pblico usuario. Se busca, de
esta forma, atender a los requerimientos internos y externos, y mantener a la vez la coherencia de este sistema
de admisin. Al mismo tiempo, se pretende que esta experiencia de dilogo y construccin colectiva favorecer
la coordinacin entre las instancias que comparten el objetivo de contar con buenos y excelentes alumnos en esta
Universidad.
1
Posteriormente, es la formacin brindada durante los Estudios Generales y/o Facultad la que influye ms en el desempeo del
alumno que la formacin escolar.
2
En los Anexos A, B1 y B2, se pueden encontrar tanto la relacin de personas que colaboraron con esta propuesta como sus
comentarios a las distintas versiones.
3
OCA hasta el 2012, luego se formo la OCAI
1. CONTEXTO QUE DIO LUGAR AL SISTEMA
DE EVALUACIN PARA LA ADMISIN
Idealmente, podra pretenderse conceder la admisin solo a quienes cumplieran con el perfil de ingreso y no
necesitaran de ningn tipo de nivelacin. Sin embargo, esto solo sera posible si el nmero de admitidos a la
Universidad Catlica dependiera exclusivamente de la evaluacin para el ingreso, situacin que es ajena a nuestra
tradicin. La Universidad concede la admisin al nmero de alumnos necesario para contribuir con el sostenimiento
y desarrollo de la institucin, y ese nmero est compuesto por alumnos de distinta calidad acadmica.
Cabe preguntarse, en todo caso, por qu no postulan a la Universidad Catlica solamente alumnos buenos,
en cantidad suficiente, como para contar con los mejores? Se pueden esbozar hiptesis de distinta ndole que,
actuando en conjunto, ayudaran a entender lo que ocurre:
- Vocacional: han surgido nuevas especialidades que atraen a los buenos alumnos y que la Universidad no ofrece.
- Geogrfica: la ciudad, al crecer sin un sistema de transporte moderno y eficiente, ha dado lugar a una
fragmentacin de la misma y a la configuracin de distintos centros de los que resulta difcil alejarse. Estos
ofrecen centros de educacin superior.
Esta nueva realidad obliga a aceptar que la admisin ser concedida a un grupo de alumnos excelentes, buenos
y regulares, probablemente en porcentajes parecidos. Por ello, hace falta disear procesos de evaluacin que
permitan conocer con precisin cmo llega el admitido y qu puede ofrecerle la Universidad para que se ajuste al
perfil de ingreso. Este proceso, por otro lado, debe brindar al evaluado una informacin que le permita entender
bien sus fortalezas y debilidades. Finalmente, cuando se trate de un escolar en 5. de secundaria, la evaluacin para
la admisin no debe competir con el colegio, sino valorarlo e integrarlo.
La Universidad ofrece, desde hace ms de dos dcadas, el ingreso directo por CEPREPUC, el ingreso directo por
Diplomas de Bachilleratos y, desde noviembre de 1997, la Primera Opcin que ofrece la admisin antes de concluir
el colegio. Estas modalidades se han sumado a lo que antes se conoca como el Examen de Ingreso y ahora se
denomina Evaluacin del Talento.
Continuando esa lnea, la Universidad Catlica ha desarrollado otras estrategias enfocadas en captar escolares con
mejor rendimiento ITS, aumento de vacantes para ingreso por primer o segundo puesto de la promocin. A ello
se han sumado los procesos de admisin a los programas de becas que ofrece la Universidad (Beca P. Jorge Dintilhac
SS.CC. y Beca Fe y Alegra) y la admisin a las distintas becas del Programa Beca 18 de Pronabec.
Sin embargo, hasta el ao 2008, no exista un perfil de ingreso explcito que sirviese de gua para disear los
instrumentos de evaluacin y de orientacin al postulante. En su lugar, se contaba con una relacin de aspectos
que se evaluaban aplicando distintos instrumentos que variaban de modalidad a modalidad (se puede consultar un
resumen en el Anexo C). Esta situacin mostraba algunas deficiencias:
B. Los concursos por vacantes (Evaluacin del Talento y La Primera Opcin) se diseaban en base a una
evaluacin segn normas 4 :
- Impedan comparar entre s a quienes fueron admitidos por una misma modalidad de admisin, pero en dos
semestres diferentes.
- Permita slo ordenar a los admitidos de mayor a menor puntaje, sin permitir una descripcin de su calidad
acadmica
La Universidad, en tanto institucin, ha experimentado un conjunto de cambios y, junto con ello, la admisin
universitaria se ha transformado de manera significativa. No solamente se ha producido un incremento en la oferta
de educacin superior, sino que algunos valores contemporneos han modelado nuevas maneras de entender
la formacin universitaria, lo que ha dado prioridad a la rentabilidad, la creatividad y la velocidad. Esta ltima se
ha traducido en rapidez para empezar los estudios de especialidad, para insertarse en las mejores posiciones del
mercado laboral; para llegar al centro de estudios por la cercana geogrfica; etc. Esta velocidad como valor tambin
ha impactado en la admisin: tener una vacante antes de terminar el colegio; rendir un examen de admisin en
cualquier momento y en el propio local del colegio; no rendir ninguna prueba, tan solo una entrevista. En suma,
todo debe ser rpido, inmediato.
Este fenmeno nuevo, con respecto a las dcadas de los setenta y ochenta, surgido en un contexto de sobrevaloracin
de la velocidad, ha trado como consecuencia que se evale ahora a postulantes ms precoces en muchos mbitos,
pero menos expuestos a los espacios y tiempos necesarios para comprenderse y construirse. En sntesis, se ha
acelerado el proceso de decidir qu y dnde estudiar y tambin se ha reducido el tiempo para el cierre de una etapa
de la vida la escolar que antes estaba llena de gran significado. La posibilidad de continuar unidos y comunicados
gracias a Internet reduce el antiguo pesar causado por alejarse de verdad de los compaeros de toda la vida. Esta
situacin del joven plantea retos adicionales a la medicin.
3
La Primera Opcin ha trado como consecuencia los consabidos ciclos de preparacin que se inician antes de empezar 5. de
secundaria (incluyendo a CEPREPUC) y, en el extremo, el fortalecimiento de los colegios preuniversitarios que imparten primaria y
secundaria completa.
4
La evaluacin puede diferenciarse segn normas y segn criterios. En el primer caso, la calificacin que cada evaluado obtiene es
fruto de la aplicacin de un conjunto de procedimientos estadsticos que permiten otorgarle un puntaje, fruto de haber comparado
sus respuestas con las del grupo en general. El resultado de dicho grupo se convierte en la norma (digamos que se considera normal
lo que hace u ocurre con la mayora. Entonces, las respuestas de un sujeto deben juzgarse de acuerdo a esa norma). En cambio,
cuando se evala utilizando criterios, se busca determinar con antelacin cul es o cules son los niveles que se consideran como
suficientes, es decir, cul es el criterio para juzgar un resultado (o evidencia) y decidir si cumple con lo esperado o no (digamos que,
independientemente de lo que ocurra con la mayora, se fija un estndar y con l se juzgan los resultados de cada sujeto). Ambos
enfoques son vlidos, dependiendo de lo que pretenda la evaluacin.
A. Contar con un Perfil de Ingreso nico y consensuado al que respondan todos los admitidos a la Universidad
Catlica, sin importar la modalidad de admisin por la que sean evaluados.
B. Contar con un modelo e instrumentos de medicin eficaces que permitan, adems de ordenar al grupo para
asignar vacantes, valorar la calidad acadmica de los admitidos y comparar a quienes postulan por distintos canales
e ingresan al mismo ciclo o comparar entre los admitidos en diferentes aos.
D. Integrar a las unidades acadmicas que reciben alumnos en el primer ciclo del pregrado en el proceso de consulta
y toma decisiones sobre la admisin a la Universidad Catlica.
De manera indirecta, se espera que estos objetivos fomenten una preparacin que resulte significativa en los
postulantes, tanto a nivel escolar como preuniversitario, y que est ligada a lo que el alumno va a hacer una vez
dentro de la Universidad.
Se realiz un anlisis de contenido de fuentes secundarias de la PUCP, en las que se alude a caractersticas
deseables en un admitido, que culmin con la propuesta de criterios de evaluacin para ITS. Por otro lado, se
consult la literatura pertinente y las experiencias de prestigiosas universidades del mundo. Asimismo, se cont
con la asesora de la psicloga Sheyla Blumen, quien elabor para la OCA un documento de trabajo sobre
la definicin de un perfil de ingreso. Finalmente, hubo una participacin en el taller Rediseo Curricular por
Competencias, organizado por la Direccin de Asuntos Acadmicos e impartido por el profesor Ronald Knust,
quien adems asesor al equipo de la OCA en aspectos referidos a la formulacin del perfil de ingreso.
Los estudios de validez predictiva de los principales procesos de admisin fueron conducidos por Susy Dumet
(Dirinfo). Se tom como variable independiente los resultados de los procesos del 2006 y 2007, y como variable
dependiente el rendimiento acumulado de esos mismos alumnos dentro de la Universidad. Los procesos estudiados
fueron Evaluacin del Talento (seccin y tipo de pregunta), Primera Opcin (seccin y tipo de pregunta), ITS
(instrumentos y criterios) y el Paee (instrumentos y criterios).
Estudio realizado por la Oca en el 2007 utilizando una misma prueba con cuatro y cinco alternativas de
respuesta, que se aplic a un grupo de escolares de 5. de secundaria de colegios de atencin preferente.
A fin de formular los elementos clave del perfil, se realizaron tres grupos de entrevistas grupales o focus groups:
1) Directores y orientadores de colegios, para evaluar la percepcin de nuestro sistema actual de admisin y sus
repercusiones en el mbito escolar.
2) Profesores representantes de las unidades acadmicas (EE.GG.LL., EE.GG.CC., Arte, Arquitectura y Urbanismo)
designados por los decanos. El objetivo fue establecer los retos acadmicos transversales a todos los cursos y
habilidades que enfrenta un alumno durante su primer ao de estudios, as como las competencias que
requieren para afrontarlos con xito.
3) Profesores expertos en las reas de Matemticas, Lectura y Redaccin, a fin de identificar las habilidades
acadmicas necesarias para afrontar con xito los retos acadmicos del primer ao de estudios, as como la
mejor forma de evaluarlas en los sistemas de admisin.
Esta etapa supuso la revisin de los slabos de las reas correspondientes al primer ao de estudios en las distintas
unidades acadmicas, como tambin la sistematizacin de la informacin recogida en las etapas previas. A partir
de ello, se formul y operacionaliz cada rea del perfil de ingreso. En cada caso, la formulacin del documento
estuvo a cargo de un profesional con experiencia en el rea:
En esta fase del trabajo, contamos con la asesora del Dr. Agustn Tristn, experto en Medicin Educativa, con
quien realizamos una evaluacin a fondo del sistema actual de admisin, as como un plan de trabajo. Asimismo,
el equipo de la Oca, la Dirinfo y algunos invitados de las unidades acadmicas recibimos un curso de capacitacin
sobre el modelo Rasch (propuesto como nuestro nuevo modelo de medicin), a cargo del Dr. Jorge Bazn.
Finalmente, el equipo de la Oca desarroll la propuesta del sistema de evaluacin.
Etapa 7: Piloto de construccin y validacin de preguntas para el banco. (julio setiembre 2008)
Se elaboraron manuales tcnicos de construccin de preguntas sobre la base del perfil y se conform un equipo
de constructores que elaboraron temes siguiendo nuevas instrucciones. Se realiz un proceso de revisin de
preguntas y se validaron con un universo de ms de 2000 escolares de 5. de secundaria. A cada escolar se le
gener un reporte de resultados en web y se realiz una devolucin de resultados con los directores de los
colegios. Al mismo tiempo, se empezaron las coordinaciones para la firma de convenio para intercambio de
preguntas con la Universidad Autnoma Metropolitana (Mxico) y un instituto de medicin mexicano.
Se sostuvo una serie de reuniones con las autoridades de los Estudios Generales Ciencias y Letras, y de las
facultades de Arquitectura y Urbanismo, Arte y Educacin, en las que se present el documento preliminar con
la propuesta de modificaciones para los procesos de admisin. Las unidades, a su vez, consultaron el documento
con quienes consideraron conveniente docentes, comits asesores etc. y, en la mayora de los casos, nos
hicieron llegar sus comentarios (para ver la relacin de personas consultadas y los cambios sugeridos consultar
los Anexos B1 y B2). Las reuniones informativas incluyeron, asimismo, al equipo de la Direccin de Asuntos
Acadmicos y a CEPREPUCP.
Reunin con el director de la Direccin de Asuntos Acadmicos para presentar el documento. Luego de revisarlo
con algunos colaboradores, nos hizo llegar sus sugerencias y comentarios.
Etapa 10: Estudios con postulantes (agosto setiembre de 2008)
La empresa Mayutica fue contratada para indagar entre potenciales postulantes de distintos niveles
socioeconmicos su percepcin ante una modificacin del sistema de evaluacin.
Se aplic a los 949 postulantes por ITS una encuesta sobre cambios en el sistema de evaluacin.
1. Las sugerencias y pedidos de las unidades acadmicas y del equipo de la Direccin de Asuntos Acadmicos
2. Los resultados de los estudios de mercado acerca del posible impacto en el pblico usuario de los cambios
proyectados
3. Una propuesta ms amplia hecha por Dirinfo que incluye varios desarrollos para administrar todo el proceso
de inscripcin, calificacin y publicacin de resultados y que requiere de un tiempo previo de diseo y
desarrollo de aplicativos. La consulta a Dirinfo se plante asumiendo que los cambios en el sistema de admisin
empezaran a implementarse en el proceso de Evaluacin del Talento 2010-1.
Una lista de 20 indicadores para calcular la validez del contenido fue validada por cuatro jueces expertos en
el rea y, posteriormente, fue probada empricamente en dos etapas. En la primera etapa, se calificaron 100
redacciones del proceso de ITS y se lleg a una lista definitiva de indicadores. Cada prueba fue calificada, a ciegas,
por tres correctores. Se calcul la confiabilidad de cada indicador, as como su dificultad y ajuste. En la segunda
etapa, se estudi la frmula de calificacin de la competencia de redaccin, que incluye un puntaje por preguntas
objetivas y otro por calificacin de redacciones. Para ello, se realiz un piloto con 120 estudiantes de Estudios
Generales Ciencias.
La primera seccin de este acpite desarrolla las finalidades del sistema, es decir,
para qu evaluar. La segunda, el perfil de ingreso, se refiere a qu evaluar. La tercera
seccin comprende los instrumentos de evaluacin, referidos a cmo evaluar. En la
cuarta, se detallan los aspectos tcnicos de la evaluacin. La quinta seccin presenta
cmo se comunicarn los resultados de admisin. La sexta trata los casos especiales
de ITS. Finalmente, en la sptima seccin, se describen las funciones del Comit de
Admisin.
4.1. Finalidades del sistema
El sistema de admisin debe estar en capacidad de evaluar todo lo que se espera que un postulante haya
desarrollado previamente al primer ciclo de estudios universitarios (perfil de ingreso). Con los resultados, se
debe poder decidir, en primer lugar, si un candidato est apto para ser admitido y, en segundo lugar, si est listo
para cursar las asignaturas del primer ciclo o si, antes, deber pasar por un espacio propedutico para lograr
cubrir las discrepancias entre su estado actual y lo propuesto en el perfil.
Por lo tanto, el sistema de evaluacin tiene principalmente tres fines:
(1) Admisin: acopiar evidencia de forma sistemtica para tomar la decisin de conceder o no la admisin
aplicando algn criterio acadmico. Por ejemplo: criterio de aprobacin: CEPREPUC; criterio de
reconocimiento: diplomas de bachilleratos internacionales, ITS; criterio de competencia por vacantes:
Evaluacin del Talento, La Primera Opcin.
(2) Diagnstico: identificar, sobre la base al perfil de ingreso, si el admitido se ajusta al perfil de ingreso, o si
hay discrepancias y la magnitud de las mismas.
(3) Acreditacin: reconocer y dar por logrado, en el admitido, cada aspecto del perfil de ingreso.
El perfil que se propone comprende tanto los aspectos evaluados para la admisin como los que se evalan en
el caso de los admitidos. Cuenta con un tronco comn, compuesto por competencias genricas , y un conjunto
de conocimientos y aptitudes especficos a cada unidad.
Un admitido a la Pontificia Universidad Catlica del Per debe contar con las siguientes competencias genricas:
5
Se entiende por competencia una capacidad efectiva (real y demostrada) para llevar a cabo exitosamente un actividad
acadmica. En la competencia, intervienen los conocimientos, procedimientos, aptitudes, estrategias, actitudes,
valores, etc. que el sujeto ha acumulado a lo largo de su vida. Por competencia genrica, se hace referencia a las
que son de amplio espectro, dado que facilitan el desempeo acadmico en una amplia gama de cursos en cualquier
unidad o en una unidad especfica.
6
Por conocimiento, se entiende los datos, hechos, conceptos y teoras, y su respectivo manejo crtico.
7
Por aptitud, se entiende un nivel de capacidad incipiente pero prometedor, y una disposicin e inters para realizar
algo. La consideracin del conjunto permite reconocer un potencial que podr transformarse en una competencia,
gracias a un proceso formativo.
Lectura
Redaccin
Competencias
Matemtica
Organizacin
Conocimientos Fsica
Aptitudes Artstica
Fines de evaluacin
Admisin Diagnstico Acreditacin
1. Postulantes:
Momentos de competencias
la evaluacin
2. Admitidos:
conocimientos
La tabla siguiente resume los aspectos evaluados en cada momento y las nivelaciones a las que conduce en cada
unidad:
Nivelacin a la que conduce en caso de no aprobar:
Momento Aspecto evaluado
EE.GG.CC. EE.GG.LL.
Introduccin a la Matemtica
Matemtica
Universitaria
Momento 1: Introduccin a la Comunicacin
competencias y aptitudes Lectura y redaccin
Escrita
Organizacin
A. Lectura
Comprender y procesar Capacidad para procesar, analizar y evaluar eficientemente informacin escrita de diverso tipo a
informacin (Lectura) partir de los saberes previos, y tomando en consideracin el contexto o situacin en la que fue
producida.
Cada nivel de competencia supone habilidades. Las habilidades requeridas para la competencia de Lectura se
encuentran en el Anexo D1.
Tabla de especificaciones
Total 36 100%
B. Redaccin
Redactar textos formales Capacidad para producir textos con un conjunto de ideas claramente planteadas y
(Redaccin) fundamentadas, una estructura lgica organizativa y un nivel de expresin que respete el uso
correcto de las reglas ortogrficas, gramaticales, etc. de la lengua escrita
La competencia de Redaccin supone ciertos conocimientos (grafas, uso de tildes, reglas gramaticales etc.). No
obstante, el postulante podra hacer un uso intuitivo y correcto de las reglas, sin ser capaz de formularlas.
Cada nivel de competencia supone habilidades. Las habilidades requeridas para la competencia de Redaccin se
encuentran en el Anexo D2.
Tabla de especificaciones
Ortografa y puntuacin
Total 36 100%
C. Matemtica
Utilizar la matemtica para Dada una situacin problema en un contexto extra o intramatemtico, ser capaz de
solucionar problemas formular el problema, seleccionar un algoritmo para su solucin, aplicarlo (lo que involucra
(Matemtica) generalmente algn tipo de clculo) y, finalmente, interpretar el resultado obtenido. Estas
habilidades deben estar asociadas a contenidos especficos.
En la competencia Matemtica, los conocimientos explcitos son indispensables. Por ello, al operacionalizar esta
competencia se han incluido contenidos organizados bajo temas dentro de los cuales hay un conjunto de subtemas.
Dentro de cada tema, se han establecido las habilidades a evaluar.
El Anexo D3 presenta los temas comunes para el grupo total de postulantes. Los subtemas y habilidades adicionales
para los Estudios Generales Ciencias y la Facultad de Arquitectura y Urbanismo se encuentra en el Anexo D4.
Los tipos de tareas que los postulantes deben ser capaces de realizar durante el examen son los siguientes:
. Dada una situacin en un contexto intramatemtico y siguiendo instrucciones directas, reproducir algoritmos o
procedimientos rutinarios para dar solucin al problema planteado
. Dada una situacin en un contexto intramatemtico, seleccionar entre un conjunto de algoritmos o procedimientos
aquel que permita dar solucin al problema planteado
. Dada una situacin en un contexto extramatemtico, seleccionar la informacin relevante, traducir el problema a
lenguaje matemtico, seleccionar las herramientas que ayudarn a resolverlo, aplicarlas e interpretar la respuesta
en el contexto original
Tabla de especificaciones
Tema Total
lgebra 13 27%
Total 48 100%
D.Organizacin
Gestionar el propio Estrategias eficientes para gestionar el propio aprendizaje, lo que implica una alta motivacin hacia
aprendizaje (Organizacin) el estudio, organizacin y hbitos de estudio adecuados
Organizacin Rendimiento escolar o capacidad de organizarse durante la etapa escolar para obtener buenos
resultados acadmicos y extraacadmicos. Se usar el promedio de notas de 1 a 5 de secundaria.
De acuerdo con los distintos estudios realizados, el rendimiento escolar guarda una estrecha correlacin con el
rendimiento en la Universidad convirtindose en un potente predictor acadmico, independientemente del colegio
de origen. Los promedios ms altos aluden a una alta y sostenida motivacin, y a hbitos de estudio consolidados,
que facilitan la organizacin para el estudio.
Por otro lado, el enviar a los colegios el mensaje de que sus calificaciones tienen un peso en los procesos de
admisin de la Universidad Catlica redundar en las relaciones establecidas con ellos y, eventualmente, alentar a
que sus docentes y orientadores animen a sus mejores alumnos a postular a la nuestra universidad.
Sin embargo, somos conscientes de las facilidades que existen en nuestro pas para adulterar documentos, lo que
pone en riesgo implementar el uso del promedio de notas. Adems, podra alentarse a algunos colegios a aumentar,
de manera sistemtica, las notas de sus alumnos, con el afn de contar y difundir que tienen ms exalumnos
admitidos. Finalmente, un riesgo distinto que podemos correr es que los alumnos de rendimiento bajo o regular se
terminen de desanimar de postular a la Universidad.
Considerando estos obstculos y riesgos, pero buscando darle un valor a un buen predictor acadmico que
indirectamente da valor a la trayectoria escolar, es posible concederle un peso adecuado, pero que reduzca o
controle los factores antes mencionados.
Llamamos modelo a la forma de explicitar la racionalidad que da sentido a todos los aspectos implicados
en la evaluacin, que incluye desde cmo conceptualizar y operacionalizar el constructo (o variable)
que se quiere medir, hasta la manera de disear las pruebas, interpretar y juzgar la informacin que
aquellas proporcionan.
Actualmente, el diseo de nuestras pruebas de opcin mltiple se realiza utilizando el modelo Clsico
de Medicin conocido como TCT (Teora clsica de los tests). Este emplea fundamentalmente dos
indicadores: la dificultad, definida como el porcentaje de postulantes que respondi a una pregunta o
parte de la prueba, y la selectividad, referida a la capacidad de una pregunta o parte para discriminar
entre los postulantes, que se obtiene mediante una correlacin tem-test.
Nuestra propuesta es complementar este enfoque con el modelo de medicin de Rasch8 , que algunos
autores clasifican dentro de los Modelos TRI (Teora de respuesta al tem). Esta es una herramienta
poderosa para el diseo de pruebas, que tiene la ventaja de ser menos dependiente del grupo que la
TCT. El equivalente en Rasch de los indicadores de dificultad y selectividad es el ajuste. Este modelo
tiene una serie de requisitos tcnicos, tales como construir preguntas que midan una nica dimensin.
La aplicacin de Rasch para elaborar las pruebas nos ofrece varias ventajas. En primer lugar, permitir contar
con una estructura de prueba en la que los reactivos se distribuyan uniformemente en trminos de dificultad.
Como esta estructura es replicable, podremos construir pruebas equiparables y, por tanto, comparar a
los postulantes de distintos procesos (La Primera Opcin, Evaluacin del Talento, etc.), as como realizar
comparaciones temporales entre semestres y aos.
Por otro lado, el modelo Rasch facilita el establecimiento de puntos de aprobacin para cada competencia
o rea de conocimiento. Ello permitir, adems de seleccionar, diagnosticar a los evaluados para identificar
cmo se encuentran respecto al perfil de ingreso y as emitir reportes con informacin til y significativa.
El modelo Rasch permitir evaluar al postulante en funcin a criterios o niveles previamente fijados. Sin
embargo, ordenar a los postulantes de mejor a peor seguir siendo necesario para asignar las vacantes. La
TCT nos seguir siendo de utilidad en este aspecto y otros ms.
Preguntas / Tiempo
Redaccin 36 / 40 minutos
Parte 1
Lectura 36 / 1 hora
C. Nmero de preguntas
El nmero de preguntas por rea ha sido calculado para mantener un error de diseo aproximado de 5%. Este
constituye el nivel mximo aceptable cuando la prueba se construye segn la regla 20 80, es decir, cuando
los reactivos se distribuyen uniformemente segn su dificultad, entre el 20% y el 80%.
El nmero de preguntas fijado es el adecuado si queremos emitir juicios vlidos para cada capacidad.
Solo 4 opciones.
Pedro Morales, S.J., experto en Medicin Educativa de la Universidad Pontificia de Comillas tiene diversos escritos
sobre el nmero de opciones en las preguntas objetivas, inclinndose hacia las 3 opciones. Las distintas pruebas
internacionales presentan solo 4 opciones. Agustn Tristn, otro experto mexicano en Medicin, tambin se inclina
hacia un nmero menor de opciones. Todas las evidencias apuntan, en todo caso, a que 5 opciones no aportan
nada significativo en el proceso de evaluacin. A esa misma direccin, concluy el estudio realizado por la Oca en
el 2007 utilizando una misma prueba con cuatro y cinco alternativas.
9
La Primera Opcin: 120 preguntas con 5 alternativas de respuesta. 60 de razonamiento verbal. 40 de razonamiento
matemtico. 20 de ingls. Evaluacin del Talento: 140 preguntas con 5 alternativas de respuesta. 70 de razonamiento
verbal. 50 de razonamiento matemtico. 20 de ingls.
Competencia Peso
Lectura 22,50%
Matemtica 45,00%
Organizacin 10,00%
Total 100,00%
Peso
Total 100,00%
4.4.2. Calificacin
Escala de medicin
Los puntajes irn en una escala de 0 hasta 1000 puntos con dos decimales.
A. De admisin
Calificacin de las preguntas objetivas
Un punto a favor por respuesta correcta. Un punto en contra por cada tres respuestas errneas. El puntaje
bruto se convierte a una medida de 0 a 1000 puntos empleando una escala de medicin por cada competencia,
que contiene puntos de aprobacin. Las medidas se ponderan por su peso.
Orden de mrito
Sobre la base del puntaje final, se organiza el orden de mrito final.
Admisin
La admisin se determina por el puntaje obtenido en las preguntas objetivas.
Se admitir de acuerdo con el orden de mrito y al nmero de vacantes aprobadas para cada Unidad. En caso
de empate en la ltima vacante, se admitir a todos los que tengan el mismo puntaje.
Total
A las unidades acadmicas, informes que detallen las fortalezas y debilidades del grupo admitido a
un semestre acadmico, a travs de distintos canales.
A los colegios, informes anuales que detallen las fortalezas y debilidades de los alumnos que
postularon durante el ao a la PUCP, a travs de distintos canales.
A. De admisin
Se publicarn el mismo da de aplicada la prueba.
B. De nivelacin
El mismo da de la prueba se publican los resultados de Matemtica y de Comunicacin. Los de
Fsica se publican luego de aplicada la prueba a los admitidos.
Si bien el objetivo principal de las mejoras en el sistema de admisin es garantizar que todos los jvenes que
postulan a la PUCP sean evaluados en funcin a los mismos criterios y con los mismos instrumentos, dos
grupos representan casos especiales: La Primera Opcin, e ITS.
Dado que existe una normativa del Ministerio de Educacin que precisa a los colegios que solo
deben entregar certificados oficiales con las notas de Secundaria al concluir el 5. grado, es prudente
no exigir este documento a los escolares de 5 que se presentan por La Primera Opcin, pues los
obligara a solicitar certificados de 1 a 4 de secundaria, obligando a los colegios a contravenir la
resolucin del ministerio.
Por esa razn, al no contar con el promedio de notas escolares (al menos, de 1 a 4), la competencia
de Organizacin no se considerara y el clculo del puntaje final tendra esta forma:
Competencia Peso
Lectura 25%
Redaccin 25%
Matemtica 50%
Total 100,00%
4.6.2. Ingreso por Tercio Superior de colegios seleccionados por el buen rendimiento de sus
egresados en la PUCP (ITS)
El ITS fue creado como una modalidad destinada a atraer a los mejores estudiantes a la PUCP.
Para poder postular, los jvenes deben cumplir con dos requisitos que, a su vez, son poderosos
predictores del rendimiento dentro de la Universidad: provenir de un colegio seleccionado y
obtener una nota mayor o igual a 15 al promediar sus calificaciones de 1 a 4 de secundaria.
La evaluacin ITS es ms sencilla que otras modalidades, ya que consiste nicamente en rendir la
prueba de ingreso y presentarse a una entrevista personal. Luego de eso, tienen el ingreso directo
a los Estudios Generales Ciencias, Estudios Generales Letras y Facultad de Educacin. En el caso
de la Facultad de Arquitectura y Urbanismo, compiten por vacantes, y, en el caso de Arte y Artes
Escnicas, deben concursar rindiendo las evaluaciones artsticas.
Dado que la implementacin del nuevo sistema de admisin requiere de un continuo seguimiento y anlisis
de los resultados para asegurar que el trabajo de evaluacin para la admisin responda a las necesidades de
las unidades acadmicas, se propone la creacin de un Comit de Admisin y, como parte del mismo, un
equipo de apoyo tcnico.
1. Mantenerse informado de los resultados de los procesos de evaluacin para la admisin para proponer
mejoras y modificaciones
2. Aprobar los lineamientos, polticas y cambios en el sistema de admisin que deben ser elevados a Consejo
Universitario para su aprobacin final
3. Aprobar el nmero de vacantes que debe ser elevado a Consejo Universitario para su aprobacin final
El Comit de Admisin estar conformado por los decanos de las siguientes unidades:
Adems, sern parte de este comit la Direccin de Asuntos Acadmicos y la Direccin de la Oficina Central
de Admisin e Informes.
El Comit de Admisin sesionar al menos dos veces al ao. El tiempo de permanencia en el comit est
definido por la duracin de cada integrante en el cargo.
El equipo de apoyo tcnico ser una instancia que apoya al rea tcnica de la Oficina Central de Admisin e
Informes, (la seccin de Pruebas.) Tendr las siguientes funciones:
1. Estar informado de los resultados de los estudios tcnicos sobre las pruebas
2. Proponer mejoras tcnicas en el proceso de elaboracin de las pruebas
3. Proponer criterios para realizar los estudios que sean necesarios para asegurar la calidad de las pruebas de
admisin
Los miembros de este equipo de apoyo tcnico debern ser propuestos por la Oficina Central de Admisin
e Informes a Consejo Universitario. Los integrantes sern docentes de la Universidad expertos en algunos de
estos campos: Estadstica, Medicin Educativa, Matemtica, Redaccin y Lectura.
El equipo de apoyo tcnico sesionar al menos cuatro veces al ao. El tiempo de permanencia en este equipo
es de tres aos.
ASESORES NACIONALES
Dra. Sheyla Blumen Cohen (Psicloga educacional experta en Talento Intelectual, docente del Departamento
de Psicologa)
Ing. Jorge Bazn Guzmn (Docente del Departamento de Ciencias-Seccin Matemticas, coordinador de la
Maestra en Estadstica)
ASESORES INTERNACIONALES
Mag. Ronald Knust (Consultor - Maestra en Ciencias de Educacin con estudios de posgrado en Asesora en
Desarrollo Institucional y Tecnologa Educativa; experto en Tecnologa Educativa, Holanda)
Dr. Agustn Tristn (Director del Instituto de Evaluacin e Ingeniera Avanzada S.C., consultor internacional
especializado en medicin educativa, Mxico)
Prof. Carlos Garatea Grau (Docente del Departamento de Humanidades-Seccin Lingstica y Literatura)
Prof. Estrella Guerra Caminit (Docente del Departamento de Humanidades-Seccin Lingstica y Literatura,
secretaria acadmica de EE.GG.LL.)
Prof. Cecilia Monteagudo de Bacigalupo (Docente del Departamento de Humanidades-Seccin Filosofa)
Prof. Jorge Quiroz Gonzales (Docente del Departamento de Ciencias-Seccin Fsica, director de Ciclo Inicial)
Prof. Claudia Rosas Lauro (Docente del Departamento de Humanidades-Seccin Historia)
Prof. Ana Sabogal Dunin Borkowski (Coordinadora del Instituto de Estudios Ambientales)
Prof. Jorge Valdez Morgan (Docente del Departamento de Humanidades-Seccin Historia)
ANEXO B1
AUTORIDADES DE LAS UNIDADES CONSULTADAS
INGLS
Incluir el Ingls en la
EE.GG.CC.
admisin es discriminatorio. 1.La evaluacin del ingls como 1. Evaluar ingls como parte de las
competencia de entrada es pruebas para admitidos. De esta manera,
Esta competencia pertenece percibida negativamente por las se contina ofreciendo el beneficio de
al perfil de egreso. Debera grandes unidades. la acreditacin, se informa al admitido
evaluarse, pero solo con acerca de su desempeo en el rea y se
EE.GG.LL. fines diagnsticos, ya que promueve el aprendizaje del idioma con
perjudica a los alumnos con miras al examen de cambio de cdigo.
menos recursos.
Preocupa la forma de
ARTE reportar a los no admitidos
cuya redaccin no sea
calificada.
10
Se presentan solo los aspectos en los que hubo alguna crtica o sugerencia
El tiempo por pregunta (1.5 5. Se percibe como insuficiente 5. Reducir el nmero de preguntas de la
minutos.) es muy corto. el tiempo por pregunta de prueba propuesta en la versin inicial y
No es conveniente dividir el Matemtica. sustentar empricamente el tiempo por
rea en dos secciones como pregunta.
EE.GG.CC. se seal en la propuesta 6. EE.GG.CC. y Arte
inicial. consideran conveniente evaluar 6. Siendo Arquitectura el destinatario
Podra ser conveniente la habilidad espacial de sus principal de la evaluacin de la habilidad
evaluar la habilidad espacial postulantes. Sin embargo, espacial y considerando el costo que
de los postulantes de Arquitectura lo considera requiere para la Oca desarrollar un
EE.GG.CC. contraproducente. banco de preguntas de un rea nunca
antes evaluada, no incluir la evaluacin
7. Tanto las unidades de esta habilidad.
No es necesario ni
acadmicas como los
conveniente evaluar la
ARQUITECTURA potenciales postulantes 7. Evaluar Matemtica en un solo
habilidad espacial de los
Y URBANISMO consideran contraproducente bloque.
postulantes a Arquitectura y
separar el bloque de
Urbanismo.
Matemticas en dos partes.
El tiempo por pregunta (1.5
minutos) es muy corto.
El nmero de preguntas de
nivel 3 es excesivo para los
postulantes a Letras, Arte
y Educacin, tomando en
cuenta el tiempo.
ARTE La separacin de las
preguntas de una misma
rea en dos secciones
como se seala en la
propuesta inicial es
innecesaria.
Debe evaluarse la habilidad
espacial de los postulantes a
EE.GG.CC. y Arte.
Podra haber colegios que 8. La manipulacin de las notas 8. Utilizar el promedio de notas sin
EE.GG.CC. bonifiquen a sus alumnos. escolares por parte de un modificarlo porque, de hacerlo, podra
grupo de colegios es percibida haber problemas legales.
como un riesgo potencial.
El falseamiento de las notas
por parte de los colegios
EE.GG.LL. preuniversitarios puede ser
un peligro. Es preferible usar
el orden de mrito.
Preocupa la posibilidad
de que algunos colegios
ARTE
privilegien a sus alumnos
con buenas notas.
La prueba resulta muy 11. La extensin de la prueba 11. Reducir la extensin de la prueba.
larga. Preocupa que el es vista como excesiva por
EE.GG.CC. rendimiento del alumno las unidades y los potenciales
se vea afectado por el postulantes.
cansancio.
REPORTE DE RESULTADOS
El reporte del alumno 12. El reporte del alumno 12. Las unidades no solo recibirn un
debera formar parte de podra ser mejor aprovechado. consolidado del nivel de sus admitidos,
su expediente virtual, para sino que tambin tendrn acceso a los
que la Unidad y el profesor 13. Los potenciales postulantes reportes individuales de los alumnos
EE.GG.CC. tengan acceso a l. perciben el reporte como muy
Evaluar la conveniencia de largo. 13. Hacer un reporte ms breve y visual.
una publicacin parcial de
resultados.
El reporte es percibido
ESTUDIO DE
como muy largo y con
MERCADO
mucho floro.
Conviene evaluar cultura 14. Los postulantes ITS que 14. Mantener la evaluacin ITS con una
EE.GG.CC. general. son buenos alumnos a los prueba de lectura y Redaccin, y una
que nos interesa atraer entrevista personal.
Es necesario definir las evalan negativamente las
funciones del Comit de modificaciones al sistema. 15. Solicitar la creacin del Comit de
Admisin. Admisin e iniciar sus actividades a la
Se debe incluir 15. Es necesario definir las brevedad.
EE.GG.LL.
conocimientos dentro del funciones del Comit de
perfil de ingreso. Admisin y su reglamento.
Debera privilegiarse la
calidad acadmica de
ARQUITECTURA
los admitidos sobre las
Y URBANISMO
necesidades econmicas de
la Universidad (vacantes).
ANEXO C
CRITERIOS E INSTRUMENTOS DE EVALUACIN DE LOS PRINCIPALES PROCESOS HASTA EL 2008
Nivel Habilidad
1. Lectura 1.2. Reconoce ideas que han sido expresadas de modo diferente de como fueron
comprensiva creadas: uso de la parfrasis.
2.1. Infiere el significado de conceptos o palabras por el uso que de ellos se hace en
un contexto determinado.
2. Lectura 2.2. Identifica la intencin comunicativa del autor del texto.
interpretativa
2.3. Reconoce casos particulares a partir de generalizaciones propuestas (deduccin).
2.4. Extrae conclusiones o generalizaciones a partir de casos particulares (induccin).
2.5. Transfiere los contenidos o conceptos procesados en el texto a una situacin nueva.
3. Lectura crtica 3.1. Realiza juicios acerca de la pertinencia, adecuacin, justificacin o forma de expresin
de las ideas contenidas en un texto.
ANEXO D2
COMPETENCIA DE REDACCIN: NIVELES Y HABILIDADES
Nivel Habilidad
3.1. Selecciona informacin pertinente para lograr cohesin temtica de las ideas contenidas en
3. Contenido y un texto.
organizacin
lgica de ideas
3.2. Organiza informacin que respeta una jerarqua u orden lgico de ideas contenidas en un
texto.
6. Funcin cuadrtica 6.2 Dada una relacin cuadrtica entre dos variables expresada
grficamente o a travs de una tabla, encontrar la expresin
algebraica asociada.
1. Rectas y ngulos
1.2 Calcular ngulos en el sistema sexagesimal usando
propiedades de ngulos adyacentes, opuestos, alternos, suma
de ngulos en un tringulo y ngulos exteriores.
4. Teorema de Pitgoras 4.2 Calcular las longitudes de los lados en tringulo rectngulo
empleando propiedades que relacionan la razn entre
las longitudes de los segmentos en los que queda dividida la
hipotenusa al trazar la altura.
4. Inecuaciones cuadrticas
4.1 Resolver inecuaciones cuadrticas en una variable.
con una variable.
1. ngulos en los sistemas 1.1 Convertir ngulos del sistema radial en al sexagesimal y
radial y sexagesimal viceversa.
2. Sistema Internacional 2.1 Realizar conversiones entre los mltiplos y submltiplos de las
de Unidades. Unidades unidades de longitud, superficie y capacidad en el SI.
de longitud, superficie y
Nmeros y capacidad
operaciones
3. Sucesiones 3.1 Dada una secuencia grfica o numrica, identificar patrones y
determinar las caractersticas del n-simo trmino.
2.8. Resolver problemas que involucren el uso de grficos x-t, v-t y a-t.
4. Energa y trabajo 4.5. Resolver problemas que involucren la aplicacin de los conceptos de
8 preguntas
energa cintica, potencial gravitatoria o mecnica.
Estudio estadstico para determinar el puntaje mnimo ideal en Matemtica para ser admitido a
Ciencias por ITS y para la exoneracin del curso de nivelacin en Matemtica ao 2014
Ing. Susy Dumett Valdivia
Introduccin
Si bien el rendimiento acumulado de los admitidos a Ciencias por ITS en los tres primeros aos de estudios ha sido
bueno para los admitidos hasta el 2010-1, en los dos ltimos estudios de rendimiento de apoyo a la definicin de
vacantes, se ha observado que el rendimiento global en el primer ao de los admitidos 2011-1 y 2012-1 no ha sido
bueno.
Con el fin de seguir asegurando la buena calidad de los admitidos de este grupo, se ha subido el promedio escolar
mnimo exigido para la admisin desde el 2013-1 y, adicionalmente, se desea explorar la opcin de aumentar la
selectividad del proceso a travs del establecimiento de un puntaje mnimo en Matemtica para la admisin, as
como revisar el puntaje de corte vigente para ser eximido del curso de nivelacin en Matemtica.
Objetivos
Determinar el puntaje mnimo que se debera exigir en la parte Matemtica de la prueba para ser admitido a
Estudios Generales Ciencias por ITS, que permitira que tengan un mejor pronstico de rendimiento acadmico
global y de rendimiento en el curso de nivelacin de matemtica. Especficamente, se deseara lograr que, en
promedio, el % de aprobacin de crditos acumulado en el primer ao de estudios de este grupo sea mayor o
igual a 80% y que el % de aprobados en el curso de nivelacin en matemtica sea mayor o igual a 75%.
Determinar el puntaje mnimo que se debera exigir en la parte Matemtica de la prueba para eximir a los
admitidos a Estudios Generales Ciencias por ITS del curso de nivelacin en Matemtica, que permitira un mejor
pronstico de rendimiento en los cursos de matemtica del primer ciclo del plan de estudios. Especficamente,
se deseara lograr que en promedio el % de aprobados de este grupo en estos cursos sea mayor o igual a 75%.
Poblaciones de estudio
Admitidos por ITS a Estudios Generales Ciencias 2012-1 que se matricularon en el semestre 2012-1. Se ha escogido
esta nica poblacin porque, a partir del 2012-1, se quit la penalizacin de los puntajes y, por tanto, es el proceso
ms parecido a los del 2013-1 y siguientes.
Variables de estudio
Anlisis realizados
Para determinar el puntaje mnimo en Matemtica para ser admitido a Ciencias por ITS
Para determinar el puntaje mnimo en Matemtica para ser eximido del curso de nivelacin
rbol de clasificacin de % de aprobados en cada uno de los dos cursos de Matemtica del primer ciclo del Plan
de Estudios (MAT117 y MAT119) considerando como variables predictoras al puntaje en matemtica en la prueba
de admisin y a la condicin de haber sido eximido del curso de nivelacin por tener Diploma de Bachillerato,
de ser necesario.
Distribucin de admitidos a Ciencias 2012-1 y 2013-1 por ITS por condicin de haber superado el puntaje
mnimo sugerido (440).
Promedio de % de crditos aprobados acumulado de los admitidos a Ciencias 2012-1 que superaron el puntaje
mnimo sugerido (440).
% de los admitidos a Ciencias 2012-1 por ITS que superaron el puntaje mnimo sugerido (440), que aprobaron
el curso de nivelacin en matemtica (MAT007).
Para validar la bondad del puntaje de corte sugerido para ser eximido del curso de nivelacin en Matemtica
% de los admitidos a Ciencias 2012-1 por ITS que superaron el puntaje mnimo sugerido (530), que aprobaron
cada uno de los cursos de matemtica del primer ciclo del Plan de Estudios (MAT117 y MAT119).
Nodo 0
Media 69,454
Desv. tpica 30,149
n 447
% 100,0
Pronosticado 69,454
Nodo 0
Media 69,447
Desv. tpica 30,154
n 445
% 100,0
Pronosticado 69,447
aprob?
Nodo 0
Categora % n
No 52,4 215
S 47,6 195
aprob?
Nodo 0
Categora % n
No No 52,4 215
S S 47,6 195
<=509,000 >509,000
Nodo 1 Nodo 2
Categora % n Categora % n
No 30 3 No 0,0 0
S 70 7 S 100,0 18
Sugerencia : Exigir el mismo puntaje de corte que en el proceso anterior y advertir a los que solicitan ser eximidos
por tener Diploma de Bachillerato que si no cumplen con el puntaje de corte, no se puede asegurar que aprobarn
este curso.
rbol de clasificacin de % de aprobados en el curso de Matemtica del primer ciclo del Plan de Estudios
(MAT119- Clculo 1) considerando como variable predictora a la condicin de haber sido eximido del curso de
nivelacin por tener Diploma de Bachillerato (casos especiales).
Especial?
Valor P corregido= 0,003,chi
cuadrado= 8,763 df=1
S No
Nodo 1 Nodo 2
Categora % n Categora % n
No 80,0 8 No 22,2 4
S 20,0 2 S 77,8 14
Total 35,7 10 Total 64,3 18
Sugerencia: Exigir el mismo puntaje de corte que en el proceso anterior y advertir a los que solicitan ser eximidos
por tener Diploma de Bachillerato que si no cumplen con el puntaje de corte, no se puede asegurar que aprobarn
este curso.
rbol de clasificacin de % de aprobados en el curso de Matemtica del primer ciclo del Plan de Estudios
(MAT119 - Clculo 1) considerando como variable predictora al puntaje en Matemtica (excluyendo del anlisis
a los casos especiales que fueron eximidos por tener Diploma de Bachillerato).
Total 100,0 18
Nodo 1 Nodo 2
Categora % n Categora % n
No 50,0 2 No 14,3 2
S 50,0 2 S 85,7 12
Total 22,2 10 Total 77,8 14
Sugerencia: Exigir el mismo puntaje de corte que el proceso anterior o subirlo a 540 y advertir a los que solicitan
ser eximidos por tener Diploma de Bachillerato que si no cumplen con el puntaje de corte, no se puede asegurar
que aprobarn este curso del primer ciclo del Plan de Estudios.
Distribucin de admitidos a Ciencias 2012-1 y 2013-1 por ITS por condicin de haber superado el puntaje
mnimo sugerido (440).
2012-1 2013-1
N % N %
Puntaje Matemtica (sin penalizar) <440 348 63% 215 43%
Puntaje Matemtica (sin penalizar) >=440 203 37% 286 57%
Se observa que hubiera sido admitido aproximadamente el 37% de los admitidos del 2012-1 y el 57% de los
admitidos en el 2013-1.
Promedio de % de crditos aprobados acumulado de los admitidos a Ciencias 2012-1 que superaron el puntaje
mnimo sugerido (440).
Este % result igual a 84%.
% de los admitidos a Ciencias 2012-1 por ITS que superaron el puntaje mnimo sugerido (440), que aprobaron
el curso de nivelacin en Matemtica (MAT007).
Este % result igual a 76%.
% de los admitidos a Ciencias 2012-1 por ITS que superaron realmente el puntaje mnimo sugerido (530), que
aprobaron cada uno de los cursos de matemtica del primer ciclo del Plan de Estudios:
El % de aprobacin del curso MAT117 de los que superaron realmente el puntaje mnimo (530) fue igual a
100%.
El % de aprobacin del curso MAT119 de los que superaron realmente el puntaje mnimo (530) fue igual
a 78%.
CONCLUSIONES
El mayor problema con los admitidos a Ciencias 2012-1 por ITS fue el bajo % de aprobacin del curso de
nivelacin de los que tenan puntajes bajos en la parte Matemtica de la prueba. Si se exigiera un puntaje en
Matemtica mayor o igual a 440, se lograra que, en promedio, el % de aprobacin de crditos acumulado en el
primer ao de estudios de este grupo sea aproximadamente igual a 84% y que el % de aprobados en el curso de
nivelacin en Matemtica sea aproximadamente 76%.
El puntaje vigente de corte de nivelacin en Matemtica fue adecuado para los de ITS, ya que los que superaron
ese puntaje (530) tuvieron buen un rendimiento en los cursos del primer ciclo, mejor que los de otras modalidades.
Si se continuara con ese mismo puntaje de corte para la nivelacin, y solo quienes superaran ese puntaje llevaran
los cursos de Matemtica del primer ciclo, entonces, se lograra que el % de aprobacin en el curso MAT117 sea
aproximadamente igual a 100% y que el % de aprobacin en el curso MAT119 sea aproximadamente igual a
78%.
En cambio, los que no superaron el puntaje mnimo vigente (530) y llevaron el curso MAT119 directamente - por
haber sido eximidos del curso de nivelacin por tener Diploma de Bachillerato- tuvieron bajo rendimiento en
dicho curso, pero dado que fueron pocos alumnos en comparacin a todos los admitidos por ITS, no afectaron
significativamente el rendimiento promedio global de todo el grupo de ITS.
Dejar el puntaje de corte para nivelacin en Matemtica en 530 o subirlo a 540, pero advertir a quienes tienen
puntajes menores a 530 y solicitan ser eximidos por tener Diploma de Bachillerato que no se puede asegurar que
aprobarn el curso MAT119.
Dejar el puntaje de corte para nivelacin en Matemtica en 530 o subirlo a 540, pero advertir a quienes tienen
puntajes menores a 530 y solicitan ser eximidos por tener Diploma de Bachillerato que no se puede asegurar que
aprobarn el curso MAT119.
Hacer un estudio para determinar el puntaje de corte para nivelacin en Matemticas para las dems modalidades,
ya que los puntajes sin penalizar no son equivalentes a los puntajes penalizados y al explorar la informacin de las
dems modalidades se puede adelantar que ser necesario aumentarlo en 30 puntos o ms.
ANEXO F
Eliminacin de la penalizacin por respuesta incorrecta en las pruebas de admisin a la PUCP
Ing. Alberto Torreblanca Villavicencio
El puntaje negativo (penalizacin) es incluido en las pruebas de la Pontificia Universidad Catlica del Per para
disuadir de la adivinacin en los concursos por vacantes. Actualmente, se resta un punto del puntaje bruto por
cada tres respuestas incorrectas. Es el puntaje bruto penalizado el que se transforma en una escala entre cero y mil
puntos.
Sin embargo, hay que recordar que desde el 2009 nuestro sistema de evaluacin no se limita a asignar una
vacante en funcin al orden de mrito, sino que busca informar con precisin sobre el nivel de las competencias y
conocimientos bsicos de los admitidos, a fin de determinar si requieren o no ser nivelados. Dentro de este
modelo, la penalizacin est trayendo ms dificultades que beneficios. Es por ello que proponemos eliminar la
penalizacin de las pruebas de admisin.
Los problemas de penalizar
La penalizacin acarrea, fundamentalmente, dos problemas: agrega error a la medicin y castiga de manera poco
equitativa, lo que perjudica a los que saben ms.
Toda evaluacin tiene un error de medida. En los concursos por vacantes, las consecuencias del error de medida
afectan principalmente a los que luchan por alcanzar las ltimas vacantes, ya que pocas preguntas definen su admisin.
Cuando se trata de asignar un puntaje que determina si el admitido est o no aprobado en una competencia, la
penalizacin afecta a todos. Actualmente, podemos asegurar que el postulante tiene una habilidad superior o inferior
al punto de aprobacin con un error mximo del 5%. Con la penalizacin, se agrega distorsin a la medicin.
El riesgo que corremos es que los puntajes penalizados obtenidos no reflejen el verdadero desempeo de los
estudiantes; en otras palabras, que se est realizando una medicin poco realista de su verdadera competencia. Esta
es la razn por la cual la mayora de evaluaciones internacionales no utiliza el puntaje negativo. En cuanto al Per,
la penalizacin se utiliza casi exclusivamente en las universidades nacionales.
2. La penalizacin no es equitativa
En el modelo de medicin que utilizamos actualmente, la transformacin de puntaje bruto a puntaje equivalente no
es lineal, sino que sigue una curva caracterstica como la que se muestra en el grfico 1.
10
Se resta 1 punto
por preguntas
Alumno 2
equivocadas
8
Puntaje
bruto
6
Se resta 1 punto
por preguntas Alumno 1
equivocadas
4
0
0 2 4 6 8 10
Puntaje transformado
Este ejemplo nos permite ver cmo la penalizacin no es igual de justa en todo lo largo de la escala, sino que afecta
ms a los alumnos de los grupos superior e inferior. El caso de los alumnos del grupo inferior no es relevante, ya
que probablemente no sern admitidos. En cambio, en el grupo superior, se estara afectando el orden de mrito.
Tambin podra suceder que se enviara a nivelacin a un alumno que no lo necesita. Asimismo, como el nmero de
aciertos se relaciona con la dificultad de las preguntas (quien responde ms preguntas, probablemente ha resuelto
bien las ms fciles y est abordando las ms difciles), a los evaluados ms hbiles se les penaliza por equivocarse
en preguntas complejas, mientras que a los menos hbiles se les penaliza por equivocarse en preguntas simples.
Es razonable suponer que eliminar la penalizacin aumentar la adivinacin en la prueba por parte de los alumnos,
comportamiento que adems puede ser fomentado por los centros de preparacin preuniversitaria. Podra darse el
caso de que esto, tambin, le reste precisin a la medicin.
Sin embargo, es necesario distinguir la adivinacin informada de la respuesta al azar. La posibilidad de adivinacin
a ciegas (respuesta al azar) es de un 25% en preguntas de cuatro alternativas como las que utilizamos en nuestras
pruebas de admisin. Si la adivinacin es consciente e inteligente estos porcentajes se pueden ampliar notoriamente.
Por ejemplo, descartando una alternativa poco o nada interesante se ampla la probabilidad de adivinacin en
preguntas de cuatro opciones a 33% y si se descartan dos alternativas a un 50% .
Cmo podra la respuesta al azar afectar los resultados de los postulantes? La Tabla 1 puede darnos algunos
elementos de juicio.
1 4 25%
2 16 6,25%
3 64 1,56%
4 256 0,391%
5 1024 0,097%
6 4096 0,024%
7 16384 0,006%
8 65536 0,002%
9 262144 0,000%
10 1048576 0,000%
Como puede verse, la probabilidad de que un postulante acierte ms de 4 preguntas totalmente al azar es bastante
pequea. Desde luego, hay que diferenciar la respuesta al azar de la adivinacin informada, pero esta ltima podra
considerarse como parte de la medicin.
De otro lado, hay que considerar que los evaluados tienen un tiempo limitado para resolver la prueba (en promedio,
1.5 minutos por pregunta). La respuesta de adivinacin al azar suele iniciarse cuando el evaluado ha terminado de
responder todo lo que sabe. Podemos suponer por esto, y a la luz de la literatura, que son los que menos saben (a
los que les sobra tiempo) quienes ms adivinan.
Para efectos de la admisin, esto no representara un problema, ya que por adivinar algunas respuestas los postulantes
que no saben seguirn lejos de las vacantes. La probabilidad de ser admitido por puro azar es casi cero (Tabla 1).
El problema se dara en la franja donde se disputa el ingreso a la universidad, donde adivinar dos o tres respuestas
s causa una diferencia en el resultado. Este es un aspecto que tendr que tomarse en cuenta al tomar la decisin.
En cuanto a las nivelaciones, la medicin no se afecta en demasa, debido a que principalmente los alumnos deben
demostrar un nivel de habilidad que difcilmente se alcanza adivinando, como puede verse en el grfico 2. Es posible
que un grupo de admitidos llegue a algunas respuestas correctas adivinando de manera inteligente. Que estas
respuestas los ayuden a pasar el nivel se puede considerar parte la evaluacin.
E.Talento 2010-1
y Contabilidad)
400
Corte de aprobacin
#postulantes
EEGG Ciencias
300
100 200
0
Finalmente, eliminar la penalizacin permitir a los mejores alumnos realizar un mayor esfuerzo, respondiendo ms
preguntas correctamente (sin inhibirse por temor a la penalizacin) y realizando de manera informada el anlisis de
otras preguntas para obtener respuestas correctas, evidenciando su capacidad.
Conclusiones
Existen argumentos a favor y en contra de eliminar la penalizacin, tanto tcnicos como polticos. Desde el punto
de vista de la medicin, consideramos que la balanza se inclina a favor de despenalizar.
De decidirse eliminar el puntaje negativo de las pruebas de admisin, recomendamos evaluar seguir el mismo
camino con las pruebas para admitidos. Si bien estas pruebas, hasta el momento, no utilizan el modelo de
medicin que hace que la penalizacin no sea equitativa, convendra (de cara al admitido) que la Universidad
tuviera una poltica uniforme en lo que se refiere a sus evaluaciones.
i
Dentro de las pruebas que no consideran el puntaje negativo se encuentran algunas muy respetadas como PISA
(Programme for International Student Assessment), GMAT (Graduate Management Admission Test), TIMSS (Trends
in International Mathematics and Science Study), y NAEP (National Assessment of Educational Progress). Estas
pruebas son utilizadas a nivel internacional y sirven como insumos para tomar decisiones educativas mayores. Otras
pruebas, como el SAT (Scholastic Aptitude Test), s utilizan puntaje penalizado.
ii
Si bien la mayora de universidades privadas no penaliza el puntaje, hay que considerar que la necesidad de admitir
estudiantes las ha ido disuadiendo de aplicar exmenes de seleccin, recurriendo a admisiones directas u otros
modelos, como lo son entrevistas o la admisin por buen desempeo escolar. Los tradicionales exmenes de
admisin de las universidades nacionales como San Marcos, UNI, Federico Villareal siguen utilizando la penalizacin
por respuestas incorrectas.
iii
En la elaboracin y diseo de las preguntas, se evita dar pistas que lleven a los postulantes a descartar alternativas
sin tener ningn conocimiento.