INSTITUTO COLOMBIANO PARA EL FOMENTO

DE LA EDUCACIN SUPERIOR
ICFES
SUBDIRECCIN ACADMICA
GRUPO DE EVALUACIN DE
LA EDUCACIN BSICA Y MEDIA
CONVENIO ICFES - UNIVERSIDAD NACIONAL
IDIOMAS EXTRANJEROS - LENGUA INGLESA
INFORME DE RESULTADOS 2006
Autores:
Moravia Elizabeth Gonzlez P.
(ICFES)
Melba Libia Crdenas B. y Mara Claudia Nieto C.
(Universidad Nacional de Colombia),
Carlos Rico T.
(Pontificia Universidad Javeriana),
Luz Adriana Trejos
(Profesional de apoyo)
Bogot, Mayo 2007
ANLISIS DE RESULTADOS 2006
Grupo de Evaluacin de la Educacin Superior - ICFES
Claudia Lucia Senz Blanco
Grupo de Evaluacin de la Educacin Bsica y Media - ICFES
Flor Patricia Pedraza Daza
ICFES
ISSN: 1909-3993
Diseo y diagramacin:
Secretara General, Grupo de Procesos Editoriales - ICFES
INSTITUTO COLOMBIANO PARA EL FOMENTO DE
LA EDUCACIN SUPERIOR
Director General
0|RE6T0RA CENERAL
MARGARITA PEA BORRERO
8E6RETAR|0 CENERAL
GENISBERTO LPEZ CONDE
8U0|RE6T0R 0E L0C|8T|6A
FRANCISCO ERNESTO REYES JIMNEZ
8U0|RE6T0R A6A0EH|60
JULIN PATRICIO MARIO vON hILDEBRAND
0F|6|NA A8E80RA 0E PLANEA6|0N
CLAUDIA NATALIA MUJICA CUELLAR
0F|6|NA A8E80RA JUR|0|6A
MARThA ISABEL DUARTE DE BUChhEIM
0F|6|NA 0E 60NTR0L |NTERN0
LUIS ALBERTO CAMELO CRISTANChO
ALVARO URIBE VLEZ
Presidente de la Repblica
FRAncIscO sAntOs cALdERn
Vicepresidente de la Repblica
cEcILIA MARA VLEZ WHItE
Ministra de Educacin Nacional
4
ANLISIS DE RESULTADOS DE
LAS PRUEBAS DE ESTADO
Tabla de Contenidos

Pg.
Introduccin 5
Aspectos evaluativos 2006 5
Anlisis de los desempeos de los estudiantes por rango 7
Anlisis cualitativo de preguntas 7
Conclusiones 18
Recomendaciones y proyecciones para 2007 20
Referencias 21

5
ANLISIS DE RESULTADOS DE
LAS PRUEBAS DE ESTADO
Introduccin
El presente documento tiene como propsito presentar un anlisis cualitativo de preguntas incluidas en los exmenes
de estado de 2006 que sirve como insumo para el aprovechamiento de los resultados obtenidos en dichas pruebas y su
relacin con las prcticas en el aula. Para ello, en primer lugar se describe la estructura de prueba de ingls y su proceso
de construccin durante el ao 2006. En segundo lugar, se describe el desempeo de la poblacin por porcentaje segn
los rangos de puntaje de la prueba. Posteriormente, se analiza un conjunto de preguntas de los Exmenes de Estado
2006, teniendo en cuenta su difcultad dentro de la prueba y las posibles causas para su comportamiento en la misma.
Finalmente, encontramos una seccin de conclusiones y recomendaciones
En el ao 2004 se inici el trabajo por Colegiaturas, en el convenio frmado entre el ICFES y la Universidad Nacional de
Colombia. En la Colegiatura del rea de Idiomas participan docentes de diversas universidades colombianas y profesores
de ingls de educacin bsica y media. sta se ha centrado en la revisin del marco de referencia para la evaluacin del
componente de ingls del Examen de Estado y en el diseo de las nuevas pruebas aplicadas en 2005 y 2006.
El Marco Terico de la Prueba de Idiomas Ingls, elaborado por la Colegiatura sienta sus bases a partir de la resolucin
2343 de 1996 sobre Indicadores de Logros, los Lineamientos Curriculares para Lengua Extranjera de 1999 y los Estndares
Bsicos de Competencias en Lenguas Extranjeras: ingls, 2006, documentos emanados por el Ministerio de Educacin
Nacional. Los referentes tericos tienen tambin en cuenta que en los ltimos aos se ha promovido una visin comuni-
cativa para la enseanza de lenguas extranjeras y en consecuencia para la evaluacin de las competencias: organizativa,
pragmtica y estratgica.
Los Lineamientos Curriculares (MEN, 1999) resaltan los benefcios del aprendizaje de lenguas extranjeras, sin embargo,
debido a la fuerte inclinacin hacia la enseanza del ingls en la mayora de las instituciones de educacin bsica y media
del pas, el ICFES determin que la Colegiatura se concentrara en el marco conceptual de Idiomas Extranjeros en general,
y en el diseo de las pruebas de ingls en particular.
Cabe anotar que las pruebas administradas en 2006 se inscriben en el marco de referencia revisado por la Colegiatura
ICFES - Universidad Nacional de Colombia durante 2005 y se aproxima al sistema de bandas (A1, A2, B1) adoptado por
el Ministerio de Educacin Nacional en su poltica de internacionalizacin.
En el momento de la elaboracin de las pruebas de 2006 se parti de los Estndares europeos, marco adoptado por el
Ministerio de Educacin Nacional, puesto que a la fecha no se haba publicado el documento ofcial del MEN, segn el cual
se adaptan los estndares del rea de Ingls de Educacin Bsica y Media.
A continuacin describimos la prueba a partir de las competencias y acciones.

Aspectos evaluativos 2006
En la prueba de ingls de 2006, adems de tener en cuenta las bandas del Marco Comn Europeo, se realizaron cambios
que se ajustan ms al concepto de competencias bsicas adoptado por el ICFES desde el ao 1999 hasta la fecha, en
lo que respecta a la inclusin de las competencias interpretativa, argumentativa y propositiva. En este orden de ideas, la
estructura de esta nueva prueba est constituida por los siguientes aspectos: ejes curriculares, competencias, acciones
y niveles.

ANLISIS DE RESULTADOS DE
LAS PRUEBAS DE ESTADO
En primer lugar, escogimos 3 ejes curriculares, a saber: 1. la comunicacin social y personal, 2. culturas y comunidades y
3. conexiones con otras reas, sintetizando los 5 ejes curriculares propuestos en los Lineamientos Curriculares de Lenguas
Extranjeras, Ingls (MEN, 1999). Estos ejes curriculares se constituyen en las excusas a partir de las cuales se formulan
las preguntas, es decir, cada texto, tanto escrito como grfco, que conforma la prueba pertenece a uno de estos 3 ejes en
la medida que ofrecen situaciones propias de cada uno de los mismos.
En segundo lugar, como competencias especfcas en el aprendizaje de las lenguas extranjeras mantenemos las compe-
tencias organizativa y pragmtica de Bachman (1990). As mismo, como se mencion anteriormente, se tuvo en cuenta el
marco de las competencias bsicas generales de interpretacin, argumentacin y proposicin, pero como acciones que
tienen lugar dentro de la competencia comunicativa. Cada una de las acciones es evaluada con diferentes tems, con niveles
progresivos de difcultad alto, medio y bajo- correspondientes a las bandas A1, A2 y B1 propuestas en los Estndares
Bsicos de Competencia en Lengua Extranjera: Ingls (MEN, 2006) y equivalentes a los niveles novato, intermedio y
avanzado del Consejo Americano para la enseanza de lenguas extranjeras.
En cuanto a las preguntas, stas estn encaminadas a dar cuenta de las competencias antes descritas de una manera
integrada, es decir, no es necesario contar con preguntas que de manera explcita indaguen por la estructura de la lengua
per se. Por el contrario, todo est centrado en contextos comunicativos reales en los cuales la estructura sea evaluada de
manera indirecta.
Por tanto, se busca ir ms all de la evaluacin de elementos discretos en el aprendizaje de la lengua extranjera, tales
como la gramtica y el vocabulario, y privilegiar la evaluacin de acciones tales como la interpretacin, la argumentacin,
y la proposicin, que permiten evidenciar verdaderamente la competencia comunicativa de los estudiantes. A su vez, esas
acciones se constituyen en modos de participacin y construccin del conocimiento de la sociedad y la cultura.
Aunque estas dos ltimas acciones son evaluadas indirectamente, dada la naturaleza cerrada de la prueba ICFES, stas
permiten evidenciar que el aprendizaje del ingls es una herramienta que sirve no slo para interpretar los sentidos de los
textos o las interacciones sociales, sino que a travs de l se puede argumentar, se pueden sustentar posiciones desde
el texto, desde el lector, desde el discurso, situndose en el contexto de la democracia participativa, del reconocimiento
del otro y de las diferencias que puedan surgir de la interaccin entre los sujetos. Igualmente, el idioma extranjero es un
instrumento que nos es til para analizar crticamente situaciones planteadas a travs del discurso y proponer soluciones
a los problemas que se pueden derivar de dichas situaciones, as sea de manera indirecta.
Dadas las limitaciones presupuestales del ICFES para administrar una prueba de tipo abierto, sea escrita u oral, nuestra
evaluacin de las acciones argumentativa y propositiva en esta prueba busca emular actividades que se deben llevar a
cabo en nuestras aulas y que normalmente se ejecutan de manera verbal, a saber: discusiones grupales guiadas, debates,
bsqueda grupal de soluciones a problemas hipotticos o reales.
Esta forma de evaluar procesos de comunicacin verbal, mediante la evaluacin de las acciones interpretativa, argumentativa
y propositiva, y a travs de las cuales se evidencian de manera integral el desarrollo de las competencias organizativa y
pragmtica, puede llevar a los estudiantes a ver el aprendizaje de una L2, no como aprendizaje puramente memorstico de
reglas gramaticales y vocabulario, sino como un aprendizaje en donde se requiere un anlisis de los textos, las situaciones,
los contextos, las intenciones de los hablantes o escritores, entre otros, y en donde tal anlisis integrado le puede permitir
encontrar, escoger y proponer soluciones viables a problemas reales o hipotticos. De esta manera el aprendiz podra
desarrollar un pensamiento crtico con respecto a lo que lee, a los contextos que envuelven las situaciones comunicativas,
a las intenciones de las personas con quienes interacta; as mismo, podra no slo conocer otras culturas, sino tambin
desarrollar empata por ellas y valoracin de la propia cultura. Se recomienda por tanto, a profesores y estudiantes de L2,
trascender el aprendizaje de los elementos discretos de la lengua, para buscar un aprendizaje ms signifcativo en donde
elementos verbales y no verbales del lenguaje nos permitan construir un conocimiento de la lengua, de la sociedad y de
la cultura propia y extranjera.
7
ANLISIS DE RESULTADOS DE
LAS PRUEBAS DE ESTADO
Otro aspecto a destacar es el carcter indirecto que tiene una prueba como la diseada en el ICFES, ya que si bien, por
razones logsticas, no cuenta con una evaluacin de la habilidad oral por ejemplo, esto no signifca que el estudiante no
deba ser enfrentado a este tipo de prcticas en el aula de clase, pues sin duda la prueba permite evaluar esta habilidad de
una manera indirecta en las preguntas que recrean cualquier tipo de interaccin oral, entre otras.
En el nuevo milenio la prueba de lengua extranjera del Examen de Estado ha de demostrar una evolucin en su concepcin
como en su estructura. La manera de evaluar y el enfoque de enseanza a partir del cual se debe desarrollar la prueba
puede entenderse como una exhibicin de competencias donde los sujetos demuestran sus habilidades de comprensin
de las realidades en las que ponen a interactuar sus conocimientos previos con su habilidad para resolver y comprender
problemas o situaciones reales (Rico, 2004, pg. 133).
A continuacin encontramos el anlisis los desempeos de los estudiantes segn el rango de puntaje.
Anlisis de los desempeos de los estudiantes por rango
Como recordaremos, en las pruebas del Examen de Estado los desempeos de los estudiantes se ubican en tres rangos:
bajo, medio y alto. El rango bajo va de 1 a 30 puntos; el medio de 31 a 70 y el alto de 71 a 100 ms.
En la prueba de marzo se presentaron 61.372 estudiantes. De esa poblacin slo un 6.65 % de los examinados qued
ubicado en un rango bajo. El grueso de la poblacin alcanz el rango medio con 89.13% y slo un 4.22% alcanz un rango
alto. Sin embargo, es importante realizar un anlisis un poco ms detallado del rango medio. Para ello, se podra dividir el
rango medio en medio bajo (31-50) y medio alto (51-70). As, tendramos que un 74.16% de los examinados se encuentra
en un rango medio bajo y slo un 14.97% se ubica en un rango medio alto.
En septiembre por su parte, los resultados son similares al examen anterior. De un total de 413.019 estudiantes que
presentaron la prueba, el 6.24% se ubic en un rango bajo, 92.74% en rango medio y el 1,1% en rango alto. Al subdividir
el rango medio en alto y bajo, tenemos que un 78.34% qued ubicado en un rango medio bajo y un 14.32% en un rango
medio alto.
Por lo anterior, podemos concluir que la mayora de los examinados se encuentra en un nivel medio bajo. Posteriormente se
analizarn algunas de las preguntas, para tratar de determinar qu factores pudieron haber incidido en tales resultados.
A continuacin analizamos una serie de preguntas que representan los tres niveles de difcultad mencionados anterior-
mente.
Anlisis cualitativo de preguntas
A continuacin se presenta un anlisis de preguntas de las aplicaciones de marzo y septiembre de 2006, en el cual se
discuten tems de distinto grado de difcultad (baja, media y alta). El anlisis gira alrededor de las posibles causas por las
cuales las distintas preguntas presentaron dicha difcultad.
Examinemos en primer lugar algunas preguntas de la prueba aplicada en el mes de marzo.
8
ANLISIS DE RESULTADOS DE
LAS PRUEBAS DE ESTADO
1. Pregunta fc||
Competencia: Organizativa
Accin: Interpretativa
Respuesta: C
The description above corresponds to map
A. 1. 9%*
B. 2. 25%
6. 3. 557**
D. 4. 10%
*Porcentaje de estudiantes que seleccionan cada opcin de respuesta.
**La negrilla indica la opcin correcta.
Esta pregunta busca que el estudiante identifque algunas ideas de textos cortos, apoyado en elementos visuales o lin-
gsticos familiares (cognados, estructuras y lxico sencillos), adems le exige al estudiante extraer informacin general y
especifca de un texto corto escrito en un lenguaje sencillo. El proceso de identifcacin se da en dos sentidos: en el texto
escrito y en el texto grfco.
9
ANLISIS DE RESULTADOS DE
LAS PRUEBAS DE ESTADO
Para responder la pregunta, en primer lugar, el estudiante debe leer el texto para comprender el tema que se est desa-
rrollando, Chile, as como las caractersticas que se estn dando del pas. El texto consta de cinco oraciones. Todas se
desarrollan tomando el eje norte-sur de Chile. Las dos primeras hablan explcitamente sobre lo que se encuentra a lo largo
de ste. Las otras tres se desarrollan explicando lo que se encuentra alrededor de ste. La estructura de las oraciones
est basada principalmente en el esquema Sujeto-verbo-predicado, donde el verbo usado principalmente es el verbo to
be, elemento lingstico familiar para los estudiantes desde los primeros niveles de aprendizaje del ingls como lengua
extranjera. Existen en el texto algunos cognados que ayudan a interpretar lo que se est hablando sobre Chile: history, fruit,
vegetable, ocean, exotic, gigantic, y mysterious. Existen tambin algunas referencias culturales como Robinson Crusoe
que pueden ser familiares para el estudiante.
Cuando se le pide al estudiante que identifque qu mapa se acomoda a la descripcin hecha en el texto, ste debe en-
contrar los elementos mencionados en el texto y mejor si lo hace siguiendo el parmetro norte-sur. Al leer la imagen 1, se
da cuenta que la informacin est incompleta: falta el desierto de Atacama. La imagen 2 por su parte carece de la imagen
de las ovejas mencionadas en la oracin 2. La imagen 3 contiene todos los elementos mencionados en el texto. La imagen
4 adolece al no contener las islas que se mencionan en el texto. El elemento visual ayuda al estudiante bien a reforzar el
vocabulario que el estudiante de alguna manera conoce, el ejemplo de las naranjas como ilustracin de la clase frutas, o a
deducir palabras por el contexto. El mapa incluye adems palabras que tambin se dieron en el texto: cordillera, Atacama
Desert y Pacifc Ocean.
El 55% de los estudiantes respondieron correctamente esta pregunta lo que indica que probablemente el vocabulario
sencillo, unido al contexto en el cual se circunscribe la pregunta, hicieron que este tem no presentara mayor difcultad
para los estudiantes.
2. Preguntadedifcultadmedia
Competencia: Pragmtica
Accin: Argumentativa
Respuesta: D
the text talks about
A. the safety guaranteed when participating in risky sports. 21%
B. ease of landing when hang-gliding. 13%
c. serious injuries when participating in risky sports. 33%
D. experiences of people participating in hang-gliding. 33%
10
ANLISIS DE RESULTADOS DE
LAS PRUEBAS DE ESTADO
El propsito de esta pregunta es el de relacionar una idea con otra para hallar el sentido de un enunciado. Esta pregunta se
ubica en un nivel de difcultad media ya que el 33% de los estudiantes escogieron la respuesta correcta (opcin D) pero un
porcentaje igual escogi la opcin C. Los estudiantes pueden haber escogido esta ltima opcin debido a que es una alternativa
posible, adems de ser cercana a la correcta (es cierto que en la participacin en deportes de alto riesgo se pueden presentar
heridas serias).
En este tipo de preguntas se busca que el estudiante reconozca la opcin ms cercana a lo que se presenta en el texto. Si bien,
las opciones A, B, y C, estn relacionadas con el texto, estas no se constituyen en ideas claves del mismo. Para establecer una
idea general del texto es necesario leerlo de manera global. Es posible que los estudiantes se hayan concentrado slo en la
respuesta dada por Jenny y no hayan visto el texto en su totalidad.
Lo anterior lleva a pensar que los estudiantes tienen difcultades para inferir informacin no explicita en el texto pero que indu-
dablemente se desprende de l, lo cual requiere una lectura comprensiva que supera los elementos gramaticales y textuales
para llegar a entender el sentido global del texto. Por consiguiente, se sugiere enfrentar a los estudiantes a la lectura inferencial
de textos de tal forma que se familiaricen con este tipo de preguntas.

3.Preguntadedifcultadmedia
Competencia: Organizativa
Accin: Interpretativa
Respuesta: C
A. still 19%
B. but 27%
6. yet 297
D. just 25%
11
ANLISIS DE RESULTADOS DE
LAS PRUEBAS DE ESTADO
En el caso de este tem
1
se busc evaluar de manera indirecta la capacidad del estudiante para relacionar acciones, per-
sonajes, lugares y elementos de un mismo texto, es decir, para interpretar esos elementos y darle sentido a la parte del
texto a la cual se refera la pregunta. Recordemos que la evaluacin indirecta busca medir las capacidades que subyacen
las habilidades en las cuales estamos interesados (hughes: 2003, p. 18). En este orden de ideas, el dilogo empleado
como pretexto para la evaluacin haca uso tanto de elementos textuales como grfcos. El estudiante poda asociar el
asunto de la conversacin con los elementos de la grfca: Angie y Mom (la mam de Angie) en el automvil y el semforo.
As pues, el estudiante deba establecer relaciones entre la solicitud de Angie (Mom, can I drive the car?); los elementos
o argumentos de la mam para no ceder a la solicitud de su hija (You dont have your drivers license yet); la insistencia
de Angie para lograr su propsito (No. But I will get it in two weeks) y la aceptacin de Angie, es decir, su decisin de no
insistir (Ok. Thats up to you. I just wanted to give you a hand).
Para el caso de la pregunta que nos ocupa, la respuesta correcta tuvo un porcentaje del 29% (opcin C) pero la opcin
B tuvo un porcentaje muy cercano (27%), as como la opcin D (25%) lo que indica que los estudiantes vieron las tres
opciones como posibles debido tal vez a la falta de conocimiento del uso de ciertos elementos textuales como adverbios,
adjetivos o conjunciones (still, but, yet, just) al fnal de una oracin.
El comportamiento de este tem nos hace pensar en la importancia de emplear textos que involucren la interaccin entre
miembros de la familia, no solamente en torno a asuntos cotidianos, sino tambin acerca de tpicos como la edad a la cual
les es permitido conducir a los jvenes. Al respecto, vale la pena recordar respecto a lo que entendemos por la familiarizacin
de los estudiantes con situaciones cotidianas. Si bien los textos escolares y los programas de los cursos incluyen temas
de la vida familiar (las rutinas diarias, la solicitud de permisos a los padres, los consejos), a menudo olvidamos temas que
tocan la realidad de los jvenes que culminan la educacin media (la edad reglamentaria para conducir, en este caso).
La exposicin de los estudiantes a temas de ndole familiar y social como el abordado en el tem implica tambin la ex-
posicin del estudiante a otros tipos de discurso. As pues, es preciso tener presente la variedad de textos (no solamente
descriptivos) y el anlisis de elementos lingsticos que se emplean para expresar argumentos o plantear ideas (en nuestro
caso, los conectores). Planteamos entonces la necesidad de examinar la frecuencia con que usamos en el aula textos en
los cuales los estudiantes deban resolver problemas o preguntas que demanden la comprensin de elementos textuales
como adverbios, adjetivos o conjunciones.
1 Para efectos del presente anlisis, tomamos slo una pregunta de este contexto de evaluacin que corresponde al
espacio del nmero 16, ya que sta nos permite mostrar un ejemplo de pregunta con difcultad media en la prueba.
12
ANLISIS DE RESULTADOS DE
LAS PRUEBAS DE ESTADO
4. Pregunta d|f|c||
Competencia: Pragmtica
Accin: Propositiva
Respuesta: D
The most appropriate title for the Tv section could be:
A. Teenagers problems with hair. 33%
B. Teenagers hair styling reasons. 24%
C. Teenagers problems with mothers. 20%
0. Teenagers ha|r sty||ng secrets. 237
Esta pregunta buscaba que el estudiante siguiera coherentemente los aspectos expuestos en la situacin (un presentador,
un joven que explica qu ha usado para lograr su peinado y el problema que ste le caus a la seora). El tem apuntaba
hacia los aspectos pragmticos del lenguaje, es decir, al uso funcional del lenguaje y al cmo lo usan los hablantes en
situaciones y contextos comunicativos especfcos (Bachman: 1990). En el contexto particular del tem, y en el plano de la
competencia estratgica, el estudiante deba comprende rasgos funcionales del lenguaje. Deba comprender las ideas y
emociones expresadas por el joven y su mam y adems, poner en evidencia la funcin imaginativa, es decir ser creativo
y proponer el ttulo que mejor correspondiera al contenido del texto.
13
ANLISIS DE RESULTADOS DE
LAS PRUEBAS DE ESTADO
En el plano de la competencia sociolingstica, el tem nos permite conocer acerca de la sensibilidad del estudiante para
reconocer tpicos, roles de los participantes y escenarios de comunicacin. Todos estos aspectos de la comunicacin estn
presentes en la situacin a la cual se refere el tem y el estudiante deba relacionar los aspectos lingsticos y visuales
para proponer el ttulo al texto, de acuerdo con las estructuras textuales y con las intencionalidades expresadas por los
participantes (el presentador, el joven y la seora).
Esta pregunta present una difcultad alta la cual se refeja en los porcentajes: el 23% de los estudiantes escogi la opcin
correcta (D), mientras que el 33% escogi la opcin A. Esto pudo presentarse porque en esta pregunta el estudiante debe
proponer un ttulo apropiado al texto y por las grfcas se entiende que se pueden presentar problemas con este tipo de
peinados (como lo ocurrido a la seora, probablemente la mam del joven). Observemos que la opcin A se relaciona con
problemas por tener el cabello en puntas y sera una opcin muy posible para el estudiante: la seora tuvo un pequeo
accidente con una de las puntas del cabello de su hijo. Sin embargo, el propsito de presentador es permitir al joven que
cuente cmo ha logrado su estilo de peinado, qu secretos tiene, cmo evolucionaron sus trucos para alcanzar la apariencia
actual.
El anlisis de los resultados arrojados por este tem nos permite afrmar que probablemente los estudiantes no estn muy
familiarizados con textos que aborden la discusin o la argumentacin, a diferencia de lo que ocurri con otros textos
descriptivos empleados en la prueba y que presentaron menores niveles de difcultad para su interpretacin. A su vez,
encontramos que la pregunta exiga que el estudiante examinara toda la estructura del texto, as como las intencionalidades
de los participantes en la situacin, para llegar al campo de la accin propositiva y seleccionar el ttulo respectivo.
A continuacin encontramos el anlisis de algunas preguntas de sept|embre.
14
ANLISIS DE RESULTADOS DE
LAS PRUEBAS DE ESTADO
1. Pregunta fc||
Competencia: Pragmtica
Accin: Interpretativa
Respuesta: A
Andrea is Camilos
A. fr|end. 717
B. sister. 15%
C. wife. 8%
D. mother. 5%
El objetivo de esta pregunta es que el estudiante demuestre comprensin de preguntas sencillas sobre s mismo, su familia
y su entorno, demuestre conocimiento de las estructuras bsicas del ingls y pueda extraer informacin general y especifca
de un texto corto escrito en un lenguaje sencillo.
El texto que presentamos en la parte superior cumple con los requisitos mencionados. ste contiene la descripcin de las
vacaciones de Andrea en Santa Marta. Ella narra las vacaciones que est teniendo con su familia en el contexto de esta
ciudad costera colombiana. Describe adems algunas rutinas que tiene en el periodo vacacional: pasear con la familia a
un sitio diferente cada da y el desayuno y almuerzo que usualmente toman.
El tema de las vacaciones se da siempre en el contexto escolar. Si bien es cierto que muchos estudiantes que presenta-
ron la prueba no han viajado a esta ciudad, pueden entender que es una ciudad costera por la foto incluida en el margen
derecho y por las actividades desarrolladas por Andrea: ir a los diferentes lugares mencionados y almorzar con arroz,
ensalada y pescado.
El texto est escrito en el presente simple e incluye los verbos to be, can, have y like, verbos que se manejan desde las
primeras etapas en el aprendizaje del ingls como lengua extranjera. Estos verbos estn insertos en frases cortas que
garantizan un nivel de difcultad apropiado para el nivel principiante.
15
ANLISIS DE RESULTADOS DE
LAS PRUEBAS DE ESTADO
El vocabulario del texto es de conocimiento de los estudiantes de la educacin media colombiana: vacaciones, clima, las
tres comidas diarias, la familia, temas que se incluyen en todos los slabos de ingls como lengua extranjera.
La pregunta que presentamos para anlisis solicitaba que los estudiantes identifcaran el tipo de relacin entre Camilo y
Andrea. La respuesta es la A: amiga. El estudiante tena que discriminar entre cuatro opciones, tres de las cuales se ba-
saban en relaciones familiares: hermana, esposa, madre. El estudiante tena que entender que Camilo no es un miembro
de la familia porque la tarjeta postal estaba dirigida a l y porque Andrea se encuentra de vacaciones con su familia. Ella
lo hace explcito con el uso de dos pronombres personales: I y We. Tambin dice de manera explcita que est con su
familia: I am on vacation with my family.
Esta pregunta result fcil ya que el porcentaje de estudiantes que escogi la respuesta correcta fue de 71% (opcin A)
lo que indica que los estudiantes estn familiarizados con la lectura y escritura de postales, con textos descriptivos y con
el uso de vocabulario sencillo.
2. Preguntadifcultadmedia
Competencia: Organizativa
Accin: Interpretativa
Respuesta: B
The underlined expression Let yourself be enchanted by landscapes means:
A. Let yourself be motivated by amusement buildings. 26%
. Let yourse|f be attracted by sp|end|d v|ews. 347
C. Let yourself be unhappy to see a paradise. 25%
D. Let yourself be anxious to take photographs. 15%
Esta pregunta busca evaluar a los estudiantes en la comprensin de partes de un texto y la relacin que stos puedan
establecer entre dos enunciados distintos desde el punto de vista lexical, referidos al mismo tpico. Para ello el estudiante
debe leer y comprender tanto la frase referida en el enunciado de la pregunta como las incluidas en las opciones de res-
puesta y buscar aquella que resulta ms cercana al sentido de la incluida en el enunciado.
En un enunciado como el que se presenta, ms que pretender hacer una traduccin, hay que hallarle el sentido en el
contexto en el se produce. Con esta pregunta se busca que el estudiante evidencie una interpretacin del texto. La opcin
que fue seleccionada despus de la correcta, corresponde a la A (26%). Una de las razones que pueden sustentar este
hecho es que posiblemente el estudiante pudo haber pensado que un sinnimo de landscapes es building y la vio como
1
ANLISIS DE RESULTADOS DE
LAS PRUEBAS DE ESTADO
la opcin correcta, pero a lo que realmente hace alusin esta expresin es a todos los esplndidos lugares que se pueden
ver. En trminos generales podemos ver que el estudiante an sigue haciendo una lectura muy literal de los textos y esto
hace que su capacidad interpretativa de los textos sea restringida.
En cuanto a los porcentajes de respuesta por opcin, vemos que esta pregunta result de difcultad media ya que el por-
centaje de estudiantes que respondieron correctamente fue del 34% y los porcentajes de estudiantes que escogieron las
opciones A y C fueron muy similares (26% y 25% respectivamente). Por lo tanto, para los estudiantes la opcin A tambin
pudo ser atrayente debido a que la palabra amusement aparece en el texto, as como la opcin C porque nombra paradise
que puede encajar con la descripcin que se est haciendo de un lugar. Esto ltimo puede tambin obedecer al manejo
que dieron a la palabra paradise, pues el hecho de ser un cognado, permitira darle sentido ms fcil a la proposicin que
se presenta como opcin de respuesta.
Para resolver este tipo de preguntas satisfactoriamente es necesario que los estudiantes se familiaricen con la lectura
de textos atendiendo a sus partes y a la totalidad del mismo, de tal manera que puedan identifcar la cercana de sentido
entre un enunciado y otro.
3. Preguntadifcultadmedia
Competencia: Organizativa
Accin: Propositiva
Respuesta: A
Con base en el mismo texto de la pregunta anterior.
the most appropriate title for this text is:
A. 8ummer Vacat|on 327
B. A Natural Park 30%
C. Western Places 20%
D. A Luxurious City 18%
Esta pregunta tiene como objetivo que el estudiante proponga un ttulo al texto de acuerdo con las estructuras del mismo
y con la intencin del autor.
Esta pregunta result de difcultad media ya que el 32% de los estudiantes escogi la respuesta correcta (opcin A) y un
30% escogi la opcin B. Por lo tanto, es probable que los estudiantes se hayan inclinado por la opcin B, ya que sta
respondera ms a un ttulo de un texto por cuanto en l se hace alusin a unas palabras que las puede vincular con par-
ques: hills, rocks y fresh air. Esto lleva a pensar que el estudiante sigue haciendo una lectura muy literal y de palabras en
los textos, puesto que l piensa que esto ya le da todas las herramientas para poder responder a una pregunta.
Es necesario recordar que cuando el estudiante se enfrenta a preguntas que requieren comprender la totalidad del texto
para elegir el ttulo ms apropiado, entran en juego elementos tanto de la competencia organizativa como de la competencia
pragmtica debido a que el estudiante en primer lugar debe reconocer los elementos formales del texto para posteriormente
identifcar una funcin particular del mismo. De all que reiteremos la importancia de familiarizar al estudiante con practicas
de aula que involucren la lectura de textos desde lo estructural hasta lo comunicativo.
17
ANLISIS DE RESULTADOS DE
LAS PRUEBAS DE ESTADO
4. Pregunta d|f|c||
Competencia: Pragmtica
Accin: Propositiva
Respuesta: C
According to the Opinion Poll, most people believe there is not much reality in Reality tV because those
shows are:
A. totally based on real-life situations. 21%
B. totally different from reality. 38%
C.artifciallycreated. 20%
D. absolutely ridiculous. 21%
Esta pregunta busca indagar por la comprensin del contenido del texto, por los procedimientos propuestos para la resolucin
de una situacin y pretende que los estudiantes presenten, de forma indirecta, una posicin frente a una situacin dada.
Esta pregunta mostr una difcultad alta ya que slo el 20% de los estudiantes seleccion la opcin correcta (opcin C) y
18
ANLISIS DE RESULTADOS DE
LAS PRUEBAS DE ESTADO
el 38% se inclin por la opcin B. La difcultad de esta pregunta pudo deberse a problemas en el proceso de lectura ya que
el estudiante tiene que entender y analizar las ideas expresadas por los entrevistados. Esto signifca que los estudiantes
cuando leen, entienden en trminos generales los textos, pero en muchas oportunidades generalizan la informacin y no
prestan atencin a los detalles y en algunos momentos en los detalles es en donde se encuentran puntos que diferencian
una posicin de otra. Si bien en esta pregunta las opciones de respuesta estaban relacionadas con la situacin, era nece-
sario que se leyera con atencin la idea que se preguntaba: si no hay mucha realidad en los REALITY Tv.
Adicionalmente, vemos que el estudiante debe contrastar los puntos de vista de los interlocutores y sacar conclusiones y
esto puede ser problemtico en la medida que los estudiantes no estn muy familiarizados con la lectura intertextual, ni
con textos que aborden asuntos estadsticos.

Conclusiones
El lector ha encontrado, a lo largo del documento, que el anlisis de los tems presenta, en primera instancia, las especif-
caciones de cada pregunta (qu competencias y acciones buscaba evaluar) y el comportamiento del tem en la poblacin
que present la prueba. Los resultados nos permiten hacer diversas lecturas: qu porcentajes de poblacin nos muestran
las opciones de respuesta, qu refejan esos porcentajes, y qu implicaciones podran inferirse para las prcticas docentes
y para el desarrollo de las prcticas evaluativas en el aula. Por consiguiente, podemos indagar sobre los desempeos de
los estudiantes, las habilidades que se trabajan o dejan de trabajar en clase y desde este anlisis poder establecer ciertas
recomendaciones para lograr mejores desempeos de los estudiantes en el aula en cuanto a su competencia en lengua
extranjera.
A continuacin presentamos varios puntos que recogen los aspectos ms destacados con base en el anlisis anterior:
En cuanto al nivel de los estudiantes en las pruebas de marzo y septiembre ste result ser de nivel medio.
Podemos concluir que los estudiantes en estas pruebas demuestran el desarrollo de ciertas competencias
desde el saln de clase como el manejo del cdigo lingstico o su habilidad para interpretar, argumentar y
proponer. Sin embargo, se presentan problemas al interior de estas acciones y stos tienen que ver con los
niveles superiores de estas acciones. Por ejemplo, a nivel de la accin interpretativa se puede ver que los
estudiantes an siguen en el nivel de lectura literal y no han trascendido a una lectura inferencial e intertextual.
En cuanto a la accin argumentativa, se puede ver que los estudiantes identifcan adecuadamente el propsito
de un autor, pero se les difculta seguir el orden de los argumentos y establecer distinciones entre una idea
importante en el texto y la posicin explicita o implcita del autor en el texto. Finalmente, y en relacin con la
accin propositiva, se evidencia que los estudiantes tienen algunas difcultades a la hora de proponer ttulos
a los textos, generalmente este ejercicio lo hacen al margen de los hechos que se presentan en los textos.
Este tipo de informacin le debe servir al docente de lenguas para que desarrolle estrategias de intervencin
pedaggicas que le permita a los estudiantes mejorar en sus procesos de aprendizaje ms all de prepararlos
para la presentacin de una prueba.
En las preguntas donde el estudiante debe completar un dilogo o texto y comprender situaciones se est
evaluando de forma indirecta la escritura y la habilidad de comunicacin oral. Esta forma de evaluacin busca
exponer al estudiante a experiencias semejantes a la realidad por medio del lenguaje.
La seleccin de textos que guardan cercana con la realidad del estudiante favorece la comprensin de un
texto presentado en ingls. Para el caso de la presente prueba de estado, una lectura sobre un pas latino-
americano que incluye elementos lingsticos en la lengua materna (cordillera, Atacama) y factores geogrfcos
parecidos (cordillera, Ocano Pacfco), facilita la comprensin de un texto porque es familiar al contexto donde
el estudiante se desenvuelve.
19
ANLISIS DE RESULTADOS DE
LAS PRUEBAS DE ESTADO
La inclusin de elementos visuales que apoyen el texto en la evaluacin ayuda al estudiante a corroborar sus
hiptesis de lectura. Como reza el dicho popular, una imagen vale ms que mil palabras que para el caso
concreto podra ejemplarizarse con la palabra sheep de la primera pregunta analizada en la prueba de marzo.
Si el estudiante no la conoca desde su bagaje, la pudo deducir por la presencia del dibujo.
Los temas locales apoyados en elementos visuales pueden constituirse en una de las maneras de constatar el
nivel de comprensin alcanzado por los estudiantes despus de un tiempo de exposicin a la lengua extran-
jera. No signifca esto sin embargo, que los temas que se incluyan en las evaluaciones deban ser siempre del
contexto local pero s que el vocabulario y las estructuras a las cuales se expone el estudiante en la evaluacin
hayan sido incluidos en los currculos. En otras palabras, el estudiante debe estar en capacidad de poner a
prueba lo aprendido en el saln de clase en diferentes contextos.
En trminos generales, consideramos que la prueba de ingls del Examen de Estado puede y debe evaluar la competencia
comunicativa que se alcanza en el saln de clase, de acuerdo con los estndares destinados para cada etapa del apren-
dizaje en la educacin bsica y media colombiana. El estudiante debe sentir que puede aproximarse al Examen de Estado
con confanza ya que lo que se le va a evaluar es algo que fue estudiado en el desarrollo del programa del rea de ingls a
lo largo de estos dos ciclos. Es justo reconocer la complejidad que encierra el concepto de competencia comunicativa y la
necesidad de articular la evaluacin en lengua inglesa con el marco de evaluacin que se ha promovido para las distintas
reas curriculares de la educacin bsica y media.
hughes advierte que existe una tendencia a evaluar lo que es ms fcil evaluar, en lugar de lo que lo que es ms importante
(2003, p. 53). Bien podramos plantear una evaluacin de corte tradicional que se centre en la evaluacin de un solo elemento
a la vez, pero esto no estara en concordancia con la visin que se tiene del concepto de competencia comunicativa, ni con
los marcos reglamentarios que se han propuesto para el contexto colombiano desde fnales de los noventa (Lineamientos
Curriculares del rea de Idiomas Extranjeros, 1999), ni con las tendencias actuales de evaluacin.
Por otra parte, el marco de referencia para la evaluacin del dominio de lengua inglesa planteado por la Colegiatura de
Idiomas involucra varios elementos: la competencia comunicativa, las acciones cognoscitivas / interpretativas que el estu-
diante es capaz de realizar y los contextos de evaluacin. El primer elemento presupone la capacidad del estudiante para
reconocer y emplear (de manera directa e indirecta) sus conocimientos de los elementos formales (la competencia organi-
zativa) y funcionales del lenguaje (la competencia pragmtica). El segundo elemento, las acciones, comprende tres campos
esenciales: las acciones interpretativas, argumentativas y propositivas. A su vez, los contextos de evaluacin buscan dar
cuenta de los ejes curriculares propuestos por los Lineamientos Curriculares del rea de Idiomas Extranjeros (MEN, 1999):
comunicacin social y personal, culturas y comunidades y conexiones con otras disciplinas. Este ltimo elemento de nuestro
marco de evaluacin nos permite una evaluacin integradora (por cuanto establece nexos entre distintas reas curriculares)
y contextualizada (por cuanto toma como referentes situaciones sociales, culturales, familiares o cientfcas).
Pero si bien los anteriores soportes conceptuales concuerdan con las tendencias universales para la enseanza de los
idiomas extranjeros y para la evaluacin, no desconocemos la complejidad que ambos procesos conllevan. Los desempeos
de los estudiantes en la evaluacin dependen en buena medida de la familiaridad que tengan con diversos tipos de textos,
de tems y, en general, con diversas prcticas pedaggicas que les permitan poner a prueba sus conocimientos tanto de
la forma como del uso del idioma.
20
ANLISIS DE RESULTADOS DE
LAS PRUEBAS DE ESTADO
Recomendaciones y Proyecciones para 2007
Es importante hacer una orientacin mayor a los docentes del pas sobre el marco terico de la prueba, la forma en que
se interpretan los resultados y el aporte que esta evaluacin pueda hacer a los procesos pedaggicos en los diferentes
contextos de enseanza de la lengua extranjera. Por lo tanto, se sugiere una mayor ocurrencia de situaciones que impliquen
evaluar lo cohesivo y funcional en la enseanza de la lengua extranjera. Finalmente, la evaluacin no puede centrarse
solamente en dirigir todos los objetivos en ensear para presentar la prueba de estado, sino que la evaluacin sea un
pretexto para trabajar competencias.
Partiendo de lo anterior, es necesario orientar las prcticas pedaggicas ms all de ensear cdigos lingsticos o estruc-
turas gramaticales desarrollando aprendizajes comunicativos, contextualizados y de uso real del lenguaje. Adems, que el
estudiante sea capaz de demostrar su capacidad de solucionar diferentes tipos de problemas enmarcados en diferentes
contextos comunicativos.
As mismo, de acuerdo con lo planteado en los Lineamientos Curriculares (MEN, 1999) es importante desarrollar en el
aula el uso de la lengua extranjera, para conocer y comprender culturas y comunidades extranjeras, adems de los par-
metros culturales del uso del idioma con otros interlocutores, para establecer conexiones entre el ingls y otras disciplinas
y, as, utilizar el idioma para realizar actividades acadmicas. Por lo tanto, el estudiante debe ser capaz de demostrar que
interpreta informacin implcita y explcita en un texto, que puede entender los argumentos dados por un autor o hablante
y que adems puede proponer soluciones a diferentes tipos de problemas.
Algunas recomendaciones se desprenden para los profesores que deben desarrollar evaluaciones en el aula sobre lo
visto en clase y para evaluadores que desarrollan pruebas estandarizadas o no estandarizadas. Un principio importante
es el de seleccionar textos que tengan una estructura organizada, es decir, que presenten construcciones gramaticales
coherentes y cohesivas entre s. Otra recomendacin es seleccionar temas que se acerquen a la realidad de lo que el
estudiante conoce y/o vive en su cotidianeidad. Otros puntos importantes son la inclusin de cognados que apoyen la
comprensin de los textos y de estructuras gramaticales que sean del conocimiento de los estudiantes, sobre todo en los
niveles de iniciacin en la lengua.
A los profesores se recomienda evaluar con base en lo estudiado en el saln de clase pero sin olvidar que los estudiantes
deben alcanzar estndares que son comunes para toda la poblacin colombiana y que se encuentran adems en los
diferentes marcos de referencia de enseanza de una lengua extranjera.
Para las personas que desarrollan pruebas estandarizadas se recomienda partir de contextos locales sin olvidar los univer-
sales que se deben evaluar. Se recomienda adems apoyar la evaluacin en elementos visuales que brinden al estudiante
la posibilidad de hacer una seleccin ms segura al corroborar hiptesis de lectura con el apoyo del elemento visual.
La naturaleza de las pruebas masivas no permite que se puedan evaluar todos los aspectos de la competencia en el len-
guaje de manera directa. Por ello, la prueba de ingls del Examen de Estado recurre en gran proporcin a la evaluacin
indirecta. Recordemos que la evaluacin indirecta busca medir las capacidades que subyacen las habilidades en las cuales
estamos interesados (hughes: 2003, p. 18).
Finalmente, como se plante en las pruebas de 2005, la prueba debe integrar los contextos comunicativos propuestos por
los Lineamientos Curriculares que evalan la competencia del lenguaje y las acciones mencionadas-, lo cual es posible
por medio de preguntas relacionadas entre s formuladas de un mismo texto. El hecho de poder evaluar procesos de
comunicacin por medio de las acciones interpretativa, argumentativa y propositiva, a travs del uso de las competencias
organizativa y pragmtica permite que no haya slo un aprendizaje memorstico gramatical sino poder encontrar, escoger
y proponer soluciones a problemas reales o hipotticos. As el estudiante puede desarrollar un pensamiento crtico frente
a lo que lee y, en las situaciones comunicativas, frente a las intenciones de las personas con quienes interacta.
21
ANLISIS DE RESULTADOS DE
LAS PRUEBAS DE ESTADO
Referencias
BAChMAN, L. Fundamental Considerations in Language Testing. Oxford. Oxford University Press. 1990.
hUGhES, A. Testing for Language Teachers. Cambridge. Cambridge University Press. 2003. Second Edition.
MINISTERIO DE EDUCACIN NACIONAL. Idiomas Extranjeros. Lineamientos Curriculares. Santaf de Bogot:
MEN.1999.
MINISTERIO DE EDUCACIN NACIONAL. Estndares Bsicos de Competencias en Lenguas Extranjeras: Ingls. Formar
en Lenguas Extranjeras: Ingls. Bogot: MEN, 2006.