EL CURRICULO DE ELE: EXMENES DE ELE

Javier Fruns
1. CONCEPTOS BSICOS
1.1. TIPOS DE EXMENES
-

Pruebas de nivel: diagnosticar el nivel del alumno. Tiene objetivos distintos,

por lo que cambia la naturaleza del examen. Vocabulario Gramtica >
organizar alumnos.
1) Cuestionario
2) Estn siendo sustituidos por el portfolio: el alumno reflexiona.
3) Parte oral: en funcin de ella se le da una prueba escrita u otra.
- Certificados de dominio: DELE. Lo nico que importa es si tiene un
determinado nivel o no. No hay retroalimentacin vara el examen. Son
cada vez ms comunicativos, se eliminan las partes de gramtica y
vocabulario y pasan a ser por destrezas.
- Progreso o aprovechamiento: Son parecidos. El de progreso mide lo que se va
aprendiendo en clase y el de aprovechamiento comprueba si se han
conseguido los objetivos a final de curso. Pueden ser de muchos tipos, pero
siempre coherentes con el currculo.
1.2. EFECTIVIDAD:
-

Fiabilidad: Cuando el examen es consistente. Hay tres momentos para

conseguir que sean as:
1) la creacin del examen: un examen ms o menos igual de difcil ao tras ao.
2) En la administracin del examen: las condiciones de exposicin al examen
tienen que ser siempre las mismas (silencio, tiempos, tipo de respuestas)
3) Al calificarlo: Si es una prueba subjetiva, como las de expresin, y se califica
con escalas, hay que interpretar las escalas siempre de la misma manera; hay
que ser consistente.
- Validez: Medimos lo que queremos medir y slo lo que queremos medir.
Tenemos que tener claro cul es nuestro constructo del examen, lo que
pensamos que es la competencia comunicativa, por ejemplo; qu entendemos
nosotros por competencia comunicativa, comprensin de las ideas especficas,
de vocabulario concreto, la capacidad de expresin oral segn una serie de
rasgos Una vez que sabemos qu queremos medir, se hace el examen. Hay
exmenes muy fiables pero poco vlidos. Por ejemplo, una evaluacin
objetiva en la expresin escrita no siempre es tan vlida como la subjetiva,
menos fiable pero ms vlida. Por ello, lo que se hace son exmenes con
parte objetiva y parte subjetiva.
- Autenticidad: La evaluacin ha seguido la misma evolucin que la teora de la
enseanza y aprendizaje, por lo que se intenta hacer lo ms autntico
posible, por lo que se intenta utilizar textos autnticos. La autenticidad total
en un examen nunca se logra. Con el enfoque por tareas casi se consigue.
- Viabilidad: Un examen tiene que ser posible de realizarse en unas condiciones
determinadas. Muchas veces nos pasa que queremos examinar de todos los

contenidos del curso. Al cabo de los 20 minutos de comprensin auditiva, un

alumno est agotado. Lo que tenemos que hacer es reducir nuestras
pretensiones, tiene que ser generalizable a partir de los datos que nosotros
tenemos. Hay que elegir cuidadosamente las actividades. Un examen tiene
que medir todo lo que queremos medir y slo lo que queremos medir, lo que
quiere decir que tenemos que generalizar, y en las condiciones que tenemos.
Interactividad: El tipo de ejercicios que tiene que hacer el alumno en un
examen tiene que ser diverso. Hay culturas en las que el examen del tipo test
es ms normal que en otras, lo mismo con la interpretacin de grficos: lo
que medimos es la habilidad con la lengua, con lo que hay que hacerlo
variado para medir capacidad lingstica y no otras cosas.
Impacto: Las consecuencias. No tiene sentido un examen de una hora de
vocabulario de clase. Al hablar de impacto, est relacionado el efecto rebote,
que es el impacto que nuestro examen va a tener en la enseanza. Si hace un
examen de vocabulario slo, el alumno no va a participar en la parte
comunicativa: el alumno aprende en funcin de su examen. Esto a veces toca
incluso aspectos ticos (como dar una nacionalidad a alguien por un examen
de lengua).

1.3. ESPECIFICACIONES
1)
2)
3)
4)

Propsito.
Perfil del destinatario.
Nivel (al elegir textos, hacer las preguntas)
Constructo: lo que queremos medir, la concepcin que tenemos de la
competencia comunicativa.
5) Situaciones en la lengua meta. (en consonancia con el currculo, tipos de
texto, etc.)
6) Destrezas que se evalan y de qu forma. A veces es menos autntico separar
destrezas, pero en algunos momentos es ms eficaz para saber dar una
retroalimentacin a los alumnos (en los de aprovechamiento), y as es como
se identifican de manera ms sencilla los problemas.
7) Secciones o partes del examen y duracin de cada una.
La mayora de estas especificaciones ya las tenemos en un curso.

2. CREACIN DE UNA PRUEBA DE COMPRENSIN

2.1. ESPECIFICACIONES DE COMPRENSIN LECTORA

Tipos de textos: hay que elegir alguno que sea representativo. Tienen que ser
variados.
Elementos lingsticos que deben evaluarse: aunque no sea un examen
especfico de gramtica, es necesario saber qu es lo que vamos a preguntar
dependiendo del nivel y de lo que queramos evaluar. Como ayuda siempre
tenemos el PCIC.

Tipos de tareas y ejercicios que vamos a hacer para la comprensin: Tienen

que ser variadas.
Nmero de ejercicios y valor de cada uno: Aqu es donde entra la viabilidad.
Instrucciones: Cmo dar las instrucciones de las tareas. Asegurarnos de que
las instrucciones son del nivel de lengua de los alumnos.
Criterios de calificacin: Cunto va a valer cada ejercicio y qu puntuacin
les damos.
LA SELECCIN DEL TEXTO:
-

Hay que tener en cuenta el nivel

El mbito al que pertenece el texto (personal, pblico, acadmico y
profesional)
Gnero discursivo (descriptivo, narrativo, argumentativo, expositivo)
Temas
Nivel (gramtica, lxico, etc.)
Autenticidad y fuente (se puede adaptar)
Extensin del texto: tienen que tener una extensin similar los distintos
textos de un examen.
Variedades lingsticas: siempre del espaol peninsular o tambin otras
variedades?
Tono y registro
Organizacin: tienen que ser textos muy bien estructurados, que estn bien
escritos.
Nmero y separacin de ideas en el texto.
Tipos de informacin: que sea novedosa pero que tampoco sea demasiado
especializada, de manera que no sepan unos ms que otros.

2.2. FOCALIZACIN DE UNA TAREA:

Tenemos que saber qu queremos que haga el alumno en la tarea. Normalmente se le
pide que haga lo que hara en la vida real con ese tipo de texto. Por ejemplo, si
tienes que leer un billete de autobs, que sepas leer lo que te importa: a qu puerta
tiene que ir, a qu hora, precio, etc.
Podemos focalizar la tarea en cualquiera de estos puntos o en algunos de ellos
(comn para comprensin de lectura y auditiva):
-

Saber de qu trata (idea general)

Captar las ideas principales
Localizar informacin especfica
Comprenderlo en profundidad y detalle (por ejemplo, si ponemos un artculo
para clase, un ensayo, etc.)
Identificar la estructura del texto (tendr que comprender mecanismos de
cohesin, ideas principales)
Inferir intenciones, sentido, etc.

2.3. TIPOS DE TEMS:

Respuesta cerrada: lo nico que tiene que hacer el alumno es comprender.

a) Opcin mltiple
La agencia EFE celebra en 2014:
a. Su 75 aniversario.
b. Su traslado a una nueva sede.
c. Su expansin a Amrica.
En pruebas de comprensin de lectura, cuando queremos poner cuatro
opciones a veces es difcil hacer cuatro opciones plausibles, que parezcan
verdaderas. Es mejor hacer tres y que parezcan verdaderas.
Ventajas: son muy fciles de corregir; son conocidos en todo el mundo;
nos sirve para cualquier tipo de texto y cualquier tipo de focalizacin
(ideas generales, idea principal)
Desventajas: son muy difciles de elaborar; los distractores tienen que
distraer, tienen que estar basados en lo que dice el texto; hay gente que
dice que con ellos confundimos intencionadamente al alumno; hay gente a
las que se les da mejor y peor hacer este tipo de tems.
b) Opcin mltiple con banco comn de opciones
Un texto con huecos y palabras que sobran.
Aqu no confundimos tan intencionadamente al lector. No est mal frente
a la opcin mltiple.
c) Reconstruir: tambin con ms opciones que huecos. Exige comprender las
ideas principales, los nexos Realmente te hace comprender el sentido
del texto. Requiere mucha concentracin y tiempo por parte del alumno.
d) Relacionar: Textos y enunciados. Es muy bueno para niveles bajos, porque
podemos utilizar textos cortos.
e) Ordenar: Desordenar un texto y que lo tengan que ordenar los alumnos.
Tambin tienes que entender las ideas principales del texto; a veces los
alumnos hacen la mitad bien y la mitad mal y no han entendido nada; es
difcil de calificar.

Respuesta semiabierta
f) Cloze-test: son palabras concretas pero que tambin pueden permitir
otras palabras que a nosotros no habamos pensado. En sentido literal, tal
y como eran al principio, es que cada cierto nmero de palabras, (5, 6, 7)
siempre el mismo, falta una palabra.
g) Cloze-test sin intervalo fijo: Luego pas a ser quitar la palabra que t
quieras para ajustarse a lo que uno quiere preguntar. Es un poco ms
adecuada que la anterior.
h) Cloze cerrado: Se dan opciones, y en esta s que influye el azar ms que
en la anterior.

i) C-test: te quita la mitad de la palabra.

Respuesta abierta: de la vida real. un resumen, responder a preguntas. Son
al mismo tiempo de comprensin y de expresin. Tendrn distintos grados de
correccin, con lo que no hay que medirlas como correctas/incorrectas. Se
mide tambin otra destreza adems de la comprensin lectora o auditiva.
Dependiendo de nuestros objetivos podemos tener lo que se llama la medida
embarrada, no saber bien qu se est evaluando porque no realiza la tarea.
Es mejor separar una cosa de otra.

2.4. PAUTAS PARA TEMS DE OPCIN MLTIPLE

-

todas las opciones tienen que ser posibles

no hay opciones agramaticales: no hay que confundir al alumno en ese
sentido.
todas las opciones son plausibles pero el texto no dice eso
la respuesta no se deduce antes de leer el texto
todos los tems evalan contenidos distintos y son independientes y sobre
ideas separadas.
Los tems se enuncian afirmativamente
Las opciones de un tem tienen una extensin similar
No hay dos opciones contrarias o relacionadas junto a otras completamente
distintas
Los tems siguen el orden de la informacin en el texto
En los tems no hay lxico o construcciones ms complejas que en los textos
El nmero de opciones no dificulta la creacin de buenos tems

Una de las funciones bsicas a la hora de crear exmenes, es el tener una revisin de
tems, en la certificacin oficial, aparte de que luego se experimente.
Est muy bien decir segn el texto para poder tener ms distractores. No usar las
mismas palabras en los tems que en el texto, de manera que nos aseguramos de que
ha comprendido la idea, pero siempre del mismo nivel de lengua.
2.7. PARTICULARIDADES DE LAS PRUEBAS de COMPRENSIN AUDITIVA
-

Hay que basarse ms en el audio que en la transcripcin del audio.

Dificultad de encontrar fuentes autnticas
Duracin de las pruebas (20 minutos es muy largo)
Falta de control por parte del examinando: tienes que seguir el orden del
audio y luego ya no puede volver a escucharlo ni puede prever lo que le van a
preguntar; el alumno est muy limitado.
Nmero de escuchas: se parte de la idea de que el examen de por s no es
autntico: sera mejor poner un audio dos veces, excepcionalmente 3.
Tiempo para leer antes de la audicin o entre audiciones. Segn los estudios
el que mejoren los resultados no tiene nada que ver con esto. Lo que s que es
importante, es dejar un tiempo entre la primera y la segunda escucha.
Textos: nmero de participantes y facilidad para reconocerlos.
Textos: velocidad e inteligibilidad.

3. ANLISIS DE LOS TEMS Y PUNTO DE CORTE

3.1. EL PUNTO DE CORTE:

Decisin sobre el punto de corte

o ndice de dificultad: que el aprobado siempre sea la misma nota, no
siempre es el mismo. En los DELE, por ejemplo, cambia el punto de
corte por el uso de
o tems ancla: hay profesores que utilizan exmenes del DELE con 100
alumnos que experimentan antes de que se les ponga. As se sabe
cmo van. Cogen un tem de un DELE pasado, se sabe con seguridad
que tiene una dificultad media, se pone, no cuenta, y con eso se sabe
el nivel que hay.

3.2. COEFICIENTE DE DIFICULTAD:

Se obtiene de dividir el nmero de respuestas correctas a un tem entre el nmero de
examinandos. Ejemplo:
COEFICIENTE
<0,67
0,33 0,67
<0,33

DIFICULTAD DEL TEM

tem fcil
tem de dificultad media
tem de difcil

3.3. NDICE DE DISCRIMINACIN

Cmo calcularlo?
1. Se coge al 1/3 de la calificacin ms alta y al 1/3 de calificacin ms baja,
dejando fuera el 1/3 intermedio. Ejemplo:
Examinandos: 100 personas
- Se escoge a los 33 de calificacin final ms alta y a los 33 de calificacin
ms baja.
2. Para cada tem se hace el siguiente clculo: n de examinandos del tercio alto
que respondieron bien menos el n de examinandos de nivel bajo respondieron
bien. Ejemplo:
30 -15 = 15
3. El nmero resultante lo dividimos por el nmero total de examinandos de alto
nivel. Ejemplo:
15/33 = 0,45

4. CREACIN DE UNA PREUBA DE EXPRESIN

4.1. ESPECIFICACIONES: PRUEBA DE EXPRESIN ORAL
Las pruebas subjetivas son muy fciles de crear y difciles de corregir.

Actividades de la lengua: expresin oral, expresin escrita, comprensin oral,

comprensin escrita, interaccin oral, interaccin escrita, mediacin oral, mediacin
escrita.
-

Distinguir entre expresin e interaccin.

Integracin de destrezas? Depende de lo que estemos buscando, haremos una
u otra cosa.
Nmero de participantes: conversacin entre examinandos o con examinador.
Lo mejor es hacer las dos cosas.
Duracin: nunca demasiado extenso, es mucho esfuerzo. Normalmente
tambin hay interaccin, con lo que es complejo.
Nivel de control de la tarea: hasta qu punto quieres controlar t la tarea.
Control sobre lo que le est diciendo al alumno.
Estmulos.
Nivel, mbito, gnero, registro, autenticidad, contenido (y nivel de
conocimiento y procesos cognitivos requeridos), instrucciones
Macrofuncin: hacer una presentacin, describir, narrar, dar instrucciones,
comparar y contrastar, explicar y predecir, argumentar, role play, debate,
reaccionar ante situaciones

4.3.PRUEBAS DE EXPRESIN ESCRITA:

-

Nmero de palabras que tiene que producir: indicativo o prescriptivo:

consecuencias.
Distinguir entre expresin e interaccin.
Nivel de control de la tarea: estmulo, instrucciones.
Duracin
Nivel, mbito, gnero, registro, autenticidad, contenido (y nivel de
conocimientos y procesos cognitivos requeridos), instrucciones
Macrofuncin: hacer una presentacin, describir, narrar, dar instrucciones,
comparar y contrastar, explicar y predecir, argumentar, role play, debate,
reaccionar ente situaciones

5. CALIFICACIN CON ESCALAS:

5.1.

Qu son las escalas

Apropiadas para un enfoque comunicativo frente a otros tipos de calificacin (listas

de control), pero subjetivas.
Eje vertical: bandas de calificacin.
Nmero de bandas: En un examen oral es mejor no tener demasiadas bandas, porque
sera inabarcable.
Eje horizontal: descripcin tipo de la actuacin del eexaminando
Carcter formativo.

5.2. Escalas holsticas y analticas:

Holstica o general
Rpida y razonablemente sencilla
Poco matizada
Analtica o por categoras
o Valor diagnstico: retroalimentacin
o Texto como suma de partes
Combinacin de ambas

5.3.

CALIFICACIN ANALTICA: CATEGORAS