Las pruebas estandarizadas y el diseo de la poltica educativa

en Mxico
Este Pas| Marco Antonio Fernndez Martnez | 269 | 01.09.2013 |

En la ltima dcada, Mxico ha realizado importantes esfuerzos para

la creacin y la implementacin de pruebas que permitan evaluar de
manera fidedigna la calidad de la educacin. Estos esfuerzos, sin
embargo, han enfrentado grandes dificultades. Dnde estamos
parados en esta materia, cules son los principales desafos y cmo
superarlos?

El Gobierno mexicano adquiri en septiembre de 2000 una serie de

compromisos complementarios a los establecidos en los denominados
Objetivos de Desarrollo del Milenio. Entre las metas prometidas destacaba la
de lograr que una mayora significativa de los estudiantes de educacin
primaria y secundaria alcance niveles de aprendizaje satisfactorios en las
asignaturas de lenguaje y matemticas, conforme a los estndares y los
exmenes establecidos por un organismo independiente de evaluacin
(Fernndez, 2011).
Ante los malos resultados obtenidos por los estudiantes en las primeras pruebas
estandarizadas realizadas en Mxico (Guevara Niebla, 1992), las autoridades se

comprometieron a establecer, a partir de 2002, mecanismos de evaluacin

educativa confiables e independientes, con informacin transparente sobre los
resultados, de acuerdo al objetivo fijado de obtener niveles satisfactorios tanto
en lenguaje como matemticas en estudiantes de primaria y secundaria. En
ltima instancia, los resultados de las evaluaciones serviran para definir y
orientar las polticas pblicas en el sector y como una ventana al interior del
sistema educativo, para que los ciudadanos puedan exigir cuentas de sus
resultados. Cules han sido los avances en este rubro?

I. Las pruebas estandarizadas y la medicin de la calidad educativa en

Mxico
Las pruebas estandarizadas se convirtieron en un instrumento clave dentro de
los esfuerzos de evaluacin educativa en Mxico que buscan contribuir a la
consecucin de objetivos valiosos en este sector, ya que su informacin
permitira:

1. Determinar en qu medida los estudiantes estn asimilando los

conocimientos y desarrollando las habilidades que el sistema educativo
nacional brinda.
2. Identificar fortalezas y debilidades particulares en los alumnos, en
trminos de conocimientos y habilidades.
3. Detectar si existen grupos de la poblacin en los que el desempeo en
estas reas es particularmente subptimo.
4. Identificar los factores tanto socioeconmicos como estructurales
asociados al desempeo escolar.
5. Verificar si los estndares educativos definidos por la autoridad
gubernamental estn siendo alcanzados de forma satisfactoria.
6. Observar cambios a lo largo del tiempo en el desempeo escolar de los
educandos.1

Vincent Greaney and Thomas Kellaghan, Assessing National Achievement Levels in Education,
National Assessments of Educational Achievement, World Bank, Washington, D.C., 2008. Los
autores hacen un buen recuento de la utilidad de las pruebas estandarizadas como insumo para
la definicin de polticas pblicas en educacin.
1

En ltima instancia, el uso de las pruebas estandarizadas debera estar

encaminado a proveer, tanto a la autoridad encargada del sistema educativo
como a sus beneficiarios (estudiantes, maestros y padres de familia), un
instrumento informativo til sobre los resultados que dicho sistema est
generando en los salones de clase.
En el pas destacan tres esfuerzos complementarios entre s en materia de
pruebas estandarizadas. En el mbito nacional, el Instituto Nacional de
Evaluacin de la Educacin (INEE), creado en 2002, implementa los Exmenes
para la Calidad y el Logro Educativos (Excale) y la Evaluacin Nacional del
Logro Acadmico en Centros Escolares (enlace), desarrollada a finales de 2005
por la Secretara de Educacin Pblica (SEP). En el mbito internacional,
Mxico, como miembro de la ocde, ha participado desde 2000 en la prueba pisa
(Programme for International Student Assessment).
Los Excale evalan en qu medida los estudiantes estn logrando adquirir los
aprendizajes establecidos por el currculo nacional en cuatro reas: espaol,
matemticas, ciencias naturales y formacin cvica y tica. Aunque sus
resultados no son individuales, brindan un diagnstico del desempeo de los
sistemas educativos estatales y nacional.
El propsito de la enlace es medir el aprendizaje de los estudiantes respecto al
currculo escolar. Para ello se examinan el espaol, las matemticas y una
tercera asignatura que se rota cada ao, a fin de ir cubriendo el currculo
completo. En su aplicacin participa toda la estructura educativa del sistema
bsico (jefes de sector, supervisores, apoyos tcnicos/pedaggicos, directores
de escuela y maestros).
Mxico ha entendido que, como parte de la comunidad internacional, debe
realizar evaluaciones educativas para medir las capacidades de sus estudiantes
y entender su desempeo respecto a otros pases. As, Mxico aplica desde el
ao 2000 la prueba pisa, que evala las competencias de los jvenes de 15
aos de edad en lectura, matemticas y ciencias para determinar su pericia en
el anlisis y la resolucin de problemas, el manejo de informacin y el
enfrentamiento de la vida cotidiana.
Los resultados de todas las pruebas estandarizadas mencionadas apuntan a que
la calidad educativa en las aulas mexicanas es preocupantemente deficiente, ya
que la mayor parte de los alumnos evaluados tienen niveles insuficientes o no
satisfactorios en sus resultados.

II. Las pruebas estandarizadas, sus limitaciones y posibilidades de

mejora
Aunque los resultados recientes de la prueba enlace denotan un ligero avance,
lo cual invita a un cierto optimismo, deben ser vistos con reserva. Diversas
investigaciones y entrevistas a maestros y alumnos de escuelas pblicas
sugieren que en la aplicacin de la evaluacin se ha extendido el lamentable
fenmeno del plagio (Fernndez, 2012), que se debe en gran medida al uso
que le da la autoridad como instrumento de evaluacin docente y como
mecanismo para premiar con incentivos econmicos a los maestros y escuelas
con mejor desempeo. La implementacin de una poltica pblica de esta
naturaleza, cuando el sistema educativo est controlado por el Sindicato
Nacional de Trabajadores de la Educacin (snte), ha terminado por mermar la
utilidad que debiera tener este instrumento estandarizado. Para entender este
fenmeno es preciso tomar en cuenta que muchas veces tanto los funcionarios
de educacin a nivel estatal como quienes coordinan la aplicacin de la prueba
son miembros del snte, cuyo proceso de seleccin, en la mayora de los casos,
no responde a criterios de mrito acadmico, sino a una lgica de lealtad
poltico-sindical (Fernndez, 2012; Ornelas, 2008, 2012), en la que no existen
los incentivos para sancionar a quienes boicotean la aplicacin de pruebas
estandarizadas.
Los resultados de las pruebas Excale contrastan con la informacin brindada
por enlace. Aunque estrictamente las pruebas no son comparables en trminos
de contenido y del universo de educandos evaluados, sus propsitos de
diagnstico educativo no son tan dismiles. Excale sugiere que las mejoras del
sistema educativo son prcticamente nulas en trminos estadsticos; incluso, en
las secundarias generales, tcnicas y privadas, el nmero de alumnos con
desempeo insuficiente en espaol ha aumentado. Y si bien enlace tiene una
aplicacin censal y la de Excale es muestral, las conclusiones obtenidas a partir
de sus resultados no deberan ser tan diametralmente distintas. Las diferencias
marcadas refuerzan lo que documenta la prensa nacional y exhiben diversos
videos: hay prcticas recurrentes de copia y fraude en la aplicacin de enlace
(Espinosa, 2010; Santiago, 2013; El Heraldo de Chiapas, 2010). Se calcula que
tan solo en 2011 aproximadamente 4.7% de las pruebas aplicadas en el pas
arrojaron resultados poco confiables por sospechas de fraude acadmico
(Unidad de Planeacin y Evaluacin de Polticas Educativas, 2012).
A este problema se han sumado crticas desde el mbito acadmico que
advierten sobre el uso excesivo de las pruebas estandarizadas en la definicin
de polticas educativas. Entre los sealamientos ms recurrentes se plantea
que, por concentrarse en espaol, matemticas y una materia adicional
rotativa, las pruebas son incapaces de medir el desempeo en otras reas del

conocimiento. Asimismo, la vinculacin entre los estmulos econmicos y de

evaluacin docente con el desempeo escolar en reas especficas del
conocimiento supone que se multiplican los incentivos para que los docentes
descuiden e incluso abandonen la enseanza de otras reas importantes (Lavy,
2004; Ladd, 2007). As, las pruebas estandarizadas pueden producir
educadores centrados en desarrollar habilidades para contestar pruebas de
opcin mltiple y no en fortalecer el desarrollo de las habilidades de
razonamiento y anlisis de los estudiantes.
Sin duda, dentro del anlisis de las pruebas estandarizadas se deben recoger
los factores socioeconmicos y culturales, as como las condiciones
estructurales del sistema educativo que impactan el desempeo de los
estudiantes (Carnoy y Rothstein, 2013). La escolaridad de los padres de familia,
las condiciones socioeconmicas de las familias, el acceso a herramientas de
aprendizaje del siglo xxi (una computadora con internet), el estado de la
infraestructura de la escuela y la gestin escolar del director, entre otros, son
factores asociados al desempeo de los estudiantes que deben ser analizados.

III. Qu hacer? En defensa del uso de las pruebas estandarizadas

Las pruebas estandarizadas nacionales e internacionales deben ser un
instrumento para obtener informacin relevante de lo que ocurre en el interior
de las aulas mexicanas. Hasta ahora, el impulso a la investigacin acadmica y
la evaluacin de polticas pblicas para aprovechar los insumos generados por
estos instrumentos ha sido limitado. No sorprende por ello que cada ao se
observen al menos dos momentos mediticos tres, cuando se presentan los
resultados de pisa en torno a la implementacin de las pruebas
estandarizadas y la difusin de sus resultados. Hacia finales del ciclo escolar,
destacan las denuncias de venta de copias de cuestionarios, que preceden la
aplicacin de enlace. Secciones sindicales principalmente asociadas a la
disidencia magisterial amenazan e incluso boicotean su aplicacin,
principalmente en Oaxaca, Michoacn y Guerrero. La prensa documenta el
fraude en la aplicacin de los exmenes mientras que la autoridad educativa
minimiza la amplitud del fenmeno y promete investigaciones hasta las ltimas
consecuencias. Meses despus, al arrancar el ciclo escolar, se presentan los
resultados. La prensa reitera lo ya sabido en los ltimos siete aos: la mayor
parte de nuestros estudiantes no tiene una adecuada formacin escolar. La
autoridad enfatiza que los resultados globales confirman que el pas avanza
quizs a paso lento, pero firme en la persecucin de la calidad educativa,
pero evita cualquier referencia a los fraudes acadmicos documentados
previamente.

El Gobierno anuncia ms programas para la formacin docente y para mejorar

la infraestructura educativa. El mismo ciclo, una y otra vez.
No se han implementado polticas de difusin efectiva de los resultados ni se
han usado estos como insumo para mejorar la prctica docente, como lo
demuestra la ltima encuesta del Instituto de Fomento e Investigacin
Educativa (ifie). Por ello, como s ocurre con los resultados de la prueba Excale,
las bases de datos de enlace deberan ser pblicas y aparecer en un formato
que permita su anlisis. La modificacin de enlace debe permitir la comparacin
de los resultados de un mismo alumno en el tiempo, con lo que se tendr un
insumo mucho ms til para analizar los resultados educativos.
Adicionalmente, es necesario desarrollar mecanismos para detectar el
fenmeno de copia en la aplicacin de la prueba enlace y establecer castigos a
quienes realizan y solapan el fraude acadmico. Una medida de esta naturaleza
requiere el desarrollo de dispositivos institucionales para que el Estado
mexicano recupere la rectora y el control del sistema educativo. En el caso de
la evaluacin docente, los instrumentos estandarizados deben ser
complementados con otras herramientas que permitan una evaluacin ms
global, como la observacin en clase y las encuestas a estudiantes. Recientes
estudios internacionales sugieren que una combinacin de instrumentos en la
evaluacin docente permite aprovechar correctamente los resultados de las
pruebas estandarizadas (Kane, 2012; Bill and Melinda Gates Foundation, 2013).
Todo instrumento de evaluacin es perfectible. No se trata de desdear las
pruebas estandarizadas como insumo relevante en el diseo de polticas
educativas. La experiencia internacional, en pases tanto desarrollados como en
vas de desarrollo, reconoce un uso creciente de este tipo de instrumentos para
apuntalar polticas pblicas en el mbito educativo (Cullen y Reback, 2006;
Kellagan y Greaney, 1992, 2001; Ladd, 2007; Mourshed, Chijioke y Barber,
2010; Stufflebeam, Madaus y Thomas Kellaghan, 2000).
Los beneficios de la educacin, tanto para el individuo como para la sociedad
(crecimiento econmico, disminucin de la desigualdad, productividad y
capacidad de innovacin tecnolgica), se incrementan conforme aumenta la
calidad de la enseanza en las aulas. Por tanto, los esfuerzos para medir la
calidad educativa con el fin de mejorar las polticas educativas son
imprescindibles.
La legislacin educativa que vaya a discutirse en las prximas semanas en el
Congreso debe garantizar suficientes recursos para que el inee cumpla con sus
nuevas responsabilidades como garante de la evaluacin educativa. Los nuevos
responsables del inee deben apuntalar la investigacin educativa para que,
junto con insumos de la academia y de centros de investigacin como Mxico

Evala, pueda contribuir a fortalecer la cultura de la evaluacin en un mbito

estratgico para el desarrollo nacional como lo es la calidad educativa. EstePas

______________________________________________

MARCO ANTONIO FERNNDEZ MARTNEZ es doctor en Ciencia Poltica por

Duke University, especialista en economa poltica y director de investigacin de
Mxico Evala.

http://estepais.com/site/?p=47581#sthash.v6uvYOUy.dpuf