Professional Documents
Culture Documents
INFORMES
Presidente de la Repblica lvaro Uribe Vlez Ministra de Educacin Nacional Cecilia Mara Vlez White Viceministra de Educacin Preescolar, Bsica y Media Isabel Segovia Ospina
Directora General Margarita Pea Borrero Secretaria General Gioconda Pia Elles Director de Evaluacin Julin Patricio Mario Von Hildebrand Director de Produccin y Operaciones Francisco Ernesto Reyes Jimnez Director de Tecnologa Adolfo Serrano Martnez Elaboracin del informe Mara Isabel Fernandes Cristvo Diseo Giovanni Camacho Solorza 2a edicin Bogot, D.C., Junio de 2010
INFORMES
Tabla 1. Distribucin porcentual de la muestra de los estudiantes colombianos evaluados en TIMSS 2007 por sector, zona y gnero
Sector Zona Gnero Categora Ocial Privado Urbana Rural Hombres Mujeres Cuarto 83,4% 16,6% 75,1% 24,9% 50,4% 49,6% Grados Octavo 82,0% 18,0% 88,0% 12,0% 49,0% 51,0%
Fuente: Base de datos TIMSS 2007. Clculos realizados por la Direccin de Evaluacin del ICFES.
Evaluaciones Internacionales
PASES
ENTIDADES SUBNACIONALES
Alberta, Canad (4) Columbia Britnica, Canad (4,8) Massachusetts, Estados Unidos (4,8) Minnesota, Estados Unidos (4,8) Ontario, Canad (4,8) Quebec, Canad (4,8)
* Los nmeros entre parntesis corresponden a los grados evaluados en cada pas o entidad subnacional.
INFORMES
PASES
Alemania (4) Arabia Saudita (8) Argelia (4,8) Armenia (4,8) Australia (4,8) Austria (4) Autoridad Nacional Palestina (8) Bahrin (8) Bosnia y Herzegovina (8) Botsuana (8) Bulgaria (8) Chipre (8) Corea (8) Dinamarca (4)
Egipto (8) Escocia (4,8) Eslovaquia (4) Eslovenia (4,8) Georgia (4,8) Ghana (8) Holanda (4) Hong Kong (4,8) Hungra (4,8) Indonesia (8) Inglaterra (4,8) Irn (4,8) Israel (8) Italia (4,8)
Japn (4,8) Jordania (8) Kazajistn (4) Kuwait (4,8) Letonia (4) Lbano (8) Lituania (4,8) Malasia (8) Malta (8) Marruecos (4,8) Mongolia (4,8) Noruega (4,8) Nueva Zelanda (4) Omn (8)
Qatar (4,8) Repblica Checa (4,8) Rumania (8) Rusia (4,8) Serbia (8) Singapur (4,8) Siria (8) Suecia (4,8) Tailandia (8) Taipi (4,8) Tnez (4,8) Turqua (8) Ucrania (4,8) Yemen (4)
ENTIDADES SUBNACIONALES
Evaluaciones Internacionales
Nuestro pas particip en TIMSS 2007 por decisin del Ministerio de Educacin Nacional, como respuesta a la conviccin de que la evaluacin es el punto de partida de cualquier proceso de mejoramiento de la calidad educativa. Saber cmo estn nuestros estudiantes, cules han sido sus avances con respecto a 1995 y a dnde deben llegar es una informacin crucial para que docentes, directivos y autoridades sepan hacia dnde orientar sus esfuerzos de mejoramiento. Compararnos con otros pases permite conocer qu tan distantes estamos de alcanzar los niveles de logro necesarios para que los estudiantes colombianos puedan desempearse con xito en un mundo cada vez ms globalizado. La realizacin de TIMSS es posible gracias a la participacin de un grupo de instituciones internacionales lideradas por la IEA (Asociacin Internacional para la Evaluacin del Logro Educativo), encargada de dirigir y administrar el proyecto, coordinar la participacin de los pases y manejar las bases de datos; el Centro Internacional de Estudios, ubicado en el Boston College, que se ocupa del diseo e implementacin del estudio y la vericacin de la traduccin de los instrumentos; el Statistics Canada, que realiza las actividades de muestreo y el ETS (Educational Testing Service), responsable del manejo psicomtrico de los datos. En cada pas participante existe una organizacin responsable por el desarrollo de TIMSS. En Colombia, esta tarea est a cargo del ICFES.
INFORMES
Fuente: Mullis, I. V. S., et. al. (2005). TIMSS 2007 Assessment Frameworks. International Study Center, Lynch School of Education, Boston College, pgina 5.
En las pruebas de matemticas y ciencias se evaluaron dominios de contenido y dominios cognitivos. Los primeros incluyen temas especcos de cada rea, en tanto que los segundos son transversales a todas las pruebas, y corresponden a las destrezas y habilidades asociadas a conocimientos concretos (Tablas 2 y 3). Las pruebas combinaron tems de seleccin mltiple y preguntas abiertas, en las cuales los estudiantes deban solucionar un problema o justicar un determinado planteamiento. Tabla 2. Dominios de contenido y cognitivos evaluados en las pruebas de matemticas de TIMSS 2007
Grado Cuarto Octavo Dominios de contenido Nmeros Formas geomtricas y medidas Presentacin de datos Nmeros lgebra Geometra Datos y probabilidad Dominios cognitivos Conocer Aplicar Razonar Conocer Aplicar Razonar
Tabla 3. Dominios de contenido y cognitivos evaluados en las pruebas de ciencias de TIMSS 2007
Grado Cuarto Octavo Dominios de contenido Ciencias de la vida Ciencias fsicas Ciencias de la Tierra Biologa Qumica Fsica Ciencias de la Tierra Dominios cognitivos Conocer Aplicar Razonar Conocer Aplicar Razonar
Evaluaciones Internacionales
Adems de las pruebas, TIMSS recoge informacin sobre el contexto de los sistemas educativos, las estructuras y contenidos de los currculos prescritos en matemticas y ciencias, la organizacin escolar, las estrategias de enseanza, la organizacin y los recursos de los establecimientos educativos y de las aulas, la formacin y experiencia de los docentes, los contenidos de ambas reas que son efectivamente enseados, los enfoques y estrategias de enseanza utilizadas, as como las actitudes y motivaciones de los estudiantes hacia el aprendizaje. Esto permite identicar aquellos factores que inciden en los aprendizajes de los estudiantes y comprender mejor sus resultados.
RESULTADOS
Los resultados de TIMSS se expresan en puntajes promedio y en niveles de desempeo. A partir de las respuestas de los estudiantes en cada prueba, TIMSS estim sus puntajes en matemticas y ciencias, as como los de cada dominio de ambas reas. Con base en los puntajes de cada estudiante se calcularon los promedios globales de cada pas y entidad subnacional por rea, grado y dominio. Estos resultados se presentan en escalas que tienen internacionalmente un promedio de 500 (que se denomin promedio TIMSS) y una desviacin estndar de 100, a partir de las cuales se hacen las comparaciones entre los pases con respecto a ese valor. Por su parte, los resultados segn niveles de desempeo se presentan en trminos de porcentajes de estudiantes que respondieron correctamente las preguntas asociadas a cada uno de los niveles. stos son acumulativos, lo que quiere decir que si un estudiante est ubicado en el nivel alto, es porque puede resolver correctamente las preguntas de este nivel, as como las del medio y del bajo. Tanto en matemticas como en ciencias, en ambos grados, los estudiantes de los pases asiticos (Hong Kong, Singapur, Corea, Taipi y Japn) tuvieron los promedios ms altos. Inglaterra, Hungra y Rusia tambin lograron buenos resultados. Un nmero considerable de pases evaluados, entre ellos Colombia, se ubic por debajo del promedio TIMSS.
INFORMES
Los nmeros entre parntesis corresponden a los errores estndar. Promedio signicativamente mayor que el promedio TIMSS Promedio signicativamente menor que el promedio TIMSS
Fuente: Mullis, I. V. S. et. al. (2008). TIMSS 2007 International Mathematics Report. Lynch School of Education. Boston College, Cuadro 1.1, pg. 34.
Evaluaciones Internacionales
Los nmeros entre parntesis corresponden a los errores estndar. Promedio signicativamente mayor que el promedio TIMSS Promedio signicativamente menor que el promedio TIMSS
Fuente: Mullis, I. V. S. et. al. (2008). TIMSS 2007 International Mathematics Report. Lynch School of Education. Boston College, Cuadro 1.1, pg. 35.
10
INFORMES
Los promedios de los estudiantes colombianos que asisten a establecimientos educativos privados son signicativamente ms altos que los de quienes estudian en planteles ociales; en cuarto la diferencia a favor de los primeros es de 65 puntos y en octavo sta es de 58 puntos. Por su parte, en ambos grados los promedios son ms altos en las reas urbanas: la diferencia a favor de las ciudades es de 38 puntos en cuarto y 45 en octavo. En una buena parte de los pases no se presentaron diferencias por gnero. Sin embargo, Colombia fue el pas donde se registraron las brechas ms altas entre nios y nias, a favor de los primeros. Los promedios de los nios de cuarto y octavo fueron 364 y 396, mientras que los de las nias fueron, respectivamente, 347 y 364 (Tabla 6). Tabla 6. Promedios de los estudiantes colombianos en matemticas segn sector, zona y gnero
Grado Colombia 355 380 Sector Ocial 345 369 Privado 410 427 Diferencia 65 58 Urbana 365 385 Zona Rural 327 340 Diferencia 38 45 Nias 347 364 Gnero Nios 364 396 Diferencia 17 32
Cuarto Octavo
Fuente: Base de datos TIMSS 2007. Clculos realizados por la Direccin de Evaluacin del ICFES.
El segundo grupo de resultados entregados por TIMSS se relaciona con los niveles de desempeo de los estudiantes, los cuales establecen lo que saben y saben hacer en un contexto determinado. La Tabla 7 presenta la denicin general de cada nivel y los intervalos de puntajes en los que se sitan.
Tabla 7. Niveles de desempeo en la prueba de matemticas. Qu saben y saben hacer los estudiantes en cada nivel?
Nivel de desempeo Cuarto grado Aplican su conocimiento y comprensin en una variedad de situaciones relativamente complejas y explican su razonamiento Octavo grado Organizan y plantean conclusiones a partir de informacin, hacen generalizaciones y resuelven problemas no rutinarios Aplican su conocimiento y comprensin en situaciones relativamente complejas Aplican conocimiento matemtico bsico en situaciones simples Tienen algn conocimiento sobre nmeros naturales y decimales, operaciones y grcos Tienen un conocimiento matemtico inferior al mnimo que permite describir la prueba de TIMSS 2007
Alto Aplican su conocimiento y comprensin para resolver problemas (entre 550 y 624 puntos) Medio Aplican conocimiento matemtico bsico en situaciones simples (entre 475 y 549 puntos) Bajo Tienen un conocimiento bsico de las matemticas (entre 400 y 474 puntos) Inferior (399 puntos o menos) Tienen un conocimiento matemtico inferior al mnimo que permite describir la prueba de TIMSS 2007
Fuente: Mullis, I. V. S. et. al. (2008). TIMSS 2007 International Mathematics Report. Lynch School of Education. Boston College, Cuadro 2.1, pp. 68-69.
11
Evaluaciones Internacionales
En cuarto grado, el 69% de los estudiantes colombianos mostr logros inferiores a los descritos en la respectiva prueba. El 22% se ubic en el nivel bajo; tan solo un 7% en el medio, 2% en el alto y ninguno en el avanzado (Grco 1). En octavo la situacin es similar, puesto que el 61% tuvo logros inferiores a los descritos en la prueba para este grado, el 28% se ubic en el nivel bajo, en tanto que el 9% en el medio, el 2% en el alto y ninguno en el avanzado (Grco 2). Estas cifras son preocupantes, puesto que casi las dos terceras partes de los estudiantes colombianos presentan dicultades con el manejo de los conocimientos bsicos de las matemticas que fueron evaluados por TIMSS 2007. Singapur y Hong Kong lograron los porcentajes ms altos de estudiantes de cuarto grado ubicados en el nivel avanzado de desempeo: 41% y 40%, respectivamente, superando de lejos a todos los dems pases. En octavo, Taipi, Corea y Singapur tuvieron ms del 40% de alumnos en nivel avanzado. Esto quiere decir que en estos pases una buena parte de sus estudiantes son capaces de aplicar los conocimientos matemticos para resolver problemas complejos. Tambin se observan diferencias signicativas en los desempeos de los estudiantes de ambos grados segn sector, zona y gnero. En los establecimientos educativos privados, zonas urbanas y entre los varones hay una mayor proporcin de estudiantes ubicados en los niveles medio, alto y avanzado con respecto a los colegios ociales, zonas rurales y las nias. Grco 1. Porcentajes de estudiantes de cuarto grado segn niveles de desempeo en matemticas de un conjunto de pases
Fuente: Base de datos TIMSS 2007. Clculos de la Direccin de Evaluacin del ICFES.
12
INFORMES
Grco 2. Porcentajes de estudiantes de octavo grado segn niveles de desempeo en matemticas de un conjunto de pases
Fuente: Base de datos TIMSS 2007. Clculos de la Direccin de Evaluacin del ICFES.
13
Evaluaciones Internacionales
Los nmeros entre parntesis corresponden a los errores estndar. Promedio signicativamente mayor que el promedio TIMSS Promedio signicativamente menor que el promedio TIMSS
Fuente: Martin, M. O. et. al. (2008). TIMSS 2007 International Science Report. Lynch School of Education. Boston College, Cuadro 1.1, pgina 34.
14
INFORMES
Los nmeros entre parntesis corresponden a los errores estndar. Promedio signicativamente mayor que el promedio TIMSS Promedio signicativamente menor que el promedio TIMSS
Fuente: Martin, M. O. et. al. (2008). TIMSS 2007 International Science Report. Lynch School of Education. Boston College, Cuadro 1.1, pgina 35.
15
Evaluaciones Internacionales
Tambin en ciencias se observaron diferencias signicativas por sector, zona y gnero. Los promedios de los estudiantes colombianos matriculados en establecimientos educativos privados son superiores a los de quienes asisten a colegios ociales; en cuarto la diferencia a favor de los primeros es de 68 puntos y en octavo sta es de 55 puntos. A su vez, en ambos grados los promedios son ms altos en las reas urbanas: la diferencia a favor de stas es de 32 puntos en cuarto y 39 en octavo. Los promedios de los nios de cuarto y octavo fueron 408 y 435, mientras que los de las nias fueron, respectivamente, 393 y 400 (Tabla 10). Tabla 10. Promedios de los estudiantes colombianos en ciencias segn sector, zona y gnero
Grado Colombia 400 417 Sector Ocial 389 407 Privado 457 462 Diferencia 68 55 Urbana 408 422 Zona Rural 376 383 Diferencia 32 39 Nias 393 400 Gnero Nios 408 435 Diferencia 15 35
Cuarto Octavo
Fuente: Base de datos internacional TIMSS 2007. Clculos de la Direccin de Evaluacin del ICFES.
Con respecto a los niveles de desempeo en ciencias, la Tabla 11 contiene la denicin general de cada uno, as como los puntajes en los que se sitan. Singapur y Taipi lograron los porcentajes ms altos de estudiantes de cuarto grado ubicados en el nivel avanzado: 36% y 19%, respectivamente. En octavo, Taipi y Singapur tuvieron el 32% y el 25% de sus estudiantes en nivel avanzado. Esto signica que una proporcin signicativa de los alumnos de estos pases maneja conceptos y procesos cientcos complejos. En Colombia solamente el 1% de los estudiantes de cuarto lleg al nivel avanzado, el 5% al nivel Tabla 11. Niveles de desempeo en la prueba de ciencias. Qu saben y saben hacer los estudiantes en cada nivel?
Nivel de desempeo Cuarto grado Aplican conocimientos y la comprensin de procesos cientcos y sus relaciones en la indagacin cientca bsica Octavo grado Demuestran conocimientos complejos y abstractos en biologa, qumica, fsica y ciencias de la Tierra Demuestran comprensin conceptual sobre algunos ciclos, sistemas y principios cientcos Reconocen y comunican conocimiento cientco bsico en un conjunto de tpicos Reconocen algunos hechos bsicos sobre las ciencias fsicas y de la vida Muestran un conocimiento de las ciencias inferior al mnimo que permite describir la prueba de TIMSS 2007
Alto Aplican el conocimiento y la comprensin para explicar (entre 550 y 624 puntos) fenmenos cotidianos Medio Aplican conocimientos y comprensiones bsicos a situaciones (entre 475 y 549 puntos) prcticas de las ciencias Bajo Tienen conocimientos elementales sobre las ciencias (entre 400 y 474 puntos) Inferior (399 puntos o menos) Muestran un conocimiento de las ciencias inferior al mnimo que permite describir la prueba de TIMSS 2007
Fuente: Mullis, I. V. S. et. al. (2008). TIMSS 2007 International Science Report. Lynch School of Education. Boston College, Cuadro 2.1, p. 69.
16
INFORMES
alto, y el 16% al nivel medio. El 49% se qued en el nivel inferior. En octavo el 1% lleg al nivel avanzado, el 3% al nivel alto, y el 18% al nivel medio. El 41% se qued en nivel inferior (Grcos 3 y 4). Grco 3. Porcentajes de estudiantes de cuarto grado segn niveles de desempeo en ciencias de un conjunto de pases
Fuente: Base de datos TIMSS 2007. Clculos de la Direccin de Evaluacin del ICFES.
Grco 4. Porcentajes de estudiantes de octavo grado segn niveles de desempeo en ciencias de un conjunto de pases
Fuente: Base de datos TIMSS 2007. Clculos de la Direccin de Evaluacin del ICFES.
17
Evaluaciones Internacionales
Al igual que en matemticas, tambin se observan diferencias signicativas en los desempeos de los estudiantes de ambos grados segn sector, zona y gnero. En los planteles privados, las zonas urbanas y entre los varones hay una mayor proporcin de estudiantes ubicados en los niveles medio, alto y avanzado.
Fuente: Base de datos TIMSS 2007. Clculos de la Direccin de Evaluacin del ICFES.
18
INFORMES
Tambin se dieron progresos importantes en cuanto a la distribucin de los estudiantes segn niveles de desempeo. En matemticas, en 1995 el 70% de los estudiantes se ubic en nivel inferior, mientras que en 2007 esta proporcin baj al 61%; adems, se dio un incremento de siete y dos puntos porcentuales, respectivamente, en los niveles bajo y medio. Por su parte, en ciencias tambin baj el porcentaje de estudiantes en nivel inferior, pasando del 51% al 41% en el perodo, en tanto que aument el de alumnos en niveles bajo y medio (Grco 5). Los resultados de hombres y mujeres tambin mejoraron signicativamente en el perodo considerado; sin embargo, persisten las diferencias a favor de los primeros, tanto en ciencias como en matemticas (Grcos 6 y 7). Grco 6. Evolucin de los promedios de los estudiantes colombianos de octavo grado en matemticas, por gnero, 1995 - 2007
Fuente: Base de datos TIMSS 2007. Clculos de la Direccin de Evaluacin del ICFES.
Grco 7. Evolucin de los promedios de los estudiantes colombianos en ciencias, por gnero, 1995 - 2007
Fuente: Base de datos TIMSS 2007. Clculos de la Direccin de Evaluacin del ICFES.
19
Evaluaciones Internacionales
20
INFORMES
manifestaron lo opuesto fue de 425. En matemticas la situacin es muy similar: el 69% que inform tener una actitud muy positiva hacia esa disciplina tuvo un promedio de 385, y quienes reportaron lo contrario tuvieron 380 puntos. En este tema se observan coincidencias con los resultados de nuestro pas en PISA, en cuanto a que la gran mayora de los estudiantes colombianos valora positivamente las ciencias. Este es, sin duda, un elemento que facilita los aprendizajes; sin embargo no es suciente para lograr buenos promedios.
Ambiente escolar:
A nivel internacional, los resultados de los estudiantes son mejores cuando los rectores y los docentes tienen una percepcin positiva sobre el clima escolar, estn satisfechos con su trabajo y poseen altas expectativas acerca del logro de sus estudiantes. Los promedios son ms altos entre los estudiantes que asisten regularmente a las clases. En Colombia el promedio en matemticas para octavo grado de quienes tienen un alto ndice de asistencia es de 404, en tanto que el de los que tienen baja asistencia es de 369. En ciencias los promedios son de 442 y 406, respectivamente. Hay una asociacin positiva entre los resultados y la percepcin de los estudiantes con respecto a sentirse seguros en el interior de sus colegios. En Colombia, los promedios en matemticas de los estudiantes de cuarto grado que se sienten muy seguros es de 377, mientras que el de los que se sienten poco seguros es de 344. En octavo los promedios son 386 y 378, respectivamente. En ciencias los promedios en cuarto grado son 425 para quienes se sienten muy seguros, y 386 para quienes se sienten poco seguros. En octavo son 422 y 417, respectivamente. Estos resultados son consistentes con los hallazgos obtenidos en el SERCE 2006 (Segundo Estudio Regional Comparativo y Explicativo, en el que participa la mayora de pases latinoamericanos) en el que fueron evaluados estudiantes de tercero y sexto grados de 16 pases en lectura, matemticas y ciencias. All se pudo establecer que un buen clima escolar est altamente asociado con buenos resultados de los estudiantes de nuestro continente. Los promedios son ms altos cuando hay disponibilidad de recursos para ensear matemticas y ciencias. En Colombia, el 9% de los docentes de matemticas de cuarto grado report tener recursos sucientes para realizar sus clases; para este grupo el promedio de los estudiantes fue de 441, en tanto que el de los alumnos cuyos docentes informaron no contar con recursos (el 40% de ellos) fue de 330. En octavo la tendencia es
21
Evaluaciones Internacionales
similar: el promedio es 399 cuando se reporta disponibilidad adecuada de recursos (16% de los casos), y de 354 cuando los docentes (31%) informan que no cuentan con ellos para realizar sus actividades pedaggicas. Lo mismo ocurre en el caso de ciencias.
22
INFORMES
23
Calle 17 No. 3-40 Telfono:(57-1)338 7338 Fax:(57-1)283 6778 Bogot - Colombia www.icfes.gov.co