Professional Documents
Culture Documents
INFORME DE RESULTADOS
Edita: ISEI-IVEI
Elaboracin: Francisco Luna, M Dolores Damborenea y Joserra Ugarriza.
Apoyo tcnico: Eduardo Ubieta.
Instituto Vasco de Evaluacin e Investigacin Educativa
Asturias, 9 3 - 48015 BILBAO
info@isei-ivei.net - http://www.isei-ivei.hezkuntza.net
Otro de los objetivos del proyecto PISA es disponer de datos relevantes y fiables para la
toma de decisiones en el campo de la poltica por parte de las administraciones de los pases
participantes para orientar los procesos de enseanza-aprendizaje.
Aunque se centra en tres mbitos (Lectura, Ciencias y Matemticas) por ser materias
comunes a todos los sistemas educativos, una de las caractersticas de esta evaluacin es que
no es esencialmente curricular. Los tems estn formulados de tal manera que su resolucin no
est directamente unida a los currculos especficos de cada rea; tienen ms un carcter
transversal, que permite evaluar la funcionalidad de lo aprendido para responder a situaciones
reales que se plantean en la vida cotidiana.
Pases OCDE: Alemania, Australia, Austria, Blgica, Canad, Chile, Corea del Sur, Dinamarca,
Eslovenia, Espaa, Estados Unidos de Amrica, Estonia, Finlandia, Francia, Grecia, Hungra, Irlanda,
Islandia, Israel, Italia, Japn, Letonia, Luxemburgo, Mxico, Noruega, Nueva Zelanda, Pases Bajos,
Polonia, Portugal, Reino Unido, Repblica Checa, Repblica Eslovaca, Suecia, Suiza y Turqua.
Pases asociados y economas: Albania, Argelia, Argentina, Brasil, Bulgaria, Catar, China (Beijing,
Jiangsu, Guangdong y Shanghai), Chipre, Colombia, Costa Rica, Croacia, Emiratos rabes Unidos,
Federacin Rusa, Georgia, Hong Kong (China), Indonesia, Jordania, Kazajistn, Kosovo, Lbano, Lituania,
Macao (China), Malasia, Malta, Moldavia, Per, Repblica de Macedonia, Repblica de Montenegro,
Repblica Dominicana, Rumana, Singapur, Tailandia, Taipei (China), Trinidad y Tobago, Tnez, Uruguay
y Vietnam.
2000: 43 pases
2003: 45 pases
2006: 57 pases
2009: 75 pases
2012: 65 pases
2015: 72 pases Granate: pases OCDE
Rosa oscuro: pases no
pertenecientes a la OCDE
En la edicin 2015 de PISA, por vez primera, han tomado parte todas las comunidades
autnomas. La evolucin en la participacin ha sido la siguiente:
Esta concepcin implica una evaluacin en competencias que va ms all del aprendizaje
curricular y en contenidos puesto que se plantean unidades de evaluacin para cuyas
respuestas es preciso aunar todos los tipos de aprendizajes, destrezas, actitudes, etc. que el/la
estudiante posee para mostrar un conocimiento que le permita resolver la situacin-problema
que se le plantea. En PISA las competencias toman la siguiente definicin:
Competencia matemtica:
Hace referencia a la capacidad de la persona para formular, emplear e interpretar las matemticas
en distintos contextos. Incluye el razonamiento matemtico y la utilizacin de conceptos,
procedimientos, datos y herramientas matemticas para describir, explicar y predecir fenmenos.
Ayuda a las personas a reconocer el papel que las matemticas desempean en el mundo y a emitir
los juicios y las decisiones bien fundadas que los ciudadanos/as constructivos/as, comprometidos/as y
reflexivos/as necesitan.
Competencia lectora:
Competencia cientfica:
Hace referencia a la capacidad de las personas para involucrarse en temas relacionados con la
ciencia y con las ideas de la ciencia, como un/a ciudadano/a reflexivo. Una persona con conocimientos
cientficos est dispuesta a participar en un discurso razonado sobre ciencia y tecnologa, lo cual
requiere las competencias para: (1) Explicar fenmenos cientficamente: reconocer, ofrecer y evaluar
explicaciones para una serie de fenmenos naturales y tecnolgicos. (2) Evaluar y disear la
investigacin cientfica: describir y evaluar las investigaciones cientficas y proponer formas de abordar
cientficamente las cuestiones; y (3) interpretar datos y pruebas cientficas: analizar y evaluar datos,
alegaciones y argumentos en una variedad de representaciones y sacar conclusiones cientficas
adecuadas.
La evaluacin PISA proporciona distintos tipos de resultados, entre los que se encuentran:
(1) Indicadores bsicos del perfil de conocimientos y destrezas del alumnado de 15 aos; (2)
Indicadores contextuales que relacionan los resultados con las caractersticas de los
estudiantes y los centros segn variables demogrficas, sociales, econmicas y educativas; y (3)
Indicadores de tendencia resultantes de la recogida de datos y que muestran los cambios en
los niveles de resultados y la distribucin.
Para expresar los resultados de la evaluacin, PISA emplea una escala que tiene de media
500 puntos y desviacin tpica 100 puntos, es decir, una escala N (500,100). Estos valores son
totalmente arbitrarios y bien pudieran ser otros cualesquiera, por ejemplo N (250, 50), como
en la Evaluacin de diagnstico del Pas Vasco.
Para paliar las limitaciones de expresar los resultados del alumnado en una escala numrica
simple, y basndose en una teora de cmo se desarrolla la competencia y en una
interpretacin post hoc de lo que las preguntas de dificultad creciente parecen estar midiendo,
PISA emplea metodologas de punto de corte en la escala para expresar los resultados del
alumnado en trminos de niveles de rendimiento.
Estos niveles describen la progresin de las competencias del alumnado y son, por tanto,
jerrquicos e inclusivos. Es decir, el alumnado ubicado en un nivel mayor demuestra ms
dominio que el alumnado de niveles inferiores y, al tiempo, domina las competencias de los
niveles previos. Se trata de un producto bien elaborado que est basado en el anlisis de la
tarea o tipo de respuesta que demanda cada pregunta y organizado en torno a cuatro factores.
Adems de las pruebas cognitivas, en PISA se aplican tambin cuestionarios destinados tanto
al alumnado como a otros miembros de la comunidad escolar.
Qu evolucin ha tenido PISA de 2006 a 2015, ediciones en las que se centr en Ciencias?
2006 2015
Nmero de pases
57 72
participantes
Pas con el resultado ms alto
Finlandia (563) Singapur (556 puntos)
en Competencia cientfica
LA PRUEBAS
En PISA 2015, como se ha sealado, todas las pruebas se hicieron por primera vez en
ordenador. A cada estudiante se le asign una prueba de dos horas, compuesta por cuatro
bloques de treinta minutos cada uno. El alumnado que complet la Competencia financiera tuvo
65 minutos adicionales para hacer esa prueba.
Las pruebas son una combinacin de preguntas de opcin mltiple y otras en las que los
alumnos y alumnas tienen que elaborar sus propias respuestas. En 2015, algunas respuestas son
LOS CUESTIONARIOS
En PISA 2015 se aplicaron unos cuestionarios de carcter obligatorio para todos los pases
participantes y otros que se ofrecieron de manera opcional:
Cuestionarios obligatorios:
Cuestionarios opcionales.
- Cuestionario de profesorado: para obtener ms informacin, algunos pases o
economas decidieron distribuir un cuestionario a su profesorado, uno para el
profesorado que imparta ciencias y otro para el resto del profesorado. Fue la
primera vez que este cuestionario de profesorado, opcional, se ofreci a los pases
participantes.
- Cuestionario de familias: a quienes se pidi que facilitasen informacin sobre su
percepcin respecto al centro escolar de sus hijos e hijas y su participacin en el
mismo, su apoyo en casa, y las expectativas de carrera de sus hijos e hijas,
especialmente en ciencias.
- Cuestionario de alumnado:
- Cuestionario de familiaridad y empleo de las tecnologas de la informacin y
la comunicacin (TIC).
- Cuestionario sobre la trayectoria educativa (TE) del alumnado hasta la
fecha, incluyendo las interrupciones en sus estudios, y cmo se estn
preparando para una futura carrera.
En el caso del Pas Vasco, en todos los centros participantes se aplic el cuestionario de
alumnado y de centro; sin embargo, solamente 14 centros (los correspondientes a la muestra
estatal) completaron todos los cuestionarios, tanto los obligatorios como los opcionales.
El cuestionario de centro no fue respondido por 26 de los 119 centros de la muestra 2015
(25 de ellos correspondan a la muestra del Pas Vasco y 1 a la muestra estatal). La aplicacin
informtica de este cuestionario, que se hizo por ordenador, fue gestionada directamente por
la empresa contratada por el Ministerio de Educacin para esta fase de la evaluacin, por lo
que el ISEI-IVEI no tuvo posibilidad de controlar su desarrollo, como es habitual en otras
evaluaciones.
El proceso de aplicacin de PISA 2015 tiene tres diferencias fundamentales con respecto a
los procesos de aplicacin de ediciones anteriores:
Contratacin de dos empresas diferentes. Hasta PISA 2015, la misma empresa aplic las
pruebas al alumnado de la muestra estatal y al alumnado de la muestra ampliada de
Euskadi. Esta edicin de PISA, el Instituto Nacional de Evaluacin Educativa (INEE)
decidi contratar una empresa para aplicar las pruebas a todo el alumnado de la muestra
estatal por lo que ha habido dos empresas que han desarrollado la aplicacin de las
pruebas en Euskadi: la empresa estatal y la empresa contratada para la aplicacin de las
pruebas al alumnado de la muestra ampliada de Euskadi.
Aplicacin en soporte informtico. La aplicacin de las pruebas de evaluacin PISA en
soporte informtico ha requerido la contratacin de empresas que pudieran dotar a los
centros de la infraestructura necesaria para ello. De esta manera, las empresas
contratadas llevaron a los centros los ordenadores necesarios para la realizacin de las
pruebas.
Contrato de una tercera empresa a nivel estatal para realizar el proceso de correccin.
El Instituto Nacional de Evaluacin Educativa (INEE) decidi contratar una tercera
empresa que fuera la encargada de realizar todo el proceso de correccin, tanto del
alumnado de la muestra estatal como del alumnado de las muestras ampliadas de las
Comunidades Autnomas. Hasta el 2015, el ISEI-IVEI se haba responsabilizado del
proceso de correccin del alumnado de Euskadi seleccionado para participar en la
evaluacin de PISA, tanto de la formacin inicial del personal contratado para la
correccin como de la supervisin de todo el proceso. De todas formas, hay que
sealar que PISA establece unos criterios y unos procesos muy estrictos de correccin
que deben seguir todos los pases participantes.
Actividad Tiempo
Acceso del alumnado, claves, distribucin de los
15 minutos (aproximadamente)
materiales y presentacin de la prueba
Primera seccin de la prueba cognitiva 60 minutos (exactamente)
Breve descanso Unos 5 minutos
Introduccin a la Seccin 2 de la prueba cognitiva 5 minutos (aproximadamente)
Segunda seccin de la prueba cognitiva 60 minutos (exactamente)
Descanso 15 minutos (aproximadamente)
Cuestionario del alumnado 35 minutos + 20 minutos (aproximadamente)
Recogida de los materiales y fin de la sesin 5 minutos (aproximadamente)
Total 3 horas 50 minutos
Actividad Tiempo
Acceso del alumnado, claves, y presentacin de la 15 minutos (aproximadamente)
prueba
Completar la evaluacin de Competencia financiera 65 minutos (exactamente)
Recogida de los materiales y fin de la sesin. 5 minutos (aproximadamente)
Total 1 hora 25 minutos (aproximadamente)
MODELOS LINGSTICOS
ALUMNADO TOTAL
A B D
MODELOS LINGSTICOS
CENTROS TOTAL
A B D
RED PBLICA 10 8 33 51
RED CONCERTADA 21 25 22 68
TOTAL 31 33 55 119
La muestra de PISA 2015 del Pas Vasco fue distinta de la utilizada en anteriores ediciones.
El cambio fundamental consisti en que, al contrario que en las ediciones de 2003 a 2012, en la
ltima edicin se seleccion una muestra estratificada por redes educativas y modelos
lingsticos, pero no por los seis estratos empleados en las muestras de las ediciones
anteriores.
A continuacin, se presenta un anlisis comparativo, segn diferentes variables, del total del
alumnado de 15 aos de Euskadi en 2012 y en 2015 (que corresponde a lo que se denomina
como muestra ponderada). Es necesario tener en cuenta que para el clculo de los resultados
se utiliza la muestra ponderada, de forma que la muestra final refleje lo ms fielmente posible
el peso real de toda la poblacin de 15 aos en cada una de las variables muestrales objeto de
anlisis. Como se ha sealado anteriormente, en 2015 haba 17.424 alumnos y alumnas de 15
aos, 1.281 estudiantes ms de esta edad que en 2012.
80,0
2012 2015 57,4 61,6
60,0
0,0
Mod A Mod B Mod D
Los estratos D pblico y B y D concertado son los tres nicos estratos que aumentan
su porcentaje de alumnado respecto de 2012.
Dentro de cada una de las redes educativas, la distribucin porcentual de cada uno de los
estratos en PISA 2015 es el que se muestra en los grficos siguientes.
Grfico 2.2.d. PISA 2015. Porcentaje de Grfico 2.2.e. PISA 2015. Porcentaje de
alumnado de los estratos de la red pblica. alumnado de los estratos de la red
concertada.
8,6
8,0 14,3
Modelo A Modelo A
Modelo B Modelo B
44,4
Modelo D Modelo D
83,4 41,3
El ISEC del conjunto de los pases de la OCDE es el -0,04, muy cercano al de los pases de
la UE que es el -0,07. Islandia es el pas con el mayor ISEC, con 0,73 puntos, bastante por
encima del segundo pas que es Dinamarca (0,59), seguido de cerca por Canad (0,53) y
Noruega (0,48). 19 pases, entre ellos Espaa (-0,51) tienen un ISEC inferior a la media de la
OCDE.
Todas las comunidades autnomas, incluida Euskadi, tienen un ISEC que est por debajo de
la media de la OCDE y va desde el -0,10 de la Comunidad de Madrid al -0,87 del de Andaluca.
El ISEC de Euskadi (-0,25) es el segundo ms alto entre las comunidades autnomas.
Si se analiza esta misma variable por modelos lingsticos, el cambio ms brusco se produce
en el modelo A, que baja 0,41 puntos su ISEC y en el modelo D, cuyo descenso de 0,27 puntos
es lgicamente muy cercano a la media de Euskadi, ya que como hemos visto representa casi el
62% de toda la poblacin.
Finalmente, el anlisis de la evolucin por estratos muestra que la mayor variacin en este
ndice entre las dos ediciones se da en los tres estratos pblicos, y en el estrato A concertado.
Ninguno de los estratos concertados tiene en 2015 un ISEC inferior al ISEC medio de Euskadi,
mientras que ocurre lo contrario en el caso de los estratos pblicos.
Hay varios datos especialmente llamativos, por un lado, el nivel de ISEC del estrato A
pblico, que llega al -1,29; en segundo lugar, el descenso de nivel del estrato B pblico, que
pierde 0,66 puntos y finalmente el cambio considerable que se da en el estrato A concertado,
que de ser el que mayor ISEC tena en todas las ediciones PISA anteriores, pierde 0,38 puntos,
lo que nos indica un cambio sustantivo en la composicin socioeconmica de este estrato.
Para que se pueda apreciar de una manera ms completa la evolucin del ISEC en cada uno
de los estratos, en el siguiente grfico se presenta los datos correspondientes a todas las
ediciones en la que ha tomado parte el Pas Vasco con muestra ampliada.
0,43
0,5 0,29
0,18 0,2
0,05 0,03 0,03 0,11
0,09 0,06 0,03
0
0
-0,04 -0,01
-0,04
-0,1 -0,05
-0,17 -0,1 -0,14 -0,11 -0,06
-0,3 -0,22 -0,25
-0,5 -0,42-0,44 -0,32 -0,38
-0,46
-0,75
-0,71
-1 -0,89
-0,98 ISEC 2003 ISEC 2006 ISEC 2009 ISEC 2012 ISEC 2015
-1,5 -1,29
A pblico B pblico D pblico A Concertado B Concertado D Concertado Euskadi
La media 2015 de alumnado repetidor de los pases de la OCDE es del 12% y llega hasta el
15% en los pases de la UE 28. En Espaa, este porcentaje sube hasta el 31%, mientras que el
Pas Vasco tiene un 24,3% de alumnado en situacin no idnea.
En el grfico siguiente, se muestran los porcentajes de alumnado de 15 aos que tiene cada
comunidad autnoma en los tres cursos de la ESO en los que hay alumnado que ha participado
Grfico 2.3.2.b. PISA 2015. Porcentaje de alumnado por niveles educativos en cada CCAA
(ordenado por % en 4 de ESO).
90,0
77,8 75,8 74,9
80,0 71,2 68,3
68,0 67,9 66,9 66,4 65,3
70,0 63,3 62,6 62,3 62,1 61,4 61,3 60,3
56,8
60,0
50,0
40,0 29,2 28,0 26,3 26,2 28,3 27,2 27,3 30,6
30,0 23,4 23,4 24,4 24,3 23,8 26,8
19,1 18,1 19,2 20,5
20,0 11,4 11,8 10,3 11,6 12,3 12,5
6,1 5,9 8,2 8,4 8,6 7,7 8,8 9,8 7,9 7,5 9,4
10,0 3,1
0,0
Los porcentajes segn el sexo del alumnado son prcticamente idnticos en ambas
ediciones, solo se da un cambio de 0,2 puntos de aumento en el porcentaje de chicas en 2015.
40,0
20,0
0,0
CHICA CHICO
En el caso del alumnado vasco, la lengua de la prueba puede ser euskara o castellano y, en la
gran mayora de los casos, est relacionada con su lengua familiar. El criterio general es que
slo el alumnado que se identifica como vascfono familiar contesta a las pruebas en la versin
en lengua vasca, mientras que todo el resto del alumnado, tanto los que tienen el castellano
como lengua familiar como quienes tienen otras lenguas familiares, contestan a las pruebas en
castellano. Sin embargo, en la edicin 2015 ha respondido a las pruebas en euskara no solo el
alumnado vascfono familiar, sino tambin una parte del alumnado castellano hablante familiar.
60 +9,1
40
25,3
16,2
20
0
Euskara Castellano
Para identificar la lengua familiar de cada alumno o alumna, se utiliza la respuesta dada en el
cuestionario del alumnado a la pregunta Cul es la lengua que ms utilizas en casa? Por lo tanto,
se trata de una atribucin lingstica realizada por parte del propio alumnado, en la que no se
sigue el protocolo que habitualmente el ISEI-IVEI utiliza en las evaluaciones de diagnstico a
partir de un cuestionario con mayor nmero de preguntas.
En los dos siguientes grficos se muestra el porcentaje de alumnado segn su lengua familiar
sea el euskara, el castellano u otra lengua, comparando los datos correspondientes a la edicin
de 2012 y de 2015. Si se toma en consideracin la muestra de toda la poblacin de una a otra
edicin, se ha reducido en 2,4 puntos porcentuales el alumnado que seala el euskara como su
lengua de uso en el mbito familiar. Este descenso es an ms acusado si se analizan los
porcentajes solo del alumnado del modelo D, ya que se observa una bajada de 6,4 puntos
porcentuales.
60,0
40,0
20,6 18,2
20,0
3,2 4,0
0,0
Euskara Castellano Otra lengua
% 2012 ponderado % 2015 ponderado
40 34,6 36,4
34,3
27,9
30
20
20,0 21,2 20,6
18,2
10
0
PISA 2006 PISA 2009 PISA 2012 PISA 2015
Si se toma como referencia toda la poblacin, se observa que la edicin en la que haba un
mayor porcentaje de alumnado vascfono familiar fue 2009, producindose un progresivo
descenso en la dos ediciones siguientes, hasta llegar al 18,2% de 2015. El descenso es an ms
acusado si se analiza especficamente la evolucin en el modelo D, ya que de 2009 a 2015 se
reduce en 8,5 puntos porcentuales.
PISA, como otros estudios, distingue entre alumnado inmigrante y alumnado nativo y, en
trminos generales, define como alumnado inmigrante a quien no ha nacido en el pas donde se
aplica la prueba y que adems tiene un padre o/y madre no nacidos en dicho pas. Esta
condicin se tiene en cuenta desde el momento de establecer la muestra representativa de
cada pas, ya que se requiere un mnimo de conocimiento del idioma y una insercin escolar
mnima para poder tomar parte en esta evaluacin.
Sin embargo, dada la complejidad de estas categoras, cada vez menos precisas, entre el
alumnado inmigrante se distingue dos tipos: alumnado inmigrante de primera generacin, para
quienes tanto el alumno o alumna como sus padres han nacido en el extranjero, y alumnado
inmigrante de segunda generacin, para quienes ya han nacido en el pas en el que se realiza la
prueba y sus padres en el extranjero.
Como se ha sealado anteriormente, la muestra PISA 2015 del Pas Vasco ha cambiado,
tanto en cuanto a su nivel de estratificacin como en cuanto al nmero de alumnos y alumnas
y de centros que tomaron parte en la aplicacin. Esta circunstancia, por supuesto, no afecta ni
a la representatividad y comparabilidad de los resultados con ediciones anteriores y a nivel
internacional, ni a la consistencia estadstica de los anlisis internos. Es una muestra
seleccionada y controlada totalmente por la organizacin internacional, tanto de los centros
seleccionados como de los posibles sustitutos, as como de los alumnos y alumnas de 15 aos
que tuvieron que participar en la evaluacin. El Departamento de Educacin, a travs del ISEI-
IVEI, solo indic, en su momento, el nivel de estratificacin de la muestra.
A pesar de todos estos controles, este cambio de criterio en la muestra entre 2012 y 2015
podra generar dudas sobre su representatividad respecto a la totalidad del sistema educativo
vasco, con la consecuencia de que esta decisin pudiera haber afectado a los resultados de
nuestro sistema. Para verificar este aspecto, en el anlisis vamos a utilizar una referencia clave
de rendimiento:
El grfico 2.4. recoge los resultados en ED15 de los centros con alumnado PISA 2015 y el de
la totalidad del alumnado de 2 de ESO de la ED15.
270,0
253,5 253,4
246,1 248,6 246,3 246,0
250,0 241,5 240,9
230,0
210,0
190,0
170,0
150,0
C.L. Euskara C.L. Castellano C. Matemtica C. Cientfica
Las diferencias son muy pequeas (0,1 en Castellano, 0,3 en Matemticas y 0,6 en Ciencias),
solo destaca el comportamiento en Euskara, donde el resultado del alumnado PISA 2015 es 2,5
puntos peor que el del censo ED15. En cualquier caso, las diferencias no parecen ser
determinantes, lo que confirmara la buena representatividad de la muestra PISA 2015 como
referencia para valorar el rendimiento del sistema educativo vasco en los mbitos evaluados.
- El estudio PISA fija su atencin en un rea determinada en cada edicin, sentando las
bases para posteriores evaluaciones, pero hay tener algn cuidado con las
comparaciones entre resultados intermedios por el desequilibrio entre los tems
utilizados para medir la competencia. Por lo tanto, la comparacin ms consistente en
esta edicin de 2015 es la que se establece entre los datos en Competencia cientfica
entre 2006 y 2015, ya que en ambos aos esta competencia fue rea central de
evaluacin. En las otras dos competencias, el aspecto clave a observar es la tendencia
en la evolucin de los resultados. En cada grfico se marca con una estrella amarilla las
ediciones en las que cada competencia ha sido rea central de evaluacin.
- Para interpretar los resultados es imprescindible tener en cuenta la significatividad de
las diferencias de puntuacin. Hablamos de diferencia estadsticamente significativa con
un nivel de confianza del 95% cuando podemos afirmar que en 95 veces de cada 100
mediciones que realicemos el valor considerado se va a encontrar en un entorno del
mismo +/- 1,96 veces el error. Esto quiere decir que si, por ejemplo, tenemos en una
competencia un resultado de 483,1 puntos, con un error de 3,02, podemos afirmar
que si hiciramos la prueba a cien muestras distintas de nuestro alumnado, en 95
ocasiones la puntuacin se encontrara entre 477,2 y 489 puntos (483,1 +/- 3,02*1,96).
La misma diferencia de puntos entre dos resultados no siempre da como consecuencia
un mismo nivel de significatividad, ya que depende del error muestral de las mediciones
que se comparen. Veamos varios ejemplos:
En las dos primeras ediciones de PISA (2000 y 2003), la Competencia cientfica se defini
como: la capacidad de utilizar el conocimiento cientfico para identificar preguntas y extraer
conclusiones basadas en pruebas con el fin de comprender y ayudar a tomar decisiones sobre el
mundo natural y los cambios realizados en el mismo a travs de la actividad humana.
En PISA 2006, coincidiendo con el hecho que la competencia principal era la cientfica, la
expresin conocimiento cientfico fue dividida en dos componentes: el conocimiento de la
ciencia y el conocimiento sobre la ciencia y la definicin se vio reforzada al incluir el
conocimiento sobre la relacin entre la ciencia y la tecnologa.
550
506
495 495
500 484 483
450
400
350
300
2003 2006 2009 2012 2015
510
500
506
500 500 501 501
490 496
495 495 493 493
480 487 488 488
484 483
470
460
OCDE /Espaa/Euskadi OCDE/Espaa/Euskadi OCDE/Espaa/Euskadi OCDE/Espaa/Euskadi OCDE/Espaa/Euskadi
400
300
200
100
0
PISA 2003 PISA 2006 PISA 2009 PISA 2012 PISA 2015
En el grfico 3.1.1.d., se recogen las puntuaciones medias obtenidas por todos los pases de
la OCDE que han tomado parte en la edicin 2015, as como los resultados de las 17
comunidades autnomas. En el grfico, adems de la puntuacin media, se reflejan los
intervalos de confianza al 95% para la media de la poblacin evaluada. Se destaca por medio de
una columna vertical de color rosa el intervalo de confianza del Pas Vasco.
Los resultados del Pas Vasco no tienen diferencia significativa con los de Luxemburgo,
Hungra, Italia, Federacin Rusa, Lituania y las comunidades de Extremadura, Islas Baleares,
Andaluca, Islas Canarias y Murcia.
Japn (538)
Estonia (534)
Finlandia (530)
Canad (527)
Castilla y Leon (518)
Corea del Sur (515)
Madrid (515)
Nueva Zelanda (513)
Eslovenia (512)
Navarra (511)
Galicia (511)
Australia (509)
Reino Unido (509)
Alemania (509)
Pases Bajos (508)
Aragon (507)
Suiza (505)
Catalua (504)
Irlanda (502)
Belgica (501)
Dinamarca (501)
Polonia (501)
Asturias (501)
Portugal (501)
Noruega (498)
Rioja (La) (498)
Castilla-La Mancha
Estados Unidos (496)
Cantabria (495)
Austria (495)
Francia (494)
C. Valenciana (494)
Suecia (493)
Republica Checa (492)
Espaa (492)
Balears (Illes) (484)
Murcia (483)
EUSKADI (483)
Luxembourgo (482)
Italia (480)
Hungra (476)
Canarias (475)
Extremadura (474)
Islandia (473)
Andaluca (473)
Israel (466)
Eslovaquia (460)
Grecia (454)
Chile (446)
Turqua (425)
Mexico (415)
UE 28 (494)
OCDE (493)
No hay duda, por lo tanto, de que, tal y como hemos visto, los resultados de Euskadi en
2015 no han sido positivos. Sin embargo, hay que tener en cuenta tambin que los resultados
en Competencia cientfica de la mayora de los pases de la OCDE, incluidos casi todos los pases
de la Unin Europea (UE), han empeorado su rendimiento en estos ltimos tres aos. En el
grfico 3.1.1.e., de la pgina siguiente, se muestran las diferencias entre la puntuacin de 2012 y
de 2015 en esta competencia.
Si comparamos los resultados de 2015 con los de 2006, momento en el que fue por vez
primera rea central de evaluacin (ver grfico 3.1.1.f.), observamos que 24 pases de la OCDE
han empeorado sus resultados en estos nueve aos, en algunos casos de forma muy llamativa,
como Finlandia, que ha bajado 32 puntos, la mayor bajada de toda la OCDE.
Por comunidades autnomas, hay 10 que han participado en 2006 y en 2015, de las que
solo dos (Catalua y Galicia) mejoran sus resultados en estos nueve cursos. 7 comunidades
empeoran sus puntuaciones, en algunos casos de manera importante, caso de La Rioja, que
pierde 22 puntos o Cantabria, que baja 14. Euskadi en esta comparacin, como ya se ha
sealado, mejora sus posiciones respecto del grfico anterior, ya que su prdida de puntuacin
se reduce a la mitad, 12 puntos.
De la lectura y anlisis de todos estos datos, parece evidente que en la edicin de 2015 se
han dado algunas circunstancias especficas, probablemente de difcil identificacin, que quizs
hayan podido influir en esta situacin bastante generalizada de empeoramiento de los
resultados a nivel internacional.
Catalua 12
Portugal 12
Suecia 8
Murcia 4
Dinamarca 4
Aragn 3
Noruega 3
Canad 3
Chile 2
Islas Baleares 1
Mxico 1
Bulgaria 0
Galicia -1
Castilla y Len -1
EE.UU -1
Eslovenia -1
Madrid -2
Navarra -3
Israel -3
Espaa -3
Blgica -3
Nueva Zelanda -3
Francia -4
Chipre -5
Islandia -5
Reino Unido -5
Cantabria -6
Estonia -7
Luxemburgo -8
OCDE -8
Extremadura -9
Suiza -9
Japn -9
R. Eslovaca -10
Austria -11
Australia -11
La Rioja -12
Grecia -12
Letonia -12
Andaluca -13
Italia -13
Pases bajos -13
Finlandia -14
R. Checa -15
Alemania -15
Asturias -16
Croacia -16
Hungra -17
Irlanda -19
Lituania -21
Corea -22
Euskadi -23
Polonia -25
Turqua -38
-50 -40 -30 -20 -10 0 10 20
Portugal 27
Israel 13
Catalua 13
Bulgaria 12
Noruega 11
Chile 9
EE.UU 7
Japn 7
Mxico 6
Dinamarca 6
Galicia 6
Italia 6
Espaa 5
Polonia 3
Estonia 3
Turqua 1
Letonia 0
Navarra 0
Francia 0
Andaluca -1
Castilla y Len -2
Luxemburgo -3
Irlanda -5
Suiza -6
Reino Unido -6
Eslovenia -6
Aragn -6
Corea -6
Canad -6
Alemania -7
Asturias -7
OCDE -7
Blgica -8
Suecia -10
Euskadi -12
Lituania -13
Cantabria -14
Austria -16
Pases bajos -16
Australia -17
Nueva Zelanda -17
Islandia -18
Croacia -18
Grecia -18
R. Checa -20
La Rioja -22
Hungra -27
R. Eslovaca -27
Finlandia -32
-40 -30 -20 -10 0 10 20 30
En este apartado se establece una relacin entre las puntuaciones medias estimadas y la
variabilidad, que corresponde a la diferencia entre las puntuaciones medias en los percentiles
95 y 5. Se considera como buen sistema educativo aquel que es capaz no solo de obtener altas
puntuaciones medias, sino que adems tiene una baja variabilidad; es decir, que entre el
alumnado con la ms alta puntuacin (percentil 95) y el de ms baja puntuacin (percentil 5)
no hay grandes diferencias, lo que indica que es un sistema homogneo.
En el siguiente grfico se recoge esta relacin de todos los pases de la OCDE y de todas
las comunidades autnomas y se distinguen cuatro cuadrantes, situndose la media de la
OCDE en el centro:
- Cuadrante derecho superior, donde estn los pases y comunidades con resultados por
encima de la media y baja variabilidad, corresponde a una situacin que se podra
considerar como de excelencia educativa. Nos encontramos con pases como Estonia,
Canad, Irlanda o Dinamarca y 11 comunidades, entre ellas, Castilla-Len, Madrid,
Navarra o Galicia.
- Cuadrante izquierdo superior, que recogera a pases y comunidades con altos resultados,
pero con mayor diferencia entre percentiles extremos y, por lo tanto, menor
homogeneidad. Aqu nos encontramos pases y comunidades como Singapur, que a
pesar de tener los mejores resultados, la distancia entre sus extremos es mayor que la
media, Finlandia, Corea o Nueva Zelanda. En este cuadrante no se encuentra ninguna
comunidad autnoma.
- Cuadrante inferior derecho, donde se colocan los pases y comunidades con variabilidad y
resultados inferiores a la media, son sistemas equitativos, pero mediocres en
puntuacin. En esta apartado se encuentran 6 comunidades autnomas, incluido el Pas
Vasco, y a pases como Italia, Letonia o Islandia.
- Finalmente, el cuadrante inferior izquierdo, donde encontramos los sistemas educativos
con peores resultados y menor equidad. En este cuadrante no se encuentra ninguna
comunidad autnoma, pero s pases como Luxemburgo, Eslovaquia o Israel.
Euskadi presenta una variabilidad relativamente baja (279), la quinta ms baja entre todos
los pases y comunidades consideradas en el grfico. Su variabilidad es inferior a la media de la
OCDE, de Espaa y de la mayora de las comunidades autnomas, lo que le caracteriza como
un sistema bastante equitativo, pero cuyos resultados (483 puntos) deberan mejorar para
convertirse en un sistema de excelencia.
Japn
540 Estonia
Finlandia Canad
Resultados en Competencia cientfica
Castilla y Leon
520 Corea del Sur Madrid
Nueva Zelanda
Galicia Navarra
Reino UnidoAlemania
Australia Eslovenia Catalua
Suiza Dinamarca Aragon
Pases Bajos
Noruega
Belgica AsturiasPortugal Castilla-La Mancha
500 Francia Irlanda
Austria OCDE Rioja (La) Polonia Cantabria C. Valenciana
Suecia Estados Unidos Espaa
Mejores resultados
Union Europea Letonia
Balears (Illes)
Republica Checa
Luxembourgo Murcia EUSKADI
480 Italia Canarias
Hungra Extremadura
Islandia
Israel
460
Eslovaquia
Grecia
Chile
440
420 Turqua
400
350 330 310 290 270 250
Variabilidad (percentil 5-percentil 95) en Competencia cientfica
Para poder interpretar mejor lo que significan las puntuaciones medias asignadas a cada
sistema educativo, PISA establece una escala de niveles de rendimiento para cada competencia
evaluada. En la Competencia cientfica se describen siete niveles, del ms avanzado (nivel 6) al
ms elemental (nivel 1b). La definicin de estos niveles de rendimiento desempea un papel
clave para interpretar y valorar los resultados, puesto que en ella se describen los
conocimientos y competencias que debe tener el alumnado para alcanzar cada uno de los
niveles descritos, as como las destrezas necesarias y las tareas que deben realizar para
resolver los problemas planteados. La descripcin de los niveles de rendimiento se
corresponde con la dificultad de las preguntas o tems incluidos en cada uno de los niveles. En
el anexo I se puede encontrar una descripcin ms completa de los niveles de rendimiento de
la Competencia cientfica.
En 2012, Euskadi tena un 11,7% del alumnado en los niveles bajos de rendimiento en PISA,
tres puntos por debajo del 15% sealado como indicador 2020 de la Unin Europea2; sin
embargo, en 2015 se duplica este porcentaje y llega al 20%, alejndose bastante del indicador
europeo. En los niveles de excelencia, se produce una bajada menor, de 1,7 puntos
porcentuales.
2
La Estrategia Educacin y Formacin 2020 propuso utilizar la evaluacin PISA para valorar el rendimiento
educativo de los sistemas europeos, de forma que entre los objetivos educativos de la Unin Europea
para el ao 2020 se acord que el porcentaje de alumnos y alumnas de 15 aos con nivel 1 o inferior en
Competencia cientfica, en Comprensin lectora y en Competencia matemtica no debe superar el 15%.
60
61,4 61 65 60 52
62 51,4 51 53 53
40
20
15,7 16 14 20 19,3 19 18 18 22
12
0
2003 2006 2009 2012 2015 2003 2006 2009 2012 2015
Euskadi . OCDE
Nivel de excelencia 5-6 Nivel Alto 4 Nivel Medio 2-3 Nivel Bajo 1
El porcentaje de alumnado vasco en los niveles bajos de rendimiento siempre ha estado por
debajo de la media de los pases de la OCDE, incluso en 2015, ya que tambin la OCDE
incrementa en 4 puntos su porcentaje en estos niveles llegando hasta el 22%. En las anteriores
ediciones, la distancia de porcentajes entre Euskadi y la OCDE rondaba los 4 puntos
porcentuales, mientras que en 2015 se reduce esta diferencia a dos puntos, debido al
sustantivo incremento del dato del Pas Vasco. Segn la descripcin de niveles que realiza PISA,
quienes se encuentran en este nivel solo son capaces de reconocer algunos aspectos cientficos
de un fenmeno simple y familiar, de identificar modelos simples de unos datos dados o de
reconocer trminos bsicos y seguir instrucciones explcitas para realizar un procedimiento
cientfico.
En los niveles de excelencia, Euskadi siempre se ha situado por debajo de los porcentajes
de la ODCE. En todas las ediciones, salvo en 2012, el alumnado vasco con niveles de
excelencia es menos de la mitad que la media de la OCDE.
En los niveles de excelencia, como se puede apreciar en el grfico, el porcentaje del Pas
Vasco, 3%, es uno de los ms bajos entre todas las comunidades autnomas (ninguna tiene
menor porcentaje que Euskadi) y entre los pases de la OCDE, salvo Grecia, Turqua, Chile y
Mxico.
Cerca del 20% de los estudiantes de los pases de la OCDE rinde por debajo del nivel 2,
considerado el umbral bsico de competencias cientficas. En el nivel 2, los estudiantes pueden
recurrir a contenidos y procedimientos cientficos bsicos que conocen para identificar una
explicacin apropiada, interpretar datos y reconocer la cuestin que trata un experimento
simple. Segn la OCDE, asumido tambin como objetivo por la Unin Europea, todos los
estudiantes deberan alcanzar el nivel 2 de competencias al concluir la educacin obligatoria.
En la mayora de los pases para los que se dispone de datos comparables, el rendimiento
medio de los estudiantes en ciencias se ha mantenido prcticamente inalterado desde 2006. Sin
embargo, los resultados medios en ciencias mejoraron entre 2006 y 2015 en Colombia, Israel,
Macao (China), Portugal, Catar y Rumana. Durante este periodo, en Macao (China), Portugal y
Catar se increment la proporcin de estudiantes con resultados iguales superiores al nivel 5,
a la vez que se redujo la proporcin de estudiantes con rendimientos inferiores al nivel de
competencias bsicas (nivel 2).
A continuacin se presenta las puntuaciones obtenidas en todas las subescalas medidas por
PISA y la puntuacin media del Pas Vasco en la Competencia cientfica. Como se observa en el
grfico siguiente, todas las subcompetencias se sitan en torno a la puntuacin media, no hay
ninguna que se aleje ms de 3 4 puntos.
Grfico 3.1.4.a. PISA 2015 . Competencia cientfica. Puntuaciones y errores (nivel confianza
95%) por subcompetencias.
550
540
530
520
510
500
490
485 484 487
483 480 480 483 483
480 480
470
460
450
Evaluar y Explicar Interpretar Conocimiento Conocimiento Sistemas Sistemas Sistemas vivos Competencia
disear fenmenos datos y del Contenido procedimental terrestres y Fsicos Cientfica
investigacin cientficamente pruebas y epistmico espaciales
cientfica cientficamente
Evaluar y disear una investigacin cientfica implica hacer en primer lugar, un uso del
conocimiento para evaluar las investigaciones cientficas y decidir si se han seguido los
procedimientos necesarios para justificar las conclusiones a las que se lleguen. En segundo
lugar, las personas que tienen ese conocimiento deberan ser capaces de proponer una
investigacin adecuada a una pregunta cientfica.
Chicos Chicas
- El conocimiento del contenido, tanto del mundo natural como de los artefactos
tecnolgicos.
- El conocimiento procedimental y epistemolgico, es decir, el conocimiento de cmo se
producen las ideas y una comprensin de los fundamentos de los sistemas y la
justificacin para su uso.
La medida del conocimiento de la ciencia propuesto por PISA da a lugar a 2 escalas, cada
una de ellas para medir tanto el conocimiento del contenido, como el conocimiento procedimental y
epistemolgico.
400
OCDE
200 Euskadi
0
Conocimiento del Contenido Conocimiento procedimental y epistmico
- Sistemas fsicos
- Sistemas vivos
- Sistemas terrestres y espaciales
En el siguiente grfico se compara los resultados que de media ha obtenido el Pas Vasco
con la media de la OCDE, en las 3 subescalas que compone el Contenido de las ciencias. Se
En el grfico siguiente se pueden apreciar las diferencias entre la puntuacin obtenida por el
alumnado evaluado en 2012 y el evaluado en 2015 teniendo en cuenta dos variables: red
educativa y modelo lingstico en el que est escolarizado el alumnado. En las dos variables, los
anlisis se han realizado sobre la muestra ponderada. Como referencia se incluye tambin la
puntuacin media y la diferencia a nivel de Euskadi.
Grfico 3.1.5.a. PISA 2015. Competencia cientfica. Diferencias de puntuacin entre 2012
y 2015 por red educativa y por modelos lingsticos.
600,0 506 483 518 492 499 472 509 490 506 482 30
490 473
400,0 20
200,0 10
0,0 0
600,0 -30
Pas Vasco Pblica Concertada Modelo A Modelo B Modelo D
Red Modelo
2012 2015 Diferencia
Por modelos lingsticos, en Competencia cientfica, solo el modelo B sita sus resultados
por encima de la media de Euskadi, mientras que el modelo D est casi en esa media y el
resultados del modelo A es 11 puntos inferior a la media de la comunidad. Sin embargo, las
diferencias de puntuacin en 2015 entre los tres modelos lingsticos no son estadsticamente
significativas.
Si comparamos los resultados de 2012 y 2015 vemos que el modelo A pierde 26,6 puntos,
la mayor prdida entre todos los modelos. De manera muy cercana se sita el modelo D, con
una bajada de 23,6 puntos, pero al ser cinco veces mayor el peso en la muestra del modelo D
(61,6%) que del modelo A (12%), la parte ms importante de la bajada en la puntuacin global
de esta competencia est relacionada con el resultado obtenido por el alumnado del modelo
D. El modelo B es el que menos puntuacin pierde entre ambas ediciones, aunque es tambin
importante, 19 puntos.
PBLICOS CONCERTADOS
Entre los modelos lingsticos, se dan grandes diferencias por niveles de rendimiento,
especialmente en los niveles bajos: el modelo B es el que tiene un menor porcentaje de
alumnado de bajo rendimiento, casi 10 puntos porcentuales menos que el modelo A y casi 3
puntos menos que el modelo D. Por el contrario, en los niveles de excelencia los porcentajes
de los tres modelos lingsticos son muy cercanos, tambin en este caso es el modelo B el que
muestra unos mejores datos.
Grfico 3.1.5.c. PISA 2015. Competencia cientfica. Porcentaje de alumnado por niveles
de rendimiento segn modelo lingstico.
35,0
NIVEL BAJO 30,5 31,3 NIVEL DE EXCELENCIA
29,4 29,8 29,6
30,0 Modelo A: 26,1% Modelo A: 3,1%
Modelo B: 17,4% 25,9 Modelo B: 3,8%
25,0 Modelo D: 20,3% Modelo D: 3,1%
19,8
20,0 18,6
16,1 15,6 15,8
14,1
15,0
10,0
6,3
5,0 3,3 4,2 3,0 3,6 3,0
0,1 0,2 0,1
0,0
Nivel -1 Nivel 1 Nivel 2 Nivel 3 Nivel 4 Nivel 5 Nivel 6
Hay que recordar y tener en cuenta que, como se ha sealado, en 2015 se seleccion una
muestra estratificada por redes educativas y modelos lingsticos, pero no por los seis estratos
(red+modelo) empleados en las muestras de las ediciones anteriores. Aunque esta
En el grfico siguiente se presentan los resultados medios de 2012 y 2015 de cada estrato y
la puntuacin media de Euskadi en ambas ediciones. As mismo, se incluye la diferencia entre
ambas puntuaciones.
En 2015, todos los estratos concertados obtienen mejor puntuacin que cualquiera de los
estratos pblicos y sus resultados estn por encima de la media de Euskadi. Las puntuaciones
de los tres estratos de la red pblica, sin embargo, se sitan por debajo de la media de la
comunidad.
0,0 0 0
-11
-23 -24 -24 -24 -10
200,0
-39 -20
400,0
2012 2015 Diferencia -30
600,0 -40
Pas Vasco A Pblico B Pblico D Pblico A Concertado B Concertado D Concertado
Estrato
A pesar de estas diferencias de puntuacin, no en todos los casos son estadsticamente
significativas. En la siguiente tabla se muestra este aspecto:
Como se puede apreciar, solo el modelo A pblico muestra diferencias significativas con el
resto de los estratos, excepto con el B pblico. Los resultados del modelo B pblico son
significativamente ms bajos que los de los estratos de la red concertada. El modelo D pblico
Si se comparan los resultados de 2012 y 2105 en Competencia cientfica, todos los estratos
bajan su puntuacin, salvo el A pblico que mantiene su resultado. Las mayores diferencias se
dan en los tres estratos concertados y en el D pblico. Destaca la enorme bajada del estrato A
concertado que llega a los 39 puntos, aunque hay que tener en cuenta que este estrato
representa solo el 7,8% de la muestra ponderada y, por lo tanto, su influencia en la baja de
resultados medios de Euskadi es menor que la de otros estratos.
Si analizamos la diferencia de puntuacin entre 2012 y 2015 entre los dos estratos de cada
modelo, observamos que solo se mantiene la distancia de 11 puntos entre los dos estratos del
modelo D. En los otros dos modelos se reduce la distancia de puntuacin entre el estrato
pblico y el concertado: entre los estratos del modelo A, la diferencia de 94 puntos de 2012
pasa a ser en 2015 de 56 puntos; en el modelo B, pasa de 48 puntos en 2012 a 35 en 2015.
Por niveles de rendimiento, las diferencias de porcentaje entre los estratos en los niveles
bajos no superan el punto porcentual, todos estn entre el 20% y 21%. En los niveles de
excelencia, slo el modelo A pblico y concertado, con un 2,1%, se separa del porcentaje de
los modelos B y D de ambas redes, el 4,2%.
Grfico 3.1.6.b. PISA 2015. Competencia cientfica. Porcentaje de alumnado por niveles de
rendimiento segn estratos.
35
31 31 32 32
29 29 29
30 28 28 28
NIVEL BAJO NIVEL DE EXCELENCIA
25
20 18 18 18
16 16 16 16 16 15 15
15
10
5 4 5 5 4 5 4 4 4
2 2
0,1 0,2 0,2 0,1 0,2
0
Nivel -1 Nivel 1 Nivel 2 Nivel 3 Nivel 4 Nivel 5 Nivel 6
A Pblico B Pblico A concertado B concertado D concertado
En el grfico siguiente, se muestran las diferencias entre los resultados de PISA 2012 y PISA
2015 en las tres variables analizadas anteriormente: titularidad o red educativa, modelos
Concertada
A Concertado
B Concertado
D Concertado
Pblico
A Pblico
B Pblico
D Pblico
Modelo B
Modelo D
tems de anclaje
57
45
40 OCDE
28 Espaa
0 0
Por lo tanto, el alumnado de Euskadi, se sita peor con respecto a Espaa que con respecto
a la OCDE en cuanto al porcentaje medio de respuestas correctas en los tems de anclaje de la
Competencia cientfica.
Por otra parte, se han realizado anlisis de los tems de anclaje de la Competencia cientfica
en los que el alumnado de Euskadi obtiene un porcentaje medio de respuestas correctas
menor que el de la OCDE con el fin de saber si sus caractersticas coinciden, pero no se han
encontrado patrones concretos de tems a los que se puedan deber las diferencias. Es decir,
los tems en los que el porcentaje medio de aciertos del alumnado de Euskadi es menor que el
de la OCDE responden a una diversidad de contenidos, subcompetencias, nivel de dificultad,
contexto, formato, etc.
82
63 OCDE
33 Espaa
17
3 0
Por otra parte, se han realizado anlisis de los tems nuevos de la Competencia cientfica en
los que el alumnado de Euskadi obtiene un porcentaje medio de respuestas correctas menor
que el de la OCDE con el fin de saber si sus caractersticas coinciden, pero no se han
encontrado patrones concretos de tems a los que se puedan deber las diferencias. Es decir,
los tems en los que el porcentaje de aciertos del alumnado de Euskadi es menor que el de la
OCDE responden a una diversidad de contenidos, subcompetencias, nivel de dificultad,
contexto, formato, etc.
El rendimiento de un sistema educativo no se puede medir solo por los resultados de sus
estudiantes, ni por esos resultados tomados de forma aislada y descontextualizada. Por ello, en
este apartado se analizan algunas variables y factores que se han detectado como ms
importantes en relacin con los resultados en las competencias evaluadas. Son mltiples los
factores que inciden en el rendimiento de los estudiantes: por un lado, los factores sociales,
econmicos y culturales, tanto de los pases como de sus sistemas educativos; por otro, los
asociados a las caractersticas de los centros docentes y a las propias de los estudiantes y a su
entorno familiar.
Grfico 3.1.8.1.a. PISA 2015. Relacin entre el ISEC y la puntuacin en Competencia cientfica
de los pases de la OCDE y CCAA.
560
Japn
540 Estonia
Finlandia R = 0,2431
Canad
Castilla y Len
PISA 2015 Puntuacion en Ciencias
520 Corea
Madrid
Galicia Navarra Eslovenia Nueva Zelanda
Reino Unido
Aragn Australia
Asturias Alemania
Polonia Catalua Suiza Pases Bajos Dinamarca
Castilla-La Mancha Rioja Irlanda Blgica Noruega
500 Portugal Francia
R. Checa UE 28 Estados Unidos
C. Valenciana Espaa Cantrabria OCDE Austria Suecia
Murcia Baleares Euskadi Luxemburgo
Italia
480 Canarias Hungra Islandia
Extremadura
Andaluca Israel
Eslovaquia
460
Chile Grecia
440
420
-1,00 -0,80 -0,60 -0,40 -0,20 0,00 0,20 0,40 0,60 0,80 1,00
ISEC (Indice socioeconmico y cultural)
Un anlisis que nos puede dar una imagen distinta en relacin con el nivel socioeconmico
y cultural es examinar los resultados distribuyendo a todo el alumnado en cuatro niveles de
ISEC o cuartiles. Es evidente que en los datos por niveles ISEC correspondientes a 2015, que
se presentan en el grfico siguiente, la correlacin entre ambos datos, puntuacin e ISEC, se
muestra de manera clara: el alumnado con el nivel ms alto de ISEC obtiene unos resultados
que estn 50 puntos por encima de quienes tienen el nivel bajo de este ndice. Adems, la
diferencia es estadsticamente significativa entre todos los niveles de ISEC.
Sabemos que las diferencias de rendimiento entre diferentes variables se suelen modificar,
en parte, al analizar la influencia del nivel socioeconmico y cultural del alumnado y del centro.
Por ello, en este anlisis relacionado con el ISEC es interesante observar los resultados
descontando la influencia del ISEC, ya que de esa forma se pueden comparar las puntuaciones
en igualdad de condiciones socioeconmicas. A continuacin se presenta el anlisis de
resultados en Competencia cientfica por redes, modelos y estratos detrayendo la influencia del
ISEC del alumno o alumna. Las columnas de color azul representan las puntuaciones directas
obtenidas por el alumnado y las granates, los resultados cuando se detrae el efecto del ISEC.
Por redes educativas, tras controlar el ISEC, la pblica mejora en 5,6 puntos su puntuacin,
mientras que la concertada baja 3,1 puntos su resultado. Se reduce la diferencia entre redes
desde los 18,9 puntos de la puntuacin inicial a los 10,2 puntos tras detraer la influencia del
ISEC, de forma que, si se eliminara la influencia del ISEC en los resultados, no habra diferencia
significativa entre la red pblica y la red concertada.
550,0
491,6 488,5
500,0 472,7 478,3
450,0
400,0
350,0
300,0
Red Pblica Red Concertada
Por modelos lingsticos, el control de la influencia del ISEC hace que el modelo A mejore
en 8,3 puntos su resultado, que el modelo B empeore en 3,2 puntos y que el modelo D gane
1,2 puntos. Como ocurra anteriormente, tampoco las diferencias son significativas cuando se
detrae la influencia de este ndice.
550,0
490,0 486,8 482,1 483,3
500,0 472,5 480,8
450,0
400,0
350,0
300,0
Modelo A Modelo B Modelo D
Por estratos, los cambios en las puntuaciones tras detraer la influencia del ISEC muestran
un comportamiento distinto entre los estratos pblicos y los concertados: todos los pblicos
mejoraran sus resultados (26 el modelo A; 9, el modelo B y 3, el modelo D), mientras que
todos los concertados empeoraran sus puntuaciones (1, el modelo A; 5, el modelo B y 2, el
D).
Grfico 3.1.8.1.g. PISA 2015. Puntuacin por estratos controlando el
efecto del ISEC en Competencia cientfica.
600
550
491 490 495 490 489 487
500 478 481
461 460 468
450 435
400
350
300
A pblico B pblico D pblico A concertado B concertado D concertado
Los cambios en las puntuaciones que se producen tras detraer la influencia del ISEC
provoca que prcticamente desaparezcan casi todas las diferencias significativas, solo se
mantiene la diferencia del estrato A pblico con el resto de los estratos, salvo con el B pblico
con el que la diferencia no es significativa.
De las tres competencia evaluadas por PISA, tradicionalmente sta es en la que se suelen
observan menos diferencias entre las puntuaciones de chicos y chicas. De hecho, a nivel
440
420
400
2012 2015
CHICA CHICO Euskadi
La bajada de puntuacin entre ambas ediciones tiene una intensidad algo mayor en los
chicos, que empeoran en 24 puntos, frente a los 21 puntos de las chicas.
Los anlisis realizados por variables muestrales, que se presentan en el siguiente grfico, nos
indican que tanto por redes como por modelos, los resultados de las chicas estn en todos los
casos por debajo del de los chicos. La menor distancia se observa en el modelo D donde la
diferencia entre ambos sexos solo es de un punto, mientras que en los otros dos modelos la
distancia entre puntuaciones supera los 10 puntos.
-40,0
-39,9
-50,0
D
Publikoa
A publikoa
D publikoa
Itunpekoa
B publikoa
Itunpeko A
Itunpeko D
Itunpeko B
Euskadi Sarea Eredua Geruza
Por lo tanto, la intensa bajada en la puntuacin media en esta competencia, desde un punto
de vista general del sistema, no parece tener relacin clara con esta variable, ya que su
comportamiento es parecido al de ediciones anteriores y la prdida de puntuacin afecta de
manera semejante tanto a los alumnos como a las alumnas.
Los dos siguientes grficos muestran de manera separada segn el sexo del alumnado la
comparacin entre los porcentajes en cada nivel de rendimiento en PISA 2012 y 2015. Las
chicas y los chicos muestran porcentajes muy parecidos en los niveles bajos de rendimiento,
que adems son muy cercanos al porcentaje medio de Euskadi en ambas ediciones de esta
evaluacin. Hay un 1% ms de chicas que de chicos en el nivel bajo de rendimiento en 2015,
cuando esta distancia en 2012 se reduca a un 0,4%.
Como hemos visto en el apartado 2.3.2., el 75,7% del alumnado vasco se encontraba en
situacin de idoneidad en 2015, es decir, estaba escolarizado en 4 de ESO. Este dato supone
2,2% puntos porcentuales menos que en 2012. Esos dos puntos de aumento en el alumnado
repetidor hacen que aumente respectivamente en un punto el porcentaje de alumnado
escolarizado tanto en 2 como en 3 de ESO.
50,0
0,0
0,6
-150,0
-21,5 -21,6 -22,6 -10,0
-350,0 -20,0
PISA 2012 PISA 2015 Diferencias
-550,0 -30,0
2 ESO 3 ESO 4 ESO Media Euskadi
500 527
518 513
506 505
450
439 443
400 430 421
419
397 391 392
350 382
366
2 ESO 3 ESO 4 ESO
300
2003 2006 2009 2012 2015
PISA 2003 PISA 2006 PISA 2009 PISA 2012 PISA 2015
EUSKADI
%* Media %* Media %* Media %* Media %* Media
2 ESO 1,8 382 3,9 366 4,4 397 5,1 391 6,1 392
3 ESO 22,6 419 19,6 430 16,6 439 16,9 443 18,1 421
4 ESO 75,3 506 76,3 518 78,9 513 77,9 527 75,7 505
Sin embargo, la diferencia con quienes tienen dos cursos de retraso es ms variable, as el
alumnado de 2 de ESO en 2015 tiene la distancia de puntuacin ms baja de todas las
ediciones, 113 puntos, lo que supone, por ejemplo, 39 puntos menos que en 2006, momento
en el que la Competencia cientfica tambin fue rea central en PISA.
Hay que recordar que Euskadi, junto con Catalua, Navarra y Asturias, es una de las
comunidades con porcentajes de alumnado en 4 de ESO superiores al 70%; sin embargo, el
resultado de Euskadi est a 18 puntos de Catalua, 26 de Asturias y 30 de Navarra. En el
alumnado de 3 ESO la distancia entre Euskadi y esas tres comunidades autnomas van de los
22 con Catalua a los 28 con Navarra. Por el contrario, la puntuacin del alumnado
escolarizado en 2 de ESO es prcticamente similar a la lograda por el alumnado del mismo
nivel en esas tres comunidades.
Grfico 3.1.8.3.d. PISA 2015. Resultados en Competencia cientfica por CCAA segn
600
curso en el que est escolarizado (ordenado por resultados en 4 de ESO).
550 549 547 541
536 535 532 531 529
550 525 525 524 523 523
515 514 512
505
500 466 458 464
455 449 451 456
444 443 439 450 446 443 439
450 426 423 421 421
416 411 408
397 399 406 400 406 404
392 384 388 393 392 392
400 380 379 381
350
La mayora del alumnado contest a las pruebas en castellano, aunque como se seal en la
descripcin de la muestra (ver apartado 2.3.5.), de 2012 a 2015 hay un descenso de 9 puntos
porcentuales en el alumnado que contest la versin en castellano de la prueba y, por lo tanto,
un aumento similar de alumnado que las respondi en euskara.
90
520,0 84
PISA 2012 80
75
500,0 516,9 70
503,5 PISA 2015 60
480,0
487,4 50
481,6
460,0 2012 %
alumnado 40
440,0 2015 % 30
25
alumnado 20
420,0 16
10
- 21,9 - 29,5
400,0 0
Castellano Euskara
300
200 6
4
100
0
0
-100
-200 -7
-6
-300 -10
-400
-500
-600 -16
PISA 2003 PISA 2006 PISA 2009 PISA 2012 PISA 2015
Por redes educativas se observa que en 2015 en la red concertada no hay diferencia
significativa entre las versiones en euskara y castellano, mientras que en la red pblica se da
una distancia de 15,2 puntos. En la red pblica hicieron la prueba en euskara un 7,1% ms de
alumnos que en la red concertada.
3
De las investigaciones internas e internacionales realizadas se deduca que los conocimientos
generados en una segunda lengua se expresaban mejor en la lengua familiar del alumnado, su lengua
dominante, y que su nivel competencial era subestimado cuando el alumnado realizaba las pruebas en la
segunda lengua. As se demostraba en PISA 2003, 2006 y 2009 en el que la diferencia en los resultados
de ambos grupos no eran significativas, tambin coincida con las conclusiones de la investigacin del
ISEI-IVEI denominada PISA-L. Como se seal en el Informe PISA 2012, el cambio de tendencia
observado en esa edicin entre los resultados de la versin en euskara y en castellano, obligaban a
prestar atencin a la evolucin del rendimiento segn lengua de la prueba en siguiente ediciones.
Nuevamente en 2015 vuelven los resultados a la tendencia ms frecuente de no significatividad de las
puntuaciones entre ambas lenguas de la prueba.
Por modelos lingsticos, ningn alumno o alumna del modelo A hizo la prueba en euskara y
slo el 0,5% del alumnado del modelo B contest en esa lengua. En el modelo D, cerca del
41% de su poblacin respondi a la versin en euskara. Por lo tanto, la comparacin de
resultados entre ambas versiones de la prueba solo se puede establecer de manera pertinente
en el modelo D y lgicamente el resultado de la versin en euskara del modelo D
prcticamente coincide con la media de Euskadi en esa lengua sealada en el grfico 3.1.8.4.a.
Euskara Castellano
Euskara
Euskara
Euskara
Euskara
Euskara
Castellano
Castellano
Castellano
Castellano
Castellano
Castellano
A pblico B pblico D pblico A concertado B concertado D concertado
Antes de iniciar el anlisis segn la lengua familiar del alumnado, hay que recordar varios
aspectos:
En 2012 no haba diferencia significativa entre los vascfonos familiares y los castellano
hablantes familiares y esta no significatividad se mantiene en 2015. Los resultados del grupo
Otra lengua son significativamente ms bajos que los de los otros dos grupos lingsticos.
Los tres grupos de lengua familiar pierden puntuacin de 2012 a 2015, el grupo de lengua
familiar castellana hasta cerca de 27 puntos, y esa diferencia es significativa, y el grupo
euskaldun hasta 19 puntos y tambin es significativa la diferencia de puntuacin.
A continuacin nos centraremos en el anlisis de los resultados del alumnado del modelo D
y compararemos sus resultados a partir de la combinacin de su lengua familiar (euskara,
castellano, otra lengua) y la lengua de la prueba (euskara y castellano). De esta combinacin
surgen cinco grupos lingsticos de L. Familiar+L. Prueba:
Castellano/Castellano
24,0
Castellano/Euskara
Euskara/Castellano
4,3 53,7
Euskara/Euskara
4
Los porcentajes de 2015 de este grfico no coinciden con los sealados en el grfico 3.1.8.4.2.b. porque
en este grfico se utiliza el dato de la muestra realmente aplicada en ambas ediciones y en el grfico
anterior se utilizan los datos de la muestra ponderada.
El alumnado castellano hablante familiar que hizo la prueba en euskara es quien ms puntos
pierde de 2012 a 2015, 28,4 puntos. Hay que recordar que en 2012 este alumnado solo
supona el 1,8% de la muestra, mientras que en 2015 es el 17,3%. El alumnado castellano
hablante familiar que hizo la prueba en esa misma lengua tambin tiene una prdida importante
de ms de 26 puntos.
PISA 2015 recoge datos sobre actividades extraescolares relacionadas con las ciencias al
margen del currculum ordinario. Las ciencias en general, no se limitan a ensearse de forma
reglada nicamente durante el horario escolar, sino que, en ocasiones, van ms all de los
contenidos cientficos del currculo que se imparte, normalmente limitado a las ciencias
naturales: ciencia del espacio o astronoma, biologa, qumica, ciencias de la tierra o geologa y
fsica.
En los cuestionarios enviados por las direcciones de los centros se pone de manifiesto que
muchos centros educativos organizan, al margen del currculum oficial, numerosas actividades y
talleres alrededor de las Ciencias.
En el grfico se recogen los datos de Euskadi, OCDE y Espaa como referencia comparativa
utilizada en otros apartados.
30
20 15,7
10 4,9
0
Euskadi OCDE Espaa
En 2006, el marco PISA se ampli para incluir los aspectos actitudinales de las respuestas de
los estudiantes a las cuestiones cientficas y tecnolgicas dentro de la construccin de la
Competencia cientfica. Por lo tanto, en 2006, las actitudes se midieron de dos formas: a travs
del cuestionario para el alumnado y mediante los elementos integrados en la prueba de
Competencia cientfica del alumnado. Se encontraron discrepancias entre los resultados de las
preguntas integradas y los del cuestionario del alumnado. Ms importante, los elementos
integrados extendieron la duracin de la prueba. Por lo tanto, en PISA 2015, los aspectos de
actitud slo se han medido a travs del cuestionario del alumnado.
Un porcentaje mayor de chicos (32,6%) que de chicas (27,5%) de Euskadi esperan realizar
trabajos relacionados con las ciencias. El porcentaje de chicos de Euskadi que espera realizar
este tipo de trabajos es mayor que el de Espaa (29,5%) y que el de la OCDE (25%). Con
respecto a las chicas, Euskadi tiene un porcentaje mayor que el de la OCDE (23,9%).pero
ligeramente menor que el de Espaa (27,8%).
Se puede apreciar que el porcentaje de alumnado que espera ejercer trabajos relacionados
con las ciencias es ms alto cuanto mayor es el nivel de rendimiento en Competencia cientfica y
eso ocurre tanto en Euskadi como en Espaa y en la OCDE. En Euskadi, un 57,1% del
alumnado que se sita en el nivel de rendimiento 6 o superior de la Competencia cientfica
espera ejercer trabajos relacionados con las ciencias frente a un 14,3% del alumnado que tiene
un nivel de rendimiento 2 o inferior en esta competencia. Es destacable que, sea cual sea el
nivel de rendimiento en la Competencia cientfica, el alumnado vasco muestra mayores
expectativas que el alumnado de Espaa o de la OCDE.
Euskadi tiene un ndice medio de inters por temas cientficos negativo (-0,05) inferior al de
Espaa (+0,03) y al de la OCDE (+0,02).
A continuacin se muestra la relacin del ndice de gusto por las ciencias y el rendimiento
en Competencia cientfica por cuartiles.
420
400
Euskadi OCDE Espaa
Nivel bajo Nivel medio bajo Nivel medio alto Nivel alto
Se puede apreciar que, tanto en Euskadi como en Espaa y en la OCDE, a medida que el
ndice de gusto por las ciencias es mayor el rendimiento es ms alto. Por otra parte, se
observa que las diferencias entre los cuartiles de rendimiento extremos (alto y bajo) son muy
llamativas.
Media Media
Pas Diferencia
cuartil alto cuartil bajo
Euskadi 531 446 85
Espaa 543 458 85
OCDE 538 463 75
Euskadi tiene un ndice medio de inters por temas cientficos positivo (0,04) por encima
del de la OCDE (0,00) y por debajo del de Espaa (+0,10).
Nivel bajo Nivel medio bajo Nivel medio alto Nivel alto
Media Media
Pas Diferencia
cuartil alto cuartil bajo
Euskadi 523 452 72
Espaa 531 467 65
OCDE 532 466 66
PISA evala si el alumnado est motivado para aprender ciencia por motivos pragmticos,
es decir, porque percibe que le va a ser til para continuar sus estudios, para su futuro
profesional o para otro fin. Para ello, se pregunta en el cuestionario del alumnado en qu
medida estn de acuerdo o en desacuerdo con una serie de afirmaciones como que merece la
pena esforzarse en las asignaturas de ciencias porque eso le servir para la profesin que
quiera ejercer ms adelante, muchas cosas de las que estudia en la asignatura de ciencias le
ayudarn a encontrar trabajo, etc. Con las respuestas del alumnado a estas cuestiones PISA ha
elaborado un ndice de motivacin instrumental para aprender ciencias.
Nivel bajo Nivel medio bajo Nivel medio alto Nivel alto
El alumnado con mayor ndice de motivacin instrumental para aprender ciencias es el que
tiene un rendimiento ms alto en Competencia cientfica. En el resto de situaciones no se
observan patrones de comportamiento uniformes.
Media Media
Pas Diferencia
cuartil alto cuartil bajo
Euskadi 522 472 50
Espaa 530 487 43
OCDE 518 493 25
Autoeficacia
En el cuestionario del alumnado se pregunta sobre el grado de capacidad que cada alumno
o alumna cree tener para determinadas tareas relacionadas con la ciencia como: reconocer el
problema cientfico que subyace en un artculo periodstico sobre un tema de salud, explicar
por qu ocurren terremotos con ms frecuencia en unas zonas que otras, predecir en qu
Euskadi tiene el ndice medio de autoeficacia ms bajo (-0,34). Espaa tiene un ndice
tambin negativo (-0,14), sin embargo la OCDE lo tiene positivo (+0,04).
Nivel bajo Nivel medio bajo Nivel medio alto Nivel alto
Media Media
Pas Diferencia
cuartil alto cuartil bajo
Euskadi 522 452 70
Espaa 537 461 76
OCDE 534 466 68
El ndice medio de Euskadi, en este caso, es negativo (-0,34) y es uno de los ms bajos de
los pases y comunidades autnomas analizados, slo se sita por encima de los ndices medios
de Madrid (-0,37) y de Castilla y Len (-0,37).
Este ndice muestra una ligera relacin negativa con los resultados en Competencia cientfica
tanto en el anlisis hecho con los pases de la OCDE, como en el realizado con los datos de
todas las comunidades autnomas y de unas serie de pases y comunidades autnomas
seleccionados.
En Euskadi se observa que el alumnado que se sita en el cuartil ms bajo de este ndice
tiene una media en esta competencia 9 puntos por encima del que se sita en el cuartil ms
alto.
El ndice medio de Euskadi, en este caso, es negativo (-0,01) y est ligeramente por debajo
del ndice medio de la OCDE (0,00). De entre los pases y comunidades autnomas analizados
el ndice medio de Euskadi est por encima del de Irlanda (-0,02), Castilla y Len (-0,02),
Francia (-0,05) y Alemania (-0,23).
Este ndice muestra una ligera relacin positiva con los resultados en Competencia cientfica
en el anlisis hecho tanto con los datos de los pases de la OCDE, como con los de los pases y
comunidades autnomas seleccionados. Sin embargo, en el caso del anlisis realizado con todas
las comunidades autnomas, se observa la tendencia contraria.
El alumnado de Euskadi que se sita en el cuartil ms alto de este ndice tiene una media 32
puntos ms alta que el alumnado que se sita en el cuartil ms bajo.
Este ndice muestra una relacin negativa con los resultados en Competencia cientfica en el
anlisis hecho con los datos de los pases de la OCDE, con los de los pases y comunidades
autnomas seleccionados y con los datos de todas las comunidades autnomas. La relacin
entre el ndice y los resultados en Competencia cientfica en el caso de los pases de la OCDE es
la ms dbil.
El ndice medio de Euskadi, en este caso, es positivo (0,07) y est por encima del ndice
medio de la OCDE (-0,01). De entre los pases y comunidades autnomas analizados el ndice
medio de Euskadi est por debajo del de Madrid (0,09), Navarra (0,10), Portugal (0,12), Espaa
(0,13) y Castilla y Len (0,14).
Este ndice muestra una muy ligera relacin negativa con los resultados en Competencia
cientfica en el anlisis hecho con los datos de los pases de la OCDE y con los de los pases y
comunidades autnomas seleccionados. La relacin entre el ndice y los resultados en
Competencia cientfica es ms acusada al realizar el anlisis con los datos de todas las
comunidades autnomas.
Conclusin
Del anlisis de estos cuatro ndices en una serie de pases y comunidades autnomas y su
correlacin con los resultados en Competencia cientfica no se ha concluido ninguna informacin
que explique la bajada de resultados en esta competencia en 2015.
En esta competencia se puede decir que los resultados se han mantenido y no hay cambio
en el nivel competencial del alumnado vasco, aunque la puntuacin obtenida en 2015 es 7
puntos inferior a la lograda en 2012, esta diferencia no es significativa, ya que el error en 2015
ha sido del 4,7. De hecho, en ediciones anteriores se han dado diferencias ms grandes y
tampoco la diferencia era estadsticamente significativa, caso de 2003 y 2006 con una distancia
de 10 puntos.
550
497 494 498 491
500 487
450
400
350
300
2003 2006 2009 2012 2015
En los dos grficos siguientes se comparan las puntuaciones medias de Euskadi, OCDE y
Espaa y se muestra el error y la significatividad de las diferencias.
500
490 498
497 494 496 496
494 492 493 493 491
480
487 488
470 481 481
460
450 461
440
430
OCDE/Espaa/Euskadi OCDE/Espaa/Euskadi OCDE/Espaa/Euskadi OCDE/Espaa/Euskadi OCDE/Espaa/Euskadi
400
300
200
100
0
PISA 2003 PISA 2006 PISA 2009 PISA 2012 PISA 2015
Como se puede apreciar en el grfico 3.2.1.c., en las cinco ediciones de este estudio en las
que Euskadi ha participado con muestra propia, la diferencia de resultados de la OCDE y de
Euskadi no ha sido significativa estadsticamente. Por el contrario, en relacin con los
resultados medios de Espaa, la puntuacin de Euskadi ha sido significativamente ms alta de
2003 a 2012, pero en 2015 se igualan estadsticamente.
En el grfico 3.2.1.d. se recogen las puntuaciones medias obtenidas por todos los pases de la
OCDE que han tomado parte en la edicin 2015, as como los resultados de las 17
comunidades autnomas. En el grfico, adems de la puntuacin media, se reflejan los
intervalos de confianza al 95% para la media de la poblacin evaluada. Se destaca por medio de
una columna vertical de color el intervalo de confianza de Euskadi.
Los resultados de Euskadi no tienen diferencia significativa con los de Austria, Blgica,
Repblica Checa, Dinamarca, Francia, Islandia, Italia, Letonia, Portugal, Espaa, Suecia, Suiza,
Reino Unido, Estados Unidos, la media de la OCDE, la media de la UE 28 y las comunidades
autnomas de Aragn, Asturias, Islas Baleares, Cantabria, Castilla-La Mancha, Catalua,
Comunidad Valenciana, Galicia y La Rioja.
En este apartado se establece una relacin entre las puntuaciones medias estimadas y la
variabilidad, que corresponde a la diferencia entre las puntuaciones medias en los percentiles
95 y 5. Se considera como buen sistema educativo aquel que es capaz no solo de obtener altas
puntuaciones medias, sino que adems tiene una baja variabilidad; es decir, que entre el
alumnado con la ms alta puntuacin (percentil 95) y el de ms baja puntuacin (percentil 5)
no hay grandes diferencias, lo que indica que es un sistema homogneo.
En el siguiente grfico se recoge esta relacin de todos los pases de la OCDE y de todas
las comunidades autnomas y se distinguen cuatro cuadrantes, situndose la media de la
OCDE en el centro:
- Cuadrante derecho superior, donde estn los pases y comunidades con resultados por
encima de la media y baja variabilidad, corresponde a una situacin que se podra
considerar como de excelencia educativa. Nos encontramos con pases como Estonia,
Canad, Irlanda o Finlandia y 10 comunidades, entre ellas, Castilla-Len, Madrid,
Navarra o Galicia.
- Cuadrante izquierdo superior, que recogera a pases y comunidades con altos resultados,
pero con mayor diferencia entre percentiles extremos y, por lo tanto, menor
homogeneidad. Aqu nos encontramos pases y comunidades como Corea, Noruega o
Alemania. En este cuadrante no se encuentra ninguna comunidad autnoma.
- Cuadrante inferior derecho, donde se colocan los pases y comunidades con variabilidad y
resultados inferiores a la media, son sistemas equitativos, pero mediocres en
puntuacin. El Pas Vasco se encuentra justo en la lnea de separacin entre los
cuadrantes derechos. En esta apartado se encuentran 6 comunidades autnomas y
pases como Italia o Letonia.
- Finalmente, el cuadrante inferior izquierdo, donde encontramos los sistemas educativos
con peores resultados y menor homogeneidad. En este cuadrante no se encuentra
ninguna comunidad autnoma, pero s pases como Luxemburgo, Islandia o Repblica
Checa.
560
Menor variabilidad
540
Resultados en Comprensin lectora PISA 2015
Finlandia
Canad
Irlanda
Corea del Sur Estonia Madrid Castilla y Leon
Japn 520
Noruega
Nueva Zelanda Navarra
Galicia
Alemania Eslovenia
Australia Pases Bajos Aragon Dinamarca
Mejores resultados
PortugalCataluaCantabriaC. Valenciana 500
Suecia Belgica Reino Unido Asturias
EE.UU.Suiza OCDE Polonia EspaaCastilla-La Mancha
Union Europea EUSKADI
Austria Republica Checa Italia Canarias Letonia
BalearesRioja
Luxembourgo 480
Islandia Murcia
Andaluca
Extremadura
Hungra
Grecia
460
Chile
Eslovaquia
440
Turqua
Mexico 420
400
360 340 320 300 280 260 240 220
Euskadi presenta una variabilidad relativamente baja (288), entre todos los pases y
comunidades consideradas en el grfico. Su variabilidad es inferior a la media de la OCDE y de
algunas comunidades autnomas (Aragn, Murcia, Galicia, Asturias, Extremadura, Islas
Canarias y La Rioja). Esta variabilidad indica que tenemos un sistema bastante equitativo, pero
cuyos resultados (491 puntos) deberan mejorar para convertirse en un sistema de excelencia.
El porcentaje de alumnado vasco en los niveles bajos de rendimiento siempre ha estado por
debajo de la media de los pases de la OCDE, incluso en 2015, ya que tambin la OCDE
incrementa en 2 puntos su porcentaje en estos niveles llegando hasta el 20%. En las anteriores
ediciones, la distancia de porcentajes entre Euskadi y la OCDE se situaba entre los 2 y los 4
puntos porcentuales, mientras que en 2015 la diferencia es de 3 puntos, debido al incremento
del dato de Euskadi y de la OCDE. Segn la descripcin de niveles que realiza PISA, quienes se
encuentran en este nivel solo son capaces de localizar una o ms piezas independientes de
informacin explcita; para reconocer el tema principal o el propsito del autor en un texto
sobre un tema conocido, o para hacer una conexin simple entre la informacin del texto y el
conocimiento comn, de todos los das. Normalmente, la informacin requerida en el texto es
prominente y hay poca o ninguna informacin de la competencia. El lector est explcitamente
dirigido a considerar los factores relevantes en la tarea y en el texto.
En los niveles de excelencia, Euskadi siempre se ha situado por debajo de los porcentajes
de la ODCE. En todas las ediciones, salvo en 2003, el alumnado vasco con niveles de
excelencia representa aproximadamente la mitad que la media de la OCDE.
60
59 60 57 52 51 53 53 51
54 59
40
20
17 18 15 14 17 19 20 19 18 20
0
2003 2006 2009 2012 2015 2003 2006 2009 2012 2015
Euskadi . OCDE
Nivel de excelencia 5-6 Nivel Alto 4 Nivel Medio 2-3 Nivel Bajo 1
Euskadi tiene porcentajes en los niveles bajos de rendimiento (18%) similares a la media de
la UE (19%), Blgica, Estados Unidos, Suecia, Australia, Pases Bajos, Reino Unido, Nueva
Zelanda, Portugal y a comunidades como Murcia, Islas Baleares, La Rioja y Asturias. Sin
embargo, se aleja de pases y comunidades como Irlanda (10%), Finlandia (12%), Castilla-Len
(9%), Madrid (10%) y Navarra (11%).
Grfico 3.2.4.a. PISA 2015. Competencia lectora. Diferencias de puntuacin entre 2012
y 2015 por red educativa y por modelos lingsticos.
600,0 514 502 15
498 491 479 479 485 483 508 504 497 488
400,0 10
200,0 5
0,0 0
0 -2 -4
-7
200,0 -10 -5
-12
400,0 -10
2012 2015 Diferencia
600,0 -15
Pas Vasco Pblica Concertada Modelo A Modelo B Modelo D
Red Modelo
Por redes educativas, en Competencia lectora en 2015 los resultados de la red pblica son
significativamente ms bajos que los de la red concertada. Sin embargo, cuando se analizan las
diferencias entre las ediciones de 2012 y 2015 se observa que prcticamente toda la prdida de
puntuacin se debe a la prdida de puntuacin de la red concertada. En la red pblica, como se
puede apreciar en los datos correspondientes a los estratos que se analizan en el punto
siguiente, la prdida se debe solo al alumnado del modelo D.
20,0
16,5
15,4
15,0
11,0
10,0
5,8 6,3
5,0 3,4 3,6
0,3 0,5
0,0
Nivel -1 Nivel 1 Nivel 2 Nivel 3 Nivel 4 Nivel 5 Nivel 6
PBLICOS CONCERTADOS
El anlisis de los niveles de rendimiento por modelos lingsticos muestra que el modelo B
es el que tiene mejores valores, tanto en los niveles bajos (menos de 9 puntos que el modelo
A y 4,3 puntos porcentuales menos que el modelo D). En los niveles de excelencia, tambin se
da la misma situacin, con el modelo B que agrupa a casi dos puntos porcentuales ms que el
modelo A y algo ms de 3 puntos que el modelo D.
Grfico 3.2.4.c. PISA 2015. Competencia lectora. Porcentaje de alumnado por niveles de
rendimiento segn modelo lingstico.
35,0 32,8
NIVEL BAJO 31,6 NIVEL DE EXCELENCIA
30,0 Modelo A: 22,9% 28,2 Modelo A: 5,8%
Modelo B: 13,7% 26,2 Modelo B: 7,6%
24,7 24,3
25,0 Modelo D: 18% 22,7 Modelo D: 4,4%
15,0 13,3
10,4
10,0 7,1
5,7 4,7 5,4
3,3 4,1
5,0
0,4 0,5 0,3
0,0
Nivel -1 Nivel 1 Nivel 2 Nivel 3 Nivel 4 Nivel 5 Nivel 6
Por estratos, en Competencia lectora en 2015 los estratos concertados obtienen resultados
superiores a los de la red pblica, pero no en todos los casos esta diferencia es
estadsticamente significativa, tal y como se puede ver en la tabla siguiente:
Como se puede apreciar, solo el modelo A pblico muestra diferencias significativas con el
resto de los estratos, excepto con el B pblico. Los resultados de los modelos B y D pblicos
son significativamente ms bajos que los del estrato B concertado. Entre los estratos
concertados no hay diferencias estadsticamente significativas.
En la comparacin entre las ediciones de 2012 y 2015, las mayores prdidas se dan en los
tres estratos concertados, sobre todo en el modelo A y D (que representan el 37% de la
muestra) y algo menos en el B (aunque su impacto en la prdida global es importante porque
representa el 21,8% de toda la muestra). La contribucin de los estratos pblicos en la bajada
de puntuacin es algo menor y solo se debe, como se ha comentado, al estrato D pblico.
Grfico 3.2.5.a. PISA 2015. Competencia lectora. Diferencias de puntuacin entre 2012
y 2015 por estratos.
600,0 516 502 519 510 508 494 30
498 491 462 469 490 483
419 444
400,0 20
26
200,0 10
7
0,0 0
-7 -7 -9
-14 -13
200,0 -10
2012 2015 Diferencia
400,0 -20
600,0 -30
Pas Vasco A Pblico B Pblico D Pblico A Concertado B Concertado D Concertado
Estrato
Grfico 3.2.5.1.a. PISA. Diferencias PISA 2012-2015 en Competencia lectora por variables
muestrales.
30,0 25,8
25,0
20,0
15,0
10,0 6,9
5,0
0,0
-5,0 -0,4 -1,9 -3,5
-10,0 -6,7 -7,1
-9,5 -9,1
-15,0 -11,8
-14,2 -13,1
-20,0 D Pblico
Pas Vasco
Concertada
A Concertado
Pblico
B Concertado
D Concertado
A Pblico
Modelo B
B Pblico
Modelo A
Modelo D
El rendimiento de un sistema educativo no se puede medir solo por los resultados de sus
estudiantes, ni por esos resultados tomados de forma aislada y descontextualizada. Por ello, en
este apartado se analizan algunas variables y factores que se han detectado como ms
importantes en relacin con los resultados en las competencias evaluadas. Son mltiples los
factores que inciden en el rendimiento del alumnado: por un lado, los factores sociales,
econmicos y culturales, tanto de los pases como de sus sistemas educativos; por otro, los
asociados a las caractersticas de los centros docentes y a las propias de los y las estudiantes y
a su entorno familiar.
Todos los pases y comunidades que se sitan por encima de la diagonal han obtenido
resultados que estn por encima de lo esperado en relacin con su ISEC, y al contrario cuando
se encuentran por debajo de la recta de regresin. Euskadi se sita un poco por encima de la
diagonal, lo que estara indicando que sus resultados son algo superiores a los que le
corresponderan por su situacin socioeconmica. En el caso de esta competencia, todas las
comunidades autnomas estn por encima de la recta de regresin pero algunas comunidades
autnomas con ISEC ms bajo obtienen resultados ms altos, por ejemplo, Castilla y Len,
Castilla-La Mancha y Galicia.
540
Finlandia Canad
Castilla y Len
Madrid EstoniaIrlanda
520 Corea
Navarra Noruega R = 0,2568
PISA 2015 Puntuacion en Competencia lectora
Chile
460 Eslovaquia
440
420
-1,00 -0,80 -0,60 -0,40 -0,20 0,00 0,20 0,40 0,60 0,80 1,00
En Competencia lectora solo hay diferencia significativa entre el nivel alto y el resto de los
niveles ISEC y entre el nivel medio alto con respecto al nivel ms bajo del ndice.
Ya se ha sealado que en la comparacin de esta variable entre 2012 y 2015 hay que tener
en cuenta que el ISEC medio de Euskadi en 2012 (+0,03) y en 2015 (-0,25) es distinto y, por lo
tanto, esto se traslada al ISEC medio de cada uno de los niveles del ndice. A travs de los dos
siguientes grficos podemos comparar los resultados por niveles ISEC de 2015 con los
obtenidos en 2012:
De las tres competencia evaluadas por PISA, tradicionalmente esta es en la que se suelen
observar ms diferencias entre las puntuaciones de chicos y chicas, aunque la distancia se ha
ido acortando a lo largo de todas las ediciones de la evaluacin PISA. Como muestra el grfico
siguiente, las chicas obtienen mejor puntuacin que los chicos en Comprensin lectora, tanto en
2012 como en 2015, pero la distancia entre ambas ediciones se reduce desde los 30 puntos de
2012 a los 15 puntos de 2015.
De media, en los pases de la OCDE, la diferencia en lectura a favor de las chicas disminuy
12 puntos en la prueba PISA entre 2009 y 2015: el rendimiento de los chicos mejor,
particularmente entre aquellos con mejores resultados, mientras que el de las chicas empeor,
sobre todo entre aquellas con peores resultados.
500 498
491
480
460 513
501
440 483 481
420
400
2012 2015
CHICA CHICO Euskadi
La bajada de puntuacin entre ambas ediciones tiene una intensidad muy diferente en
ambos sexos, las chicas descienden 12 puntos y los chicos 2 puntos.
Tal y como muestra el grfico siguiente, los anlisis realizados por variables muestrales nos
indican que tanto por redes como por modelos, los resultados de las chicas estn en todos los
casos por encima de los de los chicos. La mayor distancia se observa en el modelo D donde la
diferencia entre ambos sexos es de casi 23 puntos, aunque en los otros dos modelos la
distancia entre puntuaciones supera los 13 puntos.
Por estratos, las distancias son variables: en el estrato A concertado la diferencia llega hasta
los 30 puntos (la ms alta), mientras que en el B pblico llega a los 9,5 puntos (la ms baja), en
5,0
-5,0
-15,0
-14,3
-25,0
Pub Mod A
Concertada
B
A
D
Publica
Con Mod A
Con Mod B
Con Mod D
Pub Mod B
Pub Mod D
Euskadi Red modelo Estrato
CHICAS CHICOS
El porcentaje de alumnos que no llegan al nivel 2 de rendimiento llega hasta el 21,6%, poco
ms de 8 puntos porcentuales que el porcentaje de alumnas con bajo rendimiento. Las chicas
superan a los chicos en los niveles de excelencia.
50,0 6,2
0,0
-8,9 -6,7
-150,0
-10,0
2012 2015 Diferencias
-350,0 -20,0
-550,0 -30,0
2 ESO 3 ESO 4 ESO Media Euskadi
500
400
Sin embargo, la diferencia con quienes tienen dos cursos de retraso es ms variable, as el
alumnado de 2 de ESO en 2015 tiene la distancia de puntuacin ms baja de todas las
ediciones, 122 puntos, lo que supone, por ejemplo, 43 puntos menos que en 2006.
El alumnado de 4 de ESO de Madrid y de Castilla y Len tiene los mejores resultados, 553
y 552 puntos respectivamente, lo que supone 39 y 38 puntos de diferencia con el alumnado
vasco del mismo nivel. El alumnado de 3 y 2de ESO de Castilla y Len es el que obtiene la
media ms alta, 40 y 24 puntos, respectivamente, por encima de la media de Euskadi.
Grfico 3.2.6.3.d. PISA 2015. Resultados en Competencia lectora por CCAA segn
curso en el que est escolarizado (ordenado por resultados en 4 de ESO).
600
553 552
544 540 539
550 535 535 532 528 527 527 526 525 524 520 519 517 514
500
464 470
461 455 458
451 448 452 446 447
440 444 443 437
450 433 428 430
425
413 416
407 405 404
395 396 399
390 392 389 391 392
400 379 382 376 374 369
350
Por redes educativas se observa que en 2015 en la red concertada hay una distancia de 18,2
puntos entre ambas versiones, que es estadsticamente significativa; por el contrario, en la red
pblica la distancia es solo de 1,5 puntos y esa diferencia no es significativa. En la red pblica
hicieron la prueba en euskara un 7% ms de alumnos que en la red concertada.
77,9 80,0
500,0
70,8 70,0
480,0 487,7 60,0
479,1
477,6 50,0
460,0
40,0
440,0 29,2 30,0
22,1 20,0
420,0
10,0
400,0 0,0
Euskara Castellano Euskara Castellano
Red pblica Red concertada
Por modelos lingsticos, ningn alumno o alumna del modelo A hizo la prueba en euskara y
slo el 0,5% del alumnado del modelo B contest en esa lengua. En el modelo D, cerca del
41% de su poblacin respondi a la versin en euskara. Por lo tanto, la comparacin de
resultados entre ambas versiones de la prueba solo se puede establecer de manera pertinente
en el modelo D y lgicamente el resultado de la versin en euskara del modelo D
prcticamente coincide con la media de Euskadi en esa lengua. La diferencia llega a los 7,8
puntos, a favor de la versin en castellano, esta diferencia no es significativa
520
507
500 484
492 493 491
480 485 483
482 483
483
460
440
420
400
PISA 2003 PISA 2006 PISA 2009 PISA 2012 PISA 2015
Euskara Castellano
Euskara
Euskara
Euskara
Euskara
Euskara
Castellano
Castellano
Castellano
Castellano
Castellano
Castellano
A pblico B pblico D pblico A concertado B concertado D concertado
C. lectora 2015 % alumnado
Ni en 2012 ni en 2105 haba diferencia significativa entre los vascfonos familiares y los
castellano hablantes familiares. Los resultados del grupo Otra lengua son significativamente ms
bajos que los de los otros dos grupos lingsticos en ambas ediciones.
Los grupos de lengua familiar euskara y castellano pierden puntuacin de 2012 a 2015, en el
primer caso 14 puntos y en el segundo 9 puntos.
A continuacin nos centraremos en el anlisis de los resultados del alumnado del modelo D
y compararemos sus resultados a partir de la combinacin de su lengua familiar (euskara,
castellano, otra lengua) y la lengua de aplicacin de la prueba (euskara y castellano). De esta
combinacin surgen cinco grupos lingsticos:
En esta competencia, los dos grupos en los que coincide la lengua de la prueba y la lengua
familiar obtienen resultados que estn por encima de la media de Euskadi en 2015, aunque la
diferencia es bastante pequea. Los grupos con los resultados ms bajos son aquellos en los
que no coincide la lengua de la prueba y la lengua familiar, especialmente en el caso de quienes
teniendo como lengua familiar el castellano hicieron la prueba en euskara, que estn 18 puntos
por debajo de la media de la comunidad.
El alumnado castellano hablante familiar que hizo la prueba en castellano pierde 6 puntos de
2012 a 2015. Sin embargo, el alumnado vascfono familiar que hizo la prueba en euskara baja
su puntuacin en 17 puntos, por encima de la prdida de puntuacin del modelo y de Euskadi.
COMPETENCIA LECTORA.
Euskadi en Competencia lectora en 2015 logra un resultado de 491 puntos, a pesar de bajar
7 puntos respecto de 2012, esa diferencia no es estadsticamente significativa. La
puntuacin del Pas Vasco sigue, como en las anteriores ediciones, en la media de la
OCDE. La puntuacin media de Euskadi se sita en el nivel 3 de rendimiento como la
mayora de los pases de la Unin Europea.
La baja variabilidad de los resultados de Euskadi en Competencia lectora (288), medida a
travs de la diferencia de puntuacin entre los percentiles 95-5, indica que el sistema
educativo vasco es un sistema altamente equitativo, muy por encima de la media
internacional; sin embargo, debera mejorar sus resultados para convertirse en un sistema
de excelencia.
El porcentaje de alumnado vasco en los niveles bajos de rendimiento ha pasado del
14,4% en 2012 al 17,4% en 2015, volviendo a superar el umbral marcado por el indicador
europeo 2020, establecido en el 15%. Por el contrario, en los niveles de excelencia se
produce un leve subida desde el 5% de 2012 al 5,4% en 2015. El porcentaje en los niveles
bajos de rendimiento sigue siendo inferior al porcentaje medio de la OCDE, 20%.
Los resultados en 2015 de la red pblica (479 puntos) son significativamente ms bajos
que los de la red concertada (502). Sin embargo, el comportamiento de ambas redes
entre 2012 y 2015 es muy distinto, mientras la red pblica mantiene sus resultados, la red
concertada pierde 12 puntos.
Por modelos lingsticos no hay diferencia significativa en 2015, pero todos empeoran
sus puntuaciones respecto de 2012, y de manera ms acusada el modelo D que baja 10
puntos.
De todos los estratos solo mejoran su puntuacin entre 2012 y 2015, el modelo A y B
pblico, el resto pierde puntuacin. Destaca la prdida de 14 puntos en el modelo A
concertado y de 13 puntos en el D concertado.
Euskadi ha perdido nivel de ISEC, pasa del 0,03 en 2012 al -0,25 en 2015. Los resultados
de Euskadi en 2015 estn en Competencia lectora por encima de lo que seran esperables
en relacin a su nivel socioeconmico y cultural.
Segn sexo del alumnado, como suele ser habitual, los 501 puntos conseguidos por las
chicas son significativamente mejores que los 486 puntos de los chicos. La distancia entre
ambos sexos se ha reducido desde los 30 puntos de 2012, que era significativa, a los 15
puntos de 2015. Tanto las chicas como los chicos han bajado sus resultados de 2012 a
2015, pero en mucha mayor medida las chicas, 12 puntos. El 21,6% de los chicos estn en
los niveles bajos de rendimiento frente al 13,4% de las chicas.
El nivel de idoneidad tiene, como suele ser habitual, una gran influencia en los
resultados: en 2015 en Competencia lectora hay 84 puntos de diferencia entre el alumnado
de 4 de ESO y el de 3 y llega hasta los 122 puntos con quienes llevan dos aos de
retraso. Entre 2012 y 2015 solo el alumnado de 4 de ESO empeora su puntuacin en 9
puntos, mientras que los que cursan 3 de ESO mejoran en 6 puntos y los de 2 de ESO
suben su puntuacin en 28 puntos. El alumnado vasco escolarizado en 4 de ESO ha
obtenido en 2015 la puntuacin ms baja entre todas las comunidades autnomas.
550
502 501 510 505
492
500
450
400
350
300
2003 2006 2009 2012 2015
En los dos grficos siguientes se comparan las puntuaciones medias de Euskadi, OCDE y
Espaa y se muestra el error y la significatividad de las diferencias.
510
500 510
505
502 501
490 498
496 496 494
490 492
480
484 486
483
470 480
476
460
OCDE/Espaa/Euskadi OCDE/Espaa/Euskadi OCDE/Espaa/Euskadi OCDE/Espaa/Euskadi OCDE/Espaa/Euskadi
400
300
200
100
0
PISA 2003 PISA 2006 PISA 2009 PISA 2012 PISA 2015
Los resultados de Euskadi no tienen diferencia significativa con los siguientes pases y
comunidades autnomas: Australia, Austria, Repblica Checa, Francia, Islandia, Italia,
Luxemburgo, Nueva Zelanda, Portugal, Espaa, Suecia, Reino Unido, la media de la OCDE,
Aragn, Asturias, Cantabria, Castilla la Mancha, Catalua, Comunidad Valenciana, Galicia y La
Rioja.
En este apartado se establece una relacin entre las puntuaciones medias estimadas y la
variabilidad, que corresponde a la diferencia entre las puntuaciones medias en los percentiles
95 y 5. Se considera como buen sistema educativo aquel que es capaz no solo de obtener altas
puntuaciones medias, sino que adems tiene una baja variabilidad; es decir, que entre el
alumnado con la ms alta puntuacin (percentil 95) y el de ms baja puntuacin (percentil 5)
no hay grandes diferencias, lo que indica que es un sistema homogneo.
En el siguiente grfico se recoge esta relacin de todos los pases de la OCDE y de todas
las comunidades autnomas y se distinguen cuatro cuadrantes, situndose la media de la
OCDE en el centro:
- Cuadrante derecho superior, donde estn los pases y comunidades con resultados por
encima de la media y baja variabilidad, corresponde a una situacin que se podra
considerar como de excelencia educativa. Nos encontramos con pases como Japn,
Estonia, Canad o Dinamarca y 10 comunidades, entre ellas, Castilla-Len, Madrid,
Navarra o Catalua. Euskadi se encuentra junto en la lnea de separacin de este
cuadrante con el inferior.
- Cuadrante izquierdo superior, que recogera a pases y comunidades con altos resultados,
pero con mayor diferencia entre percentiles extremos y, por lo tanto, menor
homogeneidad. Aqu nos encontramos pases como Corea, Suiza o Pases Bajos. En
este cuadrante no se encuentra ninguna comunidad autnoma.
- Cuadrante inferior derecho, donde se colocan los pases y comunidades con variabilidad y
resultados inferiores a la media, son sistemas equitativos, pero mediocres en
puntuacin. En esta apartado se encuentran 7 comunidades autnomas y pases como
Estados Unidos o Letonia o Grecia.
- Finalmente, el cuadrante inferior izquierdo, donde encontramos los sistemas educativos
con peores resultados y menor equidad. En este cuadrante no se encuentra ninguna
comunidad autnoma, pero s pases como Hungra, Eslovaquia o Israel.
Euskadi presenta una variabilidad relativamente baja (265) entre todos los pases y
comunidades consideradas en el grfico. Su variabilidad es inferior a la media de la OCDE, de
Espaa y de la mayora de las comunidades autnomas, lo que le caracteriza como un sistema
bastante equitativo, pero cuyos resultados (492 puntos) deberan mejorar para convertirse en
un sistema de excelencia.
Japn 540
Resultados en Competencia matemtica
Mejores resultados
Asturias EUSKADI
PortugalU.Europea OCDE Espaa
Islandia Italia LuxembourgoOC Castilla-La Mancha C. Valenciana
Republica Checa
Baleares
Letonia 480
Hungra Eslovaquia Extremadura
EE.UU. Murcia
Israel
Andaluca 460
Canarias
Grecia
440
Chile 420
Turqua
Mexico
400
360 340 320 300 280 260 240 220
Variabilidad (Percentil 5-Percentil 95) en Competencia Matemtica
-10
Nivel -1 Nivel 1 Nivel 2 Nivel 3 Nivel 4 Nivel 5 Nivel 6
19 19
80 19 18
22 19 19
22 23
23
60
54 46 46 46 48
52 51 45
40 49 51
20
20 21 21 22 23 23
16 17 15 16
0
2003 2006 2009 2012 2015 2003 2006 2009 2012 2015
Euskadi . OCDE
Nivel de excelencia 5-6 Nivel Alto 4 Nivel Medio 2-3 Nivel Bajo 1
El porcentaje de alumnado vasco en los niveles bajos de rendimiento siempre ha estado por
debajo de la media de los pases de la OCDE, incluso en 2015. En las anteriores ediciones, la
distancia de porcentajes entre Euskadi y la OCDE se situaba entre 4 y 7 puntos porcentuales,
mientras que en 2015 se reduce esta diferencia a tres puntos, debido al sustantivo incremento
del dato del Pas Vasco. Segn la descripcin de niveles que realiza PISA, quienes se encuentran
en este nivel solo son capaces de responder a preguntas relacionadas con contextos que les
En los niveles de excelencia, Euskadi siempre se ha situado por debajo de los porcentajes
de la ODCE, excepto en 2009, edicin en la que ambos porcentajes se igualaron. En 2012 y en
2015 Euskadi tiene 3 puntos porcentuales menos que la OCDE en este nivel.
Euskadi tiene porcentajes en los niveles bajos de rendimiento (19%) similares a Polonia,
Pases Bajos, Noruega, Alemania, Repblica Checa, Suecia, Blgica y a comunidades autnomas
como Castilla-La Mancha, Madrid, Catalua, Aragn, Galicia, Cantabria, Comunidad Valenciana,
y Asturias. Sin embargo, se aleja de pases y comunidades como Estonia (11%), Dinamarca
(13%), Finlandia (14%), Irlanda (15%), Navarra (12%) o Castilla Len (15%).
En el grfico siguiente se pueden apreciar las diferencias entre la puntuacin obtenida por el
alumnado evaluado en 2012 y el evaluado en 2015 teniendo en cuenta dos variables: red
educativa y modelo lingstico en el que est escolarizado. En las dos variables, los anlisis se
han realizado sobre la muestra ponderada.
0,0 0
-7 -9
-11 -5
200,0 -14
-19 -18 -10
400,0
-15
600,0 -20
Pas Vasco Pblica Concertada Modelo A Modelo B Modelo D
Red Modelo
Por modelos lingsticos, el modelo B es el que muestra unos datos ms positivos: menor
porcentaje de alumnado en el nivel bajo y mayor porcentaje en los niveles de excelencia. El
modelo A tiene un porcentaje en los niveles bajos extraordinariamente alto, casi el 29% de su
alumnado. Todos los modelos superan el umbral del 15% marcado por el indicador europeo
para 2020.
Grfico 3.3.4.c. PISA 2015. Competencia matemtica. Porcentaje de alumnado por niveles
de rendimiento segn modelo lingstico.
35,0
NIVEL BAJO 30,4 29,6 NIVEL DE EXCELENCIA
30,0 Modelo A: 28,7% Modelo A: 6,4%
Modelo B: 17,5% 25,3 25,1 Modelo B: 8,2%
Modelo d: 18,7% 24,0 23,4 Modelo d: 7,2%
25,0
19,1 20,0 19,4
20,0
16,1
15,0 13,9
12,8
9,6
10,0 7,0 6,3
4,7 4,8 5,7
5,0
0,7 1,2 0,9
0,0
Nivel -1 Nivel 1 Nivel 2 Nivel 3 Nivel 4 Nivel 5 Nivel 6
Modelo A Modelo B Modelo D
Solo el modelo A pblico muestra diferencias significativas con el resto de los estratos,
excepto con el B pblico. Los resultados del modelo B pblico son significativamente ms bajos
que los de los estratos de la red concertada. El modelo D pblico no tiene diferencias
significativas con ningn estrato, salvo con el A pblico. Entre los estratos concertados no hay
diferencias estadsticamente significativas.
200,0 22 10
0,0 0
-7
-14 -15 -13
200,0 -10
-25 -23
600,0 -30
Pas Vasco A Pblico B Pblico D Pblico A Concertado B Concertado D Concertado
Estrato
Grfico 3.3.5.b. PISA 2015. Competencia matemtica. Porcentaje de alumnado por niveles de
rendimiento segn estratos.
35
NIVEL BAJO 32 NIVEL DE EXCELENCIA
31 31
30 28 28 29
26 26
24 24 23 24
25 22
21 22 21
20 17 18
16 15
15 13
10 11 12
10
10 8 7 7
6 6
5
4 4 5 6
5
1 1 1
0 0 1 1
0
Nivel -1 Nivel 1 Nivel 2 Nivel 3 Nivel 4 Nivel 5 Nivel 6
A pblico B pblico D pblico A concertado B concertado D concertado
En el grfico siguiente, se muestran las diferencias entre los resultados de PISA 2012 y PISA
2015 en las tres variables analizadas anteriormente: Titularidad o red educativa, modelos
lingsticos (que, como hemos visto, han sido variables muestrales) y estratos educativos (que,
sin ser variable muestral, nos permite un anlisis del sistema educativo vasco ms profundo).
10,0
0,0
Concertada
A Concertado
D Concertado
Pblico
B Concertado
A Pblico
D Pblico
Modelo A
B Pblico
Modelo B
Modelo D
El rendimiento de un sistema educativo no se puede medir solo por los resultados de sus
estudiantes, ni por esos resultados tomados de forma aislada y descontextualizada. Por ello, en
este apartado se analizan algunas variables y factores que se han detectado como ms
importantes en relacin con los resultados en las competencias evaluadas. Son mltiples los
factores que inciden en el rendimiento del alumnado: por un lado, los factores sociales,
econmicos y culturales, tanto de los pases como de sus sistemas educativos; por otro, los
asociados a las caractersticas de los centros docentes y a las propias de los y las estudiantes y
a su entorno familiar.
Todos los pases y comunidades que se sitan por encima de la diagonal han obtenido
resultados que estn por encima de lo esperado en relacin con su ISEC, y al contrario cuando
se encuentran por debajo de la recta de regresin. Euskadi se sita por encima de la diagonal,
540 Japn
Corea
Estonia Suiza
Navarra
PISA 2015 Puntuacion en Competencia matemmtica
520 Canad
EsloveniaPases Bajos
Dinamarca
Castilla y Len Blgica Finlandia
Polonia Madrid Alemania Irlanda Noruega
Aragn Catalua
500 Austria
N.Zelanda
Cantrabria R. Checa UE 28 Australia
Galicia
AsturiasPortugal Italia Suecia
EuskadiFrancia OCDE Reino Unido
Islandia
Castilla-La Mancha Espaa
C. Valenciana Hungra Luxemburgo
480 Baleares Eslovaquia
Extremadura
Murcia Israel
EE.UU.
Andaluca
460 Grecia
Canarias
440
Chile
420
-1,00 -0,80 -0,60 -0,40 -0,20 0,00 0,20 0,40 0,60 0,80 1,00
ISEC (Indice socioeconmico y cultural)
Un anlisis que nos puede dar una imagen distinta en relacin con el nivel socioeconmico
y cultural es examinar los resultados distribuyendo a todo el alumnado en cuatro niveles de
ISEC o cuartiles. Es evidente que en los datos por niveles de ISEC correspondientes a 2015,
que se presentan en el grfico siguiente, la correlacin entre ambos datos, puntuacin e ISEC,
se muestra de manera clara: el alumnado con el nivel ms alto de ISEC obtiene unos resultados
que estn 57 puntos por encima de quienes tienen el nivel bajo de este ndice. Adems, la
diferencia es estadsticamente significativa entre todos los niveles de ISEC, salvo entre los dos
niveles medios.
Ya se ha sealado que en la comparacin de esta variable entre 2012 y 2015 hay que tener
en cuenta que el ISEC medio de Euskadi en 2012 (+0,03) y en 2015 (-0,25) es distinto y, por lo
tanto, esto se traslada al ISEC medio de cada uno de los niveles del ndice. A travs de los dos
siguientes grficos podemos comparar los resultados por niveles ISEC de 2015 con los
obtenidos en 2012:
- En 2015 todos los niveles de ISEC empeoran sus resultados y adems lo hacen en
sentido contrario al orden que podra considerarse como lgico: pierde mucho ms el
alumnado de nivel alto, 23,7 puntos, que el de nivel bajo, que baja menos de la mitad.
Por lo tanto, el comportamiento de los resultados por nivel ISEC va en sentido
contrario al que sera deseable: mejora de los niveles bajos del ndice y subida tambin
de los niveles altos del ISEC.
- Se observa una variacin importante en el ISEC de los cuatro niveles del ndice. La
mayor diferencia se da en el nivel bajo, mientras el nivel alto es el que mantiene un
dato de ISEC ms cercano en ambas ediciones.
- Estos datos nuevamente nos evidencian la negativa evolucin de la excelencia en los
resultados de esta prueba, ya que a pesar de que el alumnado de nivel alto es el que
menos nivel de ISEC ha perdido entre 2102 y 2015, sin embargo su nivel de
rendimiento evoluciona de manera muy negativa.
-0,10 -5,0
-0,17
-0,20
-0,25 -10,0
-0,30 -10,6 -0,32
-15,0
-0,40 -15,4
-16,6
-0,50 -20,0
-0,52
-0,60 -22,7 -25,0
Niv ISEC bajo Niv ISEC medio bajo Niv ISEC medio alto Niv ISEC alto
Como muestra el grfico siguiente, los chicos obtienen mejor puntuacin que las chicas en
Competencia matemtica, tanto en 2012 como en 2015, pero la distancia entre ambas ediciones
se reduce desde los 14 puntos de 2012 a los 9 de 2015.
420
400
2012 2015
CHICA CHICO Euskadi
La bajada de puntuacin entre ambas ediciones tiene una intensidad diferente en ambos
sexos, las chicas descienden 11 puntos y los chicos 16 puntos.
Los anlisis realizados por variables muestrales, que se muestran en el grfico siguiente, nos
indican que tanto por redes como por modelos, los resultados de los chicos estn en todos los
casos por encima del de las chicas. La menor distancia se observa en el modelo D donde la
diferencia entre ambos sexos es de ms de 5 puntos, mientras que en los otros dos modelos la
distancia entre puntuaciones supera los 9 puntos.
Por estratos, las distancias son muy variables: en el estrato A pblico la diferencia llega
hasta algo ms de los 40 puntos (mximo), mientras que en el A concertado solo llega a 0,5
puntos (mnimo).
A Concertado
A
Itunpekoa
D Concertado
A pblico
D pblico
B pblico
B Concertado
10,0 7,8
5,2 5,4 5,1
5,0
0,6 1,3
0,0
Nivel -1 Nivel 1 Nivel 2 Nivel 3 Nivel 4 Nivel 5 Nivel 6
CHICAS CHICOS
50,0
0,0
-2,5
-150,0 -15,5 -13,7
-10,0
2012 2015 Diferencias
-350,0 -20,0
-550,0 -30,0
2 ESO 3 ESO 4 ESO Media Euskadi
400
Hay que recordar que Euskadi, junto con Catalua, Navarra y Asturias, eran las
comunidades con porcentajes de alumnado en 4 de ESO superiores al 70%; sin embargo, el
resultado de Euskadi est a 4 puntos de Catalua, 6 de Asturias y 29 de Navarra. En el
alumnado de 3 ESO la distancia entre Euskadi y esas tres comunidades autnomas van de los
23 con Navarra a los 4 con Asturias. Finalmente, la puntuacin del alumnado vasco
escolarizado en 2 de ESO est por debajo de la de Navarra y Catalua (-13 y 15 puntos) y por
encima de la de Asturias (+13 puntos).
El alumnado de 4 de ESO de Navarra y de La Rioja tiene los mejores resultados, 543 y 541
puntos respectivamente, lo que supone una diferencia de 29 y 27 puntos con el alumnado
vasco del mismo nivel. El alumnado de 3 de ESO de La Rioja es el que tiene la mayor
puntuacin (458 puntos) y el de Navarra la ms alta de entre el alumnado de 2 de ESO (411),
esto implica una diferencia con el alumnado de Euskadi en dichos niveles de 30 puntos en el
primer caso y de 15 puntos en el segundo.
543 541
550 536 535 534 528 526 521 520 518 517 515 515 514 511 508 503
490
500
350
495 503 512 499 519 508 526 501 502 488
550 30
500
450
400 25 20
350
300
250
200 13 14 10
150 11
100
50
0 0
-50 -7
-100
-150 -10
-200
-250
-300
-350 -20
-400
-450
-500
-550 -30
PISA 2003 PISA 2006 PISA 2009 PISA 2012 PISA 2015
Euskara Castellano Diferencia
Por redes educativas se observa que en 2015 en la red concertada no hay diferencia
significativa entre las versiones en euskara y castellano, mientras que en la red pblica se da
una distancia de 26 puntos y la diferencia es estadsticamente significativa. En la red pblica
hicieron la prueba en euskara un 7% ms de alumnos que en la red concertada.
Por modelos lingsticos, ningn alumno o alumna del modelo A hizo la prueba en euskara y
slo el 0,5% del alumnado del modelo B contest en esa lengua. En el modelo D, cerca del
41% de su poblacin respondi a la versin en euskara. Por lo tanto, la comparacin de
resultados entre ambas versiones de la prueba solo se puede establecer de manera pertinente
en el modelo D y lgicamente el resultado de la versin en euskara del modelo D coincide con
la media de Euskadi en esa lengua sealada en el grfico 3.3.6.4.a. La diferencia entre ambas
versiones de la prueba en el modelo D no es significativa.
Euskara
Euskara
Euskara
Euskara
Euskara
Castellano
Castellano
Castellano
Castellano
Castellano
Castellano
En 2012 haba diferencia significativa entre los vascfonos familiares y los castellano
hablantes familiares, esta significatividad se pierde en 2015. Los resultados del grupo Otra
lengua son significativamente ms bajos que los de los otros dos grupos lingsticos en ambas
ediciones.
Los grupos de lengua familiar euskara y castellano pierden puntuacin de 2012 a 2015, en el
primer caso 12,5 puntos y en el segundo 16,6 puntos.
Grfico 3.3.6.4.2.a. PISA. Resultados 2012-2015 en Competencia
matemtica segn lengua familiar.
521,2 508,8 507,8 491,1
550,0 20,0
437,5 439,1
450,0
15,0
350,0
250,0 10,0
150,0 5,0
1,6
50,0
0,0
-50,0
-150,0 -5,0
-250,0 -10,0
-350,0
-12,5 -15,0
-450,0
-550,0 -16,6 -20,0
Euskara Castellano Otra Lengua o N/C
A continuacin nos centraremos en el anlisis de los resultados del alumnado del modelo D
y compararemos sus resultados a partir de la combinacin de su lengua familiar (euskara,
En esta competencia, las diferencias con respecto a la media de Euskadi son relativamente
pequeas. Solo destaca el dato de que quienes siendo vascfonos familiares hicieron la prueba
en euskara tienen una puntuacin en 2105 que est ms de 20 puntos por encima de la media
de la comunidad.
El alumnado castellano hablante familiar que hizo la prueba en castellano pierde 22 puntos
de 2012 a 2015 y el vascfono familiar que hizo la prueba en euskara baja su puntuacin en 18
puntos, en ambos casos por encima de la prdida de puntuacin de Euskadi. Los castellano
hablantes familiares que hicieron la prueba en euskara, tambin empeoran su puntuacin en 18
puntos.
COMPETENCIA MATEMTICA
Las tareas en este nivel generalmente requieren que la persona que lee haga
varias inferencias, comparaciones y contrastes que son a la vez detallados y
precisos. Requieren demostracin de una comprensin completa y detallada de
uno o ms textos y pueden implicar la integracin de la informacin de ms de
un texto. Las tareas pueden requerir que la persona que lee se encuentre con
ideas desconocidas, en presencia de informacin que compite de manera
Nivel 6 Ms de 698 prominente, y que genere categoras abstractas de interpretaciones. Las tareas
de reflexionar y evaluar pueden requerir que la persona que lee emita hiptesis
sobre o evale crticamente un texto complejo sobre un tema desconocido,
teniendo en cuenta varios criterios o puntos de vista, y que aplique
comprensiones sofisticadas desde ms all del texto. Una condicin relevante
para las tareas de acceder y recuperar en este nivel es la precisin del anlisis y la
atencin al detalle que es poco visible en los textos.
Las tareas en este nivel que implican recuperar informacin requieren que la
persona que lee localice y organice varios fragmentos de informacin
incrustada. Algunas tareas en este nivel requieren interpretar el significado de
matices del lenguaje en una seccin de texto, teniendo en cuenta el texto en su
Entre 553 y conjunto. Otras tareas interpretativas requieren comprender y aplicar
Nivel 4
626 categoras en un contexto desconocido. Las tareas reflexivas en este nivel
requieren que las personas que leen utilicen el conocimiento formal o pblico
para emitir hiptesis sobre o evaluar crticamente un texto. Las personas que
leen deben demostrar una comprensin exacta de los textos largos o
complejos cuyo contenido o forma puede ser desconocido.
Las tareas en este nivel requieren que la persona que lee localice, y en algunos
casos reconozca la relacin entre varios fragmentos de informacin que deben
cumplir varias condiciones. Las tareas de interpretacin de este nivel requieren
que la persona que lee integre varias partes de un texto con el fin de identificar
una idea principal, comprender una relacin o interpretar el significado de una
Entre 480 y palabra o frase. Tienen que tener en cuenta muchas caractersticas al comparar,
Nivel 3
553 contrastar o categorizar. A menudo, la informacin requerida no es prominente
o hay mucha informacin que compite; o hay otros obstculos en el texto,
como ideas que son contrarias a lo esperado o negativamente redactadas. Las
tareas reflexivas en este nivel pueden requerir conexiones, comparaciones y
explicaciones, o pueden requerir que la persona que lee evale una
caracterstica del texto. Algunas tareas reflexivas requieren que las personas
que leen demuestren una buena comprensin del texto en relacin con el
Algunas tareas en este nivel requieren que la persona que lee localice uno o
ms fragmentos de informacin, que pueden necesitar ser inferidos y puede ser
necesario cumplir una serie de condiciones. Otros requieren el reconocimiento
de la idea principal de un texto, la comprensin de las relaciones, o interpretar
su significado dentro de una parte limitada del texto cuando la informacin no
Entre 407 y
Nivel 2 es prominente y la persona que lee debe hacer inferencias de bajo nivel. Las
480
tareas en este nivel pueden incluir comparaciones o contrastes en base a una
sola caracterstica en el texto. Las tareas reflexivas tpicas en este nivel
requieren que las personas que leen hagan una comparacin o varias
conexiones entre el texto y el conocimiento exterior, y hagan uso de la
experiencia y las actitudes personales.
Las tareas en este nivel requieren que la persona que lee localice una o ms
piezas independientes de informacin explcita; para reconocer el tema
principal o el propsito del autor o autora en un texto sobre un tema
Entre 335 y conocido, o para hacer una conexin simple entre la informacin del texto y el
Nivel 1a
480 conocimiento comn, de todos los das. Normalmente, la informacin
requerida en el texto es prominente y hay poca, o ninguna, informacin de la
competencia. El lector es explcitamente dirigido a considerar los factores
relevantes en la tarea y en el texto.
Las tareas en este nivel requieren que la persona que lee busque un nico
fragmento de informacin explcita en una posicin prominente en un texto
breve y sintcticamente simple con un contexto y tipo de texto familiar, como
Entre 262 y
Nivel 1b una narracin o una simple lista. El texto normalmente proporciona apoyo a la
335
persona que lee, como la repeticin de la informacin, imgenes o smbolos
conocidos. Hay poca informacin que compita. En las tareas que requieren
interpretacin la persona que lee puede tener que realizar conexiones simples
entre piezas adyacentes de informacin.