contexto internacional. El capítulo describe el rendimiento de su centro en términos de la media del centro y de la distribución de los alumnos en los niveles de competencia PISA, incluyendo el porcentaje de los alumnos con mejor rendimiento y el de los alumnos que no alcanzan el nivel de competencia básico. Este Capítulo muestra también cuál es el nivel de rendimiento de su centro educativo en comparación con el rendimiento de centros similares del país en términos del contexto socio-económico de los alumnos. El Capítulo 3, La implicación de los alumnos y el ambiente de aprendizaje en su centro desde una perspectiva internacional, describe las relaciones profesor-alumno en su centro, el clima de disciplina en las clases y las actitudes de los alumnos hacia el aprendizaje basándose en la información que proporcionan los alumnos en los cuestionarios de contexto. El capítulo muestra cómo se relacionan estos elementos con el rendimiento de los alumnos en su centro y explica las conclusiones internacionales sobre las relaciones entre el ambiente de aprendizaje y los resultados de aprendizaje de los alumnos.
El Capítulo 4, Su centro en comparación con centros similares en su país, se centra en la relación entre el estatus socio-económico de los alumnos de su centro y su rendimiento en relación con los alumnos y centros en su país, basándose en los resultados del PISA 2012. Los resultados del PISA han mostrado que no sólo es útil mirar al rendimiento absoluto, sino que también es útil tener en cuenta el grado en el que los alumnos provienen de entornos familiares ventajosos o desaventajados. También, este capítulo muestra el rendimiento de su centro en el contexto de los centros públicos y privados de su país, y muestra cómo se puede valorar este rendimiento en función del estatus socio-económico promedio de los alumnos del centro.
El Capítulo 5, Los resultados de su centro en el contexto internacional, sitúa los resultados de su centro en el contexto internacional de referencia para su comparación. Se comparan los resultados de su centro con los resultados del PISA 2012 obtenidos por los países de la OCDE y por otros países seleccionados que constituyen una referencia adecuada para los centros españoles, algunos de los cuales tienen un alto rendimiento. El capítulo incluye una comparación entre cómo rinden los alumnos de su centro comparados con los alumnos de centros similares en Finlandia, el sistema educativo de la OCDE con mayor rendimiento, y en Portugal.
Los anexos incluyen un resumen técnico de la evaluación, un resumen de cómo se realizó la prueba en su centro, ejemplos de las preguntas de la prueba y las tablas de resultados más relevantes de los países y economías que participaron en el PISA 2012.
A lo largo del informe se encuentran casos reales e información sobre experiencias exitosas de mejora de centros educativos, recopilados del PISA y de otras investigaciones educativas de la OCDE. También, se incluyen en el informe cuadros de texto que describen cómo algunos centros educativos y profesionales de la educación han tenido éxito al implementar reformas, y cómo han abordado el problema del bajo rendimiento y fomentado el progreso de los alumnos con talento. Se incluyen también vínculos a recursos adicionales, tales como una serie de vídeos que muestran a educadores y responsables políticos del mundo contando sus propias historias sobre cómo tuvieron éxito en la mejora de los resultados de los alumnos.
Cuadro 1.3. Una introducción a los marcos teóricos de evaluación de PISA
Los marcos de evaluación del PISA se centran en la capacidad del alumno para analizar, razonar y comunicar de manera eficaz a la vez que plantean, solucionan e interpretan problemas en diversas situaciones. Se ha elegido la edad de 15 años como la población objeto del estudio del PISA, porque a esta edad los alumnos se están aproximando al fin de la educación obligatoria en la mayoría de los países de la OCDE.
Una competencia implica mucho más que la capacidad de reproducir el conocimiento acumulado. Los marcos teóricos de evaluación del PISA definen “competencia” como la capacidad de responder con éxito a demandas complejas en diferentes contextos mediante la puesta en funcionamiento de recursos psico-sociales, que incluyen el conocimiento, las habilidades, la motivación, las actitudes, las emociones, y otros componentes sociales y conductuales. Dentro de esta definición, las primeras evaluaciones PISA se han centrado en la competencia de lecto-escritura, definidas como la capacidad de los jóvenes adultos para acceder, manejar, integrar y evaluar la información; pensar de manera imaginativa; hipotetizar y descubrir; y comunicar sus ideas de manera efectiva. La razón detrás del cambio del énfasis de evaluar si los alumnos saben reproducir lo que han aprendido a si son capaces de extrapolar lo que han aprendido y aplicar sus competencias en situaciones nuevas deriva de la naturaleza del conocimiento y habilidades requeridas en la vida moderna: las tareas que se pueden resolver por medio de la simple memorización o con algoritmos preestablecidos son aquellas que también son fáciles de digitalizar, automatizar y contratar externamente, y por lo tanto serán menos relevantes en una sociedad moderna basada en el conocimiento.
Para resaltar el proceso de desarrollo de los marcos teóricos del PISA, que incluyen pero que no se limitan a las áreas de lectura, matemáticas y ciencias, a continuación se resumen los hitos más destacados desde el primer ciclo de la evaluación PISA en el año 2000:
• En el año 2000, el estudio PISA se inició haciendo énfasis en la competencia lectora, examinando la capacidad de los alumnos para usar, interpretar y reflexionar a partir de material escrito. • En el año 2003, el programa PISA se centró en la capacidad de los alumnos de poner el
conocimiento matemático en uso funcional en múltiples situaciones de manera variada, reflexiva y fundamentada en la comprensión. De modo diferente a la enseñanza de las matemáticas en la escuela tradicional, frecuentemente enseñadas en un mundo matemático abstracto y de un modo en el que se sitúan distantes de los contextos auténticos, el PISA intentó resaltar la utilidad de las matemáticas en el mundo real. Para tener éxito en la evaluación PISA, los alumnos tenían que establecer conexiones entre el mundo real y el matemático, a menudo en tareas abiertas y complejas. Por lo tanto, muchas de las tareas del PISA presentaban a los alumnos problemas de la vida real en un formato abierto. Como primer paso, los alumnos tenían que traducir la situación o problema al que se enfrentaban a una forma que ponía de manifiesto la relevancia de las matemáticas. Luego tenían que adaptar los problemas para hacerlos manejables mediante el tratamiento matemático, utilizando el conocimiento matemático relevante para solucionar los problemas, y como último paso, evaluar la solución en el contexto original del problema. • En el PISA 2003, también se incluyó la solución de problemas como un dominio adicional de
evaluación. Desde esa evaluación, se ha realizado un número considerable de investigaciones en las áreas de la solución de problemas complejos, transferencia, evaluación informatizada de la solución de problemas, y evaluación a gran escala de la competencia de solución de
problemas1. Estas investigaciones han producido avances en la comprensión y en la medida de las capacidades de solución de problemas de los individuos y constituyen la base del desarrollo del marco de solución de problemas del PISA 2012 descrito posteriormente en esta nota. • El desarrollo de PISA continuó con la evaluación de las ciencias en 2006 que se centró en:
i) el conocimiento científico de los alumnos y el uso de tal conocimiento para identificar preguntas científicas, para adquirir nuevos conocimientos, para explicar fenómenos científicos, y para sacar conclusiones basadas en evidencias sobre temas relacionados con las ciencias; ii) la comprensión de los alumnos de los rasgos característicos de la ciencia como forma de conocimiento humano y de investigación; iii) la consciencia de los alumnos de cómo la ciencia y la tecnología dan forma a nuestros entornos materiales, intelectuales y culturales; y, iv) la voluntad de los alumnos de implicarse, como ciudadanos reflexivos, en temas relacionados con las ciencias, y con las ideas de la ciencia. El estudio PISA también ha comenzado a examinar las disposiciones de los alumnos hacia el aprendizaje, sus aproximaciones al aprendizaje, su auto-concepto y su implicación con su centro educativo de un modo más general.
• En el PISA 2009, la competencia lectora fue de nuevo el dominio principal, como lo fue en la evaluación inicial del año 2000. No obstante, basándose en el progreso en la investigación y en la metodología, se incorporaron en 2009 nuevos elementos y desarrollos importantes al marco actualizado de la competencia lectora. Además de la incorporación de textos electrónicos, el marco de evaluación del PISA 2009 elaboró los constructos de implicación lectora y metaconocimiento (la consciencia de y la habilidad de usar diversas estrategias apropiadas para procesar textos orientados a objetivos), dada su importancia para la competencia lectora y para la capacidad de respuesta de los alumnos a la enseñanza y el aprendizaje.
• En el PISA 2012, se implementó como un elemento central la evaluación informatizada de la solución de problemas. Además, el marco de la competencia financiera, desarrollado para la evaluación PISA 2012, ha servido de base para una evaluación opcional de este dominio. De igual manera, 32 países y economías participantes aplicaron la evaluación informatizada de lectura y matemáticas. Como se presenta en el capítulo siguiente, los marcos de evaluación del PISA aprovecharán los beneficios proporcionados por las evaluaciones realizadas por ordenador. • El ciclo PISA 2015 se centrará de nuevo en la competencia científica como dominio principal
(como en el año 2006), y ya se está trabajando para revisar el marco de la competencia científica, incluyendo la posibilidad de su realización por ordenador. A partir del marco de la solución de problemas desarrollado para el ciclo 2012, un aspecto importante para el 2015 es la intención de construir e incluir una evaluación informatizada de las habilidades colaborativas de solución de problemas. Dado que involucrar a otros alumnos en un trabajo colaborativo en grupo requiere habilidades sociales y cognitivas adicionales para el trabajo en grupo, así como interacciones interpersonales, la evaluación colaborativa informatizada de la solución de problemas supone un paso importante para hacer posible la evaluación de las competencias interpersonales. Para saber más de los marcos teóricos de evaluación de PISA, ir a:
• PISA 2012 Assessment and Analytical Framework: Mathematics, Reading, Science, Problem Solving and Financial Literacy.
Lo que los alumnos de su centro
saben y son capaces de hacer en
lectura, matemáticas y ciencias
PROMEDIO ESPAÑA
Este capítulo proporciona una visión global del rendimiento de su centro en la evaluación PISA para Centros Educativos. Describe lo que los alumnos de su centro saben y son capaces de hacer en cada uno de los tres dominios de lectura, matemáticas y ciencias, centrándose en la distribución de los alumnos con alto y bajo rendimiento, y en los tipos de tareas que son capaces de hacer. El capítulo resalta la importancia de los niveles de competencia del PISA para comprender los resultados de la evaluación.
EL PERFIL DEL RENDIMIENTO DE LOS ALUMNOS DE SU CENTRO COMPARADO CON EL DE ESPAÑA
Como se comenta en el capítulo anterior, la prueba PISA para Centros Educativos mide el conocimiento y las habilidades de los alumnos en tres áreas temáticas fundamentales: la lectura, las matemáticas y las ciencias. Para entender mejor los resultados de rendimiento de su centro, es conveniente empezar comparándolos con el rendimiento de los alumnos de otros centros de su país. Los gráficos 2.1a, 2.1b y 2.1c muestran los resultados medios de rendimiento de su centro en lectura, matemáticas y ciencias en relación con los alumnos y con los centros de mayor y menor rendimiento de España.
A la derecha de las tablas se encuentran dos umbrales de rendimiento relacionados con los centros educativos con mayor y menor rendimiento de España en el PISA 2012, en ciencias lectura y matemáticas respectivamente. En el extremo superior de rendimiento, el marcador superior indica el punto por encima del cual se encuentra el rendimiento promedio de los centros con mayor rendimiento y se sitúa el 10 por ciento de los alumnos en España. En el extremo inferior de rendimiento, el marcador indica el punto por debajo del cual se encuentra el rendimiento promedio de los centros con menor rendimiento y se sitúa el 10 por ciento de los alumnos en España. Los centros que no son ni los de mayor ni los de menor rendimiento –que suponen el 80 por ciento restante de los alumnos en España obtienen un rendimiento promedio que se sitúa entre los dos puntos. Los gráficos también incluyen las puntuaciones medias de rendimiento de los alumnos de España en el PISA 2012 en lectura, matemáticas y ciencias mostradas por las líneas sombreadas.
Gráfico 2.1a El rendimiento de su centro en lectura comparado con los centros en España en el PISA 2012
Nota: Las barras sombreadas situadas por encima o por debajo de las puntuaciones medias representan el intervalo de confianza del 95%. En otras palabras, en el caso de los resultados de su centro, se puede tener una confianza del 95% en que si se administrase la prueba en su centro educativo varias veces, su puntuación media de rendimiento se encontraría dentro de este intervalo de confianza.
200 300 400 500 600 700 800 a ñ a p s E o r t n e C u S PISA e sca la d e lect ur a
Los estudiantes del 10% de centros de España obtienen un rendimiento promedio por encima de este punto Los estudiantes del 10% de centros de España obtienen un rendimiento promedio por debajo de este punto
Rendimiento promedio de estudiantes en España en PISA 2012 Rendimiento promedio de Su centro
Gráfico 2.1b El rendimiento de su centro en matemáticas comparado con los centros en España en el PISA 2012
Gráfico 2.1c El rendimiento de su centro en ciencias comparado con los centros en España en el PISA 2012
Nota: Las barras sombreadas situadas por encima o por debajo de las puntuaciones medias representan el intervalo de confianza del 95%. En otras palabras, en el caso de los resultados de su centro, se puede tener una confianza del 95% en que si se administrase la prueba en su centro educativo varias veces, su puntuación media de rendimiento se encontraría dentro de este intervalo de confianza. Fuente: OECD.
Nota: Las barras sombreadas situadas por encima o por debajo de las puntuaciones medias representan el intervalo de confianza del 95%. En otras palabras, en el caso de los resultados de su centro, se puede tener una confianza del 95% en que si se administrase la prueba en su centro educativo varias veces, su puntuación media de rendimiento se encontraría dentro de este intervalo de confianza.
200 300 400 500 600 700 800 a ñ a p s E o r t n e C u S PIS A e scala
de ciencias Rendimiento promedio de
estudiantes en España en PISA 2012 Los estudiantes del 10% de centros de España obtienen un rendimiento promedio por encima de este punto Los estudiantes del 10% de centros de España obtienen un rendimiento promedio por debajo de este punto Rendimiento promedio de Su centro
200 300 400 500 600 700 800 a ñ a p s E o r t n e C u S PIS A e scala de m atemáticas Rendimiento promedio de estudiantes en España en PISA 2012 Los estudiantes del 10% de centros de España obtienen un rendimiento promedio por encima de este punto Los estudiantes del 10% de centros de España obtienen un rendimiento promedio por debajo de este punto Rendimiento promedio de Su centro
El rendimiento de los alumnos en España
En España, el promedio de rendimiento en lectura en el PISA 2012 fue de 488 puntos en la escala de lectura estando este promedio significativamente por debajo del promedio de 496 puntos de los países de la OCDE. Entre los países de la OCDE, Japón, Corea y Finlandia, se encuentran entre los países con más alto rendimiento en el PISA 2012, con promedios de 538, 536 y 524 puntos, respectivamente. Entre los países y economías que participaron en el PISA 2012 pero que no son miembros de la OCDE, Shanghái-China, es la economía que obtuvo el rendimiento más alto en lectura. Entre los países de la OCDE, Chile y México, fueron los países con menor rendimiento, con puntuaciones en lectura de 441 y de 424 puntos, respectivamente, mientras que Perú –un país no miembro– fue uno de los países con menor rendimiento en el conjunto de países participantes, con un promedio de 384 puntos en lectura.
En matemáticas, el rendimiento de España en el PISA 2012 (484 puntos) está significativamente por debajo del promedio de los países de la OCDE (494 puntos). Los sistemas educativos de los países de la OCDE con más alto rendimiento en el PISA 2012 son el de Corea con una puntuación promedio de 554 puntos y los de Japón (536 puntos) y Suiza (531 puntos). Entre los participantes no miembros de la OCDE, Shanghái-China ocupa la primera posición en matemáticas con 613 puntos. Los países de la OCDE que obtienen menor rendimiento son México y Chile con 413 y 423 puntos respectivamente.
El rendimiento en ciencias de los estudiantes en España fue de 496 puntos en el PISA 2012, situándose significativamente por debajo del promedio de los países de la OCDE, 500 puntos. Japón, Finlandia y Estonia, con 547, 545 y 541 puntos, respectivamente, fueron los países con mejor rendimiento a considerable distancia del resto de los países miembros de la OCDE, mientras que México, con 415 puntos, y Chile, con 445, ocuparon las posiciones de menor rendimiento entre los países de la OCDE.
En el PISA 2012, Japón, Corea, Finlandia, Estonia y Canadá son los cinco países que se sitúan sistemáticamente entre las siete primeras posiciones en el listado ordenado de rendimiento de los países de la OCDE con mejor rendimiento en cualquiera de las tres áreas de evaluación, obteniendo muy buenos resultados tanto en lectura como en matemáticas y ciencias. En la situación opuesta, México y Chile son los países de la OCDE con menor rendimiento en las tres áreas evaluadas por el PISA 2012.
España ha participado en todos los ciclos del PISA desde su inicio en el año 2000. Por ello, los resultados del PISA permiten comparar el rendimiento de los estudiantes en España con los de sus compañeros de otros muchos países del mundo y conocer su tendencia a lo largo del tiempo. Este apartado del informe describe cuál ha sido el rendimiento de España en todos sus ciclos, desde el año 2000 al 2012.
Como se ha comentado anteriormente, el rendimiento de los alumnos en España se sitúa sistemáticamente por debajo del promedio de rendimiento de los 34 países que actualmente constituyen la OCDE. Los resultados de España a lo largo de los cinco ciclos del PISA muestran que su rendimiento ha permanecido básicamente estable (Gráfico 2.2).
No obstante, en lectura y en ciencias, España ha experimentado un incremento de su puntuación en 2012 aproximándose al promedio de la OCDE, aunque no llegando aún a alcanzarlo. Estas ganancias han estado producidas principalmente por mejoras tanto en la parte baja como en la parte alta de la distribución