En este capítulo se describe el contenido básico del Programa para la Evaluación Internacional de Alumnos (PISA) de 2015 y el interés de PISA en la medición de la participación del alumnado en el centro escolar, las disposiciones respecto al centro, y sus creencias personales y en la recopilación de información sobre los antecedentes del alumnado y el ambiente de aprendizaje en el centro escolar. El capítulo analiza el contenido y los objetivos del cuestionario del alumnado, el cuestionario del centro escolar (completado por la dirección del centro), el cuestionario opcional para los padres (completado por los padres del alumnado que se presentó a la prueba PISA), el cuestionario opcional de carrera docente (completado por el alumnado, que se refiere a sus aspiraciones educativas y profesionales), el cuestionario opcional sobre la familiaridad con las TIC (completado por el alumnado, en cuanto a sus actitudes hacia la experiencia con los ordenadores) y el cuestionario opcional del profesorado (completado por el profesorado, e introducido en PISA 2015).
proporcionar indicadores de la eficacia, la equidad y la eficiencia de los sistemas educativos, establecer puntos de referencia para la comparación internacional, y seguir las tendencias en el tiempo son los objetivos más importantes del programa para la evaluación internacional de alumnos (pisa). además, pisa construye una base de datos sostenible que permite a los investigadores de todo el mundo estudiar cuestiones básicas y orientadas a las políticas en materia de educación, incluida su relación con la sociedad y la economía.
para alcanzar estos objetivos, pisa no sólo necesita medidas fiables y válidas para evaluar el rendimiento cognitivo del alumnado (en competencia lectora, matemática, de ciencia y otras “destrezas para la vida”), sino también información sobre resultados no cognitivos (por ejemplo, la motivación del alumnado para aprender), las condiciones individuales (por ejemplo, antecedentes culturales, étnicos y socioeconómicos del alumnado), y las características estructurales y de procesos del contexto institucional (por ejemplo, prácticas de enseñanza y oportunidades de aprendizaje en las aulas, las políticas de liderazgo y del centro escolar para el desarrollo profesional, diferenciación vertical y horizontal del sistema escolar). este diverso conjunto de constructos se mide a través de preguntar a distintas partes interesadas, principalmente el alumnado y la dirección de los centros escolares, y (con carácter optativo) los padres y el profesorado.
pisa 2015 es la sexta ola del programa. desde el año 2000, los llamados “cuestionarios de antecedentes” han aumentado considerablemente en importancia. Mientras tanto, los cuestionarios son de interés por su propio derecho, más allá de proporcionar el “fondo” para informar de los resultados de las pruebas. pisa 2015 es una combinación de evaluación del alumnado en áreas seleccionadas de progreso y del contexto sobre diferentes temas relacionados con la política. una de las razones para este cambio de perspectiva es que quienes deciden las políticas querían que el programa informase sobre una variedad de temas que son relevantes para la práctica profesional, la gobernabilidad y la formulación de políticas en materia educativa. por lo tanto, el ámbito de las cuestiones que se tratan se ha expandido gradualmente desde pisa 2000. además del rendimiento del alumnado y su relación con la situación individual, las oportunidades de aprendizaje y los resultados no cognitivos, las políticas y las prácticas educativas es evaluado a través de indicadores. además, el análisis y la presentación de datos se han vuelto más complejos, lo que permite informes más en profundidad. además de proporcionar tablas de indicadores, patrones de entrada, procesos y diferentes resultados que se identifican entre los diferentes países1; se informa de las tendencias, se exploran las relaciones, se estima el impacto. estos análisis requieren métodos de modelización más sofisticados, y datos detallados sobre los factores contextuales en relación con el alumnado, los centros escolares y los sistemas educativos.
probablemente la característica más importante de pisa, después de 15 años de existencia, es la información disponible sobre la tendencia general de los datos. pisa permite la descripción de los cambios en el nivel de desempeño de un país a través el tiempo, y también la descripción de los cambios en los resultados no cognitivos, las condiciones de vida de los adolescentes y sus familias, las prácticas profesionales y estructuras organizativas para la enseñanza. cuanto más se mueve pisa hacia repetidos ciclos de medición, más se puede aprender de examinar la estabilidad y la variabilidad de las condiciones, los procesos, los resultados y sus relaciones: los responsables de las políticas pueden utilizar los datos de tendencias para el diagnóstico y la retroalimentación constante; la capacidad explicativa del estudio se incrementará debido a que los cambios en el rendimiento pueden ser interpretados y explicados de manera más sustancial, teniendo en cuenta los cambios en las aportaciones y el proceso (Gustafsson, 2008; Hanushek y Wößmann, 2011); y es menos probable que los análisis de tendencia sean sesgados por cuestiones culturales.
bastante a menudo, los responsables de las políticas y los investigadores se han mostrado reacios a interpretar constructos “débiles”, como el clima escolar, la motivación del alumnado, la satisfacción laboral del profesorado, o el compromiso autoevaluado de los padres, por temor a que no sean suficientemente comparables entre países. ahora que las tendencias están disponibles, la atención se centra en los tipos de cambio dentro de los países, más que en las comparaciones transversales de estado. por ejemplo, la cuestión de si el bienestar en las escuelas está aumentando o disminuyendo será un indicador relevante dentro de los países, y este indicador no se ve afectado por diferentes estilos de respuesta entre los países. sin embargo, los análisis de tendencias requieren que pisa defina un conjunto general de los constructos que permanecerá constante a lo largo de varios ciclos en el futuro. en este capítulo, este conjunto de constructos se denominará “contenido básico”1. este marco tiene la intención de explicar los objetivos y la justificación de la elección del contenido apropiado del cuestionario, lo cual guiará tanto el desarrollo del cuestionario como los próximos informes. el documento se estructura en dos partes principales: una definición del contenido básico de los cuestionarios de pisa, y una descripción de la estructura modular para una cobertura más amplia de cuestiones de política.
la primera parte de este documento vincula el marco actual a la estructura general (ciclo transversal) de la evaluación pisa del contexto establecido en el Marco de pisa 2012 (ocde 2013, p. 168 y s.). los constructos que necesitan ser
cubiertos para seguir la evolución de la educación han sido revisados, teniendo en cuenta a los antecedentes generales de la investigación de la eficacia de la educación. las medidas que han sido utilizadas previamente para la presentación inicial de informes, para los indicadores internacionales y para el análisis secundario se supervisaron, lo cual culminó en un esquema de contenido básico que debe evaluarse en todos los ciclos, para todos los participantes.
la segunda parte y la más grande de este documento explora toda la amplitud de las cuestiones de política a cubrir. estructurada en 19 módulos, explica cómo los módulos más importantes —es decir, los módulos prioritarios tan altas juzgado por la Junta de Gobierno de pisa— se han implementado en pisa 2015. a continuación, se proporcionan referencias detalladas a la investigación actual.
el desarrollo del contenido del cuestionario de pisa 2015 ha sido cuestionado no sólo con la intención de cubrir una amplia gama de cuestiones de política, sino también por la introducción de la evaluación en formato digital (cba) como el modo preferido de administración para las pruebas cognitivas y los cuestionarios. además de añadir nuevas preguntas, todo el contenido de los ciclos anteriores tuvo que ser revisado, a veces transformado en un formato apto para uso digital (como usar un control deslizante que puede ser manipulado de forma interactiva en lugar de ser completado con información numérica por parte de la persona que se examina), y un campo probado de un modo nuevo. por último, el análisis de los datos de proceso basados en la grabación del archivo de registro profundizará la comprensión del comportamiento de respuesta.
basándose en un análisis cuidadoso de los datos del estudio piloto y el análisis reflexivo de las prioridades entre los expertos y los responsables políticos, se seleccionaron los constructos, y las unidades de evaluación para incluirlas en la encuesta principal de pisa 2015. el cuestionario del alumnado se fijó a que durase 35 minutos de media.