Aplicación vigente: Proyectos de Evaluación Educativa

En la actualidad los países desarrollados, promovidos por los estudios antes mencionados, han institucionalizado la labor de evaluación de los sistemas educativos a través de la creación y gestión de diversos proyectos de ámbito internacional, estatal y autonómico.

Estos proyectos tienen su justificación en la relevancia de la educación para el desarrollo futuro de toda sociedad. En este sentido, tal y como se ha ido viendo a lo largo del capítulo, se puede constatar que el nivel socioeconómico y cultural del alumnado es un factor clave en los resultados que se obtienen de la educación.

Este hecho lleva a plantear un análisis detallado de los indicadores que cada uno de estos proyectos plantean como medida de

conocimiento de estas variables, para así progresar en el campo de estudio de factores socioeconómicos y culturales que explican el rendimiento escolar.

Proyecto Internacional Indicadores Educación

Debido a la importancia del contexto social, económico y cultural sobre la educación el proyecto INES contempla en sus bases el análisis del mismo a través de una de las Redes de Trabajo y mediante la intervención del Grupo Técnico.

La Red C, donde participa el Instituto de Evaluación del Ministerio de Educación y Ciencia y cuya presidencia está en manos de Holanda, tiene como principal cometido el desarrollo de indicadores sobre estructura, procesos y contexto de los distintos sistemas educativos. Esta red se encarga del desarrollo de indicadores como el tiempo dedicado a la docencia, horas impartidas por asignatura, carga docente del profesorado, semanas de trabajo al año, ratio estudiantes-profesor, salarios del profesorado, etc.

Por otro lado, el Grupo Técnico es responsable de proporcionar la información estadística relacionada con los indicadores de participación, acceso, titulación escolar, recursos humanos y financieros, tamaño de la población escolar, gasto educativo por estudiante y subsidios públicos, entre otros, de Education at a Glance y se encarga igualmente tanto del desarrollo de un marco conceptual para la elaboración de la información estadística, como de llevar a cabo estudios que aseguren la validez y comparabilidad internacional de dichos datos. La Oficina de Estadística del Ministerio de Educación y Ciencia es la institución española que participa en este grupo.

La labor unida de estos dos grupos lleva al desarrollo de un conjunto de indicadores denominados “de la enseñanza”, cuyo objetivo es evaluar los factores de contexto. Estos factores se analizan

demográfica, económica y socialmente, y se agrupan en los siguientes bloques:

Contexto demográfico

C01: Nivel general de formación de la población C02: Nivel de formación por sexo

C03: Jóvenes y conjunto de la población

Contexto económico y social

C11: Tasa de actividad y nivel de formación C12: Paro de los jóvenes y de los adultos C13: Renta per cápita nacional

Opiniones y esperanzas

C21: Importancia de las materias de enseñanza C22: Importancia de las cualidades/aptitudes C23: Confianza pública en la escuela

C24: Responsabilidades educativas de la escuela C25: Respeto por los profesores

C26: Prioridades en la práctica de la escuela C27: Toma de decisiones a nivel de la escuela

La obtención de estos datos se lleva a cabo fundamentalmente a partir de la participación de los países integrantes de la OCDE en la Encuesta sobre el Profesorado y el Currículum y, en el caso concreto de España, mediante las datos estadísticos nacionales recopilados

anualmente por el Instituto Nacional de Estadística la Oficina de Estadística del Ministerio de Educación y Ciencia.

Del análisis del contexto que realiza este proyecto se puede destacar que es el segundo bloque de indicadores los que atienden al objetivo de obtener información sobre el nivel socioeconómico y cultural, ya no del alumnado en concreto, sino de una sociedad en general.

Estudio Internacional Tendencias en Matemáticas y Ciencias

Una finalidad importante de TIMSS es estudiar el contexto educativo en el que los estudiantes aprenden matemáticas y ciencias para así determinar que factores son susceptibles de ser modificados o cambiados en beneficio del rendimiento académico.

Para este fin, el estudio establece un marco contextual donde se identifican las características principales de los contextos educativos y sociales que han de ser estudiados con vistas a mejorar el aprendizaje. Las áreas del marco contextual que se analizan son las cinco siguientes:

a) Currículum. Se compone de cinco aspectos amplios que implican tener en cuenta la sociedad a la que sirve el sistema educativo. Resulta importante saber quien toma las decisiones curriculares, qué clase de decisiones se toman y cómo se comunican las decisiones a la comunidad educativa. Para ello se recopila información sobre:

- Formulación del currículo: contexto situacional (nacional, regional, local) vinculado al bienestar social y a la salud económica del país.

- Alcance y contenido del currículum: actualizados estos objetivos ante los avances científicos y tecnológicos, y cómo cambian las demandas y expectativas de la sociedad y del mundo laboral.

- Organización del currículum nacional, regional y local para conocer el impacto sobre las oportunidades que tienen los estudiantes de aprender matemáticas y ciencias.

- Seguimiento y evaluación del currículum aplicado. Los responsables de la política educativa pueden utilizar influencias externas al centro, por ejemplo las pruebas externas nacionales o regionales para hacer cumplir el currículum.

- Materiales curriculares y respaldo. A parte de pruebas externas como inspecciones y auditorías, la formación de los profesores.

b) Los centros educativos. En este caso se hace uso de indicadores que determinen la calidad de los centros, tales como los relacionados con:

- Organización del centro - Objetivos del centro

- Funciones del director del centro recursos para apoyar el aprendizaje de las matemáticas y de las ciencias

- Participación de los padres - Entorno escolar disciplinado

c) Profesores y su preparación. Son los agentes primarios de la aplicación del currículum. Lo que conocen los profesores y son capaces de hacer es de importancia primordial. Ante esto, se hace necesario saber de:

- Preparación académica y autorización. - Contratación de profesores.

- Asignación de profesores. - Iniciación de profesores. - Experiencia de los profesores. - Estilos didácticos.

- Desarrollo profesional.

d) Actividades de aula y características. Con su conocimiento se puede complementar la información obtenida en el elemento anterior. Esto se refiere a:

- Temas del currículum impartidos. - Tiempo. - Deberes. - Evaluaciones. - Clima de clase. - Nuevas tecnologías. - Uso de calculadoras.

- Énfasis en las investigaciones. - Tamaño de la clase.

e) Estudiantes. Respecto a estos, se debe conocer:

- Ambiente doméstico: número de libros en casa, disponibilidad de mesas, ordenador, y nivel educativo de los padres han demostrado ser importantes variables el ambiente doméstico, indicadoras del estatus socioeconómico de la familia y relacionas con el rendimiento académico, así como la

participación en la educación del hijo. También la proporción entre ocupaciones, labores, deporte y recreativo.

- Experiencias anteriores. - Actitudes.

La recopilación de datos es clave para el conocimiento de esta información, por ello el TIMSS administra cuestionarios a especialistas en currículum, así como a estudiantes de los centros participantes, a sus profesores de matemáticas y de ciencias y a los directores de los centros. Las preguntas están diseñadas para medir elementos clave del currículum pretendido, del aplicado y del aprendido:

1. Cuestionarios de currículum. Los cuestionarios sobre el currículum, uno para matemáticas y uno para ciencias, están diseñados para recopilar información básica acerca de la organización del currículum matemático y científico en cada país, así como sobre el contenido que se pretende cubrir de estas materias hasta cuarto curso inclusive y de cuarto a octavo.

2. Cuestionario del estudiante. Este cuestionario será rellenado

por todos los estudiantes que tomen parte en la evaluación TIMSS. Contiene preguntas sobre aspectos e la vida familiar y escolar de los estudiantes, como sus experiencias en el aula, su autopercepción y sus actitudes hacia las matemáticas y las ciencias, los deberes y las actividades extraescolares, el uso de ordenadores, el apoyo educativo en casa y otra información demográfica básica.

3. Cuestionarios del profesor. Se le pide al profesor de matemáticas de la clase en cuestión que rellene un cuestionario específico que proporciona información sobre la formación del profesor, sus creencias, actitudes, preparación

educativa y carga de trabajo, así como detalles del enfoque pedagógico utilizado en la clase. El profesor (o los profesores) de ciencias de los estudiantes de esa clase rellenan otro cuestionario específico para profesores de ciencias, que en muchos aspectos será paralelo al cuestionario de matemáticas. Ambos cuestionarios indagan sobre características de la clase evaluada en TIMSS; tiempo de instrucción, materiales y actividades para la enseñanza de matemáticas y ciencias y para promover el interés de los estudiantes por la materia; utilización de ordenadores e Internet; prácticas de evaluación y relaciones entre familia y centro. También se les pregunta a los profesores su opinión sobre sus oportunidades de colaboración con otros profesores y de desarrollo profesional, así como determinados datos acerca de ellos mismos y de su formación general y profesional.

4. Cuestionario del centro. Al director de cada centro escolar evaluado en TIMSS se le pide que responda a un cuestionario. Incluye preguntas sobre matriculación y personal; recursos disponibles para apoyar la enseñanza de las matemáticas y de las ciencias, tales como la disponibilidad de materiales y personal educativos; objetivos del centro y el papel del director; tiempo de instrucción; relaciones entre las familias y el centro; y clima escolar.

Ante el sistema de trabajo del proyecto se puede observar que el estudio del nivel socioeconómico y cultural del alumno queda encuadrado en el marco contextual, como variable influyente sobre el rendimiento académico en las áreas de matemáticas y ciencias, extrayéndose dicha información de los cuestionarios de contexto planteados a los alumnos.

Proyecto internacional Producción indicadores Rendimiento Alumnos Este proyecto se ha diseñado con la idea de proporcionar cuatro tipos de productos, el segundo grupo de los cuales lo constituye un conjunto de indicadores contextuales que reflejan el modo en el que los resultados de los estudiantes se relacionan con variables importantes de carácter demográfico, social, económico y educativo. Asimismo, se incluye un análisis de cuáles son las diferencias entre países en cuanto a la relación de las variables contextuales y el rendimiento, haciendo especial hincapié en la igualdad de oportunidades para el acceso a la educación y de los disparidades en la relación del rendimiento con las características sociales y económicas de los estudiantes.

Para evaluar y estudiar la influencia de las variables socioeconómicas y culturales sobre el rendimiento escolar se emplean

cuestionarios de contexto.

Este cuestionario contiene un componente común, estable a lo largo del tiempo, que recoge información demográfica básica e información específica focalizada sobre temas de interés político determinado.

El cuestionario recopila información sobre el sexo, la lengua materna, el nivel socioeconómico de los alumnos (tomando como elementos importantes el nivel de educación de los padres y la situación económica familiar) el desarrollo educativo de los alumnos, la disponibilidad y el uso de los recursos educativos en el hogar y en la escuela, y las prácticas instruccionales, incluyendo aspectos tales como los relativos al currículo, el tiempo dedicado a la escuela ya las tareas escolares, etc.

Para la estimación del estatus socioeconómico se obtiene información sobre el nivel educativo y la ocupación de los padres, así como algunos otros índices que pueden ser relevantes para el cálculo de

la situación económica de las familias, tales como el número y tipo de posesiones familiares y la estructura de la familia.

De modo similar al cuestionario de los alumnos, el cuestionario de contexto de la escuela recopila información sobre la situación geográfica de las escuelas, su contexto socioeconómico, incluyendo los recursos educativos del centro y de su entorno, el tamaño de la escuela y de sus clases, la estructura de su personal, las prácticas escolares en el nivel de la escuela y la organización escolar.

Para el correcto desarrollo del proyecto intervienen cuatro elementos en los que quedan representados todos los países participantes. En primer lugar, mediante un representante nacional que forma parte del Consejo de Países Participantes (BPC) cuyo cometido es determinar los objetivos políticos y los parámetros generales del proyecto de evaluación. En segundo, a través de la participación en los grupos funcionales de expertos que contribuyen al desarrollo de los marcos conceptuales y de los instrumentos de evaluación. En tercer lugar, mediante el responsable o gestor nacional del proyecto (National Project Manager -NPM) que será el encargado de la implementación del proyecto en el nivel nacional. Y, por último, mediante los representantes de los países en la Red A que están encargados de asegurar la coherencia del proyecto a lo largo de su desarrollo.

A esta estructura de gestión se une la creación de comités nacionales formados por personas pertenecientes las instituciones de evaluación nacionales y autonómicas cuya función es asesorar al representante nacional en el BPC y al NPM sobre la adecuación de los instrumentos internacionales en el contexto nacional, sobre los mecanismos de control de calidad y sobre la difusión de los resultados a nivel nacional, además de contribuir a la implantación del proyecto y a la recopilación de datos en su ámbito de competencia.

En esencia, se puede observar que el proyecto PISA da al nivel socioeconómico y cultural un papel clave en la explicación del rendimiento escolar ya que su medición esta contemplada como indispensable en la estructura y gestión del mismo.

Sistema Estatal de Indicadores de la Evaluación

La actuación española en evaluación de sistemas educativos viene marcada por su participación en el proyecto internacional INES. Este hecho hace que la asimilación del estudio del contexto educativo venga establecida y se desarrolle conforme a las pautas de normalización europea.

Así, el sistema estatal de indicadores para la evaluación de la educación española está constituido por 38 indicadores, cuya clasificación se asemeja al modelo de evaluación propuesto por Stufflebean3

. Ante esta agrupación de indicadores se puede observar que el nivel socioeconómico y cultural se mide en diferentes fases conforme se desarrolla el modelo.

Los indicadores destinados a analizar el contexto socioeconómico y cultural del alumnado se reseñan a continuación, informando del grupo al que pertenecen, su denominación y definición: