2. Marco te ´orico TIMSS
2.3. Dise ˜no y caracter´ısticas de la prueba TIMSS
Al dise ˜nar el contenido de la prueba oficial de TIMSS 2011, el objetivo principal es asegu- rar la cobertura de los contenidos del marco te ´orico y evaluar al conjunto de los alumnos de un pa´ıs o regi ´on. TIMSS no busca una evaluaci ´on individualizada para cada alumno que participa en la prueba. Esto da lugar a un gran n ´umero de preguntas, 175 para el ´area de Matem´aticas y 172 para el ´area de Ciencias, una prueba exageradamente extensa si cada alumno tuviera que responder a la totalidad de las preguntas.
En la pr´actica, lo que se hace es distribuir el conjunto de preguntas de este banco ori- ginal entre los alumnos, de forma que cada uno de ellos solo tenga que responder a un subconjunto de las preguntas. La totalidad de preguntas se distribuye en 14 bloques de
Tabla 2.6: Procedimientos concretos necesarios para la resoluci ´on de problemas dentro del dominio cognitivo razonar.
Analizar
Generalizar
Integrar Sintetizar
Justificar
Usar relaciones entre situaciones o elementos matemáticos a partir de la información dada.
Extender el dominio al que son aplicable los resultados encontrados. Resolver problemas a partir de resultadosmás generales.
Establecer conexiones entre diferentes elementos del
conocimiento y representaciones relacionadas entre ellos, establecer conexiones entre ideas matemáticas y combinar procedimientos para llegar a resultados. Combinar resultados parciales para llegar a un resultado ulterior.
Facilitar pruebas de validez de una acción o de la corrección de un enunciado o resultado mediante propiedades o resultados matemáticos.
Resolver problemas no rutinarios
Resolver problemas que es muy poco probable que el alumno haya trabajado o encontrado en libros de texto al uso. Aplicar procedimientos matemáticos en contextos poco conocidos o complejos.
Fuente: elaboraci ´on propia, a partir de datos de la Encyclopedia TIMSS.
Matem´aticas y otros 14 de Ciencias. Estos 28 bloques se organizan, a su vez, seg ´un un muestreo matricial en 12 cuadernillos. Cada alumno contesta solamente a cuatro de estos bloques, dos de Matem´aticas y dos de Ciencias, cada bloque tiene 10 preguntas, por lo que el alumno contesta un total de 40 preguntas, 20 de Matem´aticas y 20 de Ciencias en dos sesiones de 36 minutos cada una, separadas por un breve descanso8. De los cuatro bloques asignados a cada alumno, dos corresponden a ´ıtems de nuevo desarrollo para la prueba de la edici ´on en curso, uno de Matem´aticas y otro de Ciencias, y otros dos corres- ponden a ´ıtems de la prueba de la edici ´on inmediatamente anterior, de igual modo uno de Matem´aticas y otro de Ciencias. Dentro de una misma aula, la mitad de los alumnos empiezan por la prueba de Matem´aticas y la otra mitad por la de Ciencias, y despu´es del descanso completan la parte que tienen pendiente. Cada alumno contesta adem´as un cuestionario sobre aspectos relacionados con su entorno familiar, el ambiente escolar, su auto-percepci ´on y actitud hacia las Matem´aticas y las Ciencias. Se prev´e un m´aximo de 8Informaci ´on m´as completa y detallada sobre el dise ˜no y fiabilidad de la muestra disponible en Martin y Mullis (2012).
Tabla 2.7: Resumen de los contenidos en Matem´aticas de TIMSS 2011.
TIMSS 2011 Matemáticas
Dominios de contenido Dominios cognitivos
Números naturales
Modelos y relaciones
Números 50 %
CONOCER. 40% Conocimiento de hechos y de procedimientos
Recordar – Reconocer – Identificar – Calcular –Recuperar - Medir –
Clasificar – Ordenar
Fracciones y decimales
Expresiones numéricas
APLICAR. 40% Resolución de problemas habituales
Seleccionar – Representar – Interpretar – Aplicar - Verificar o comprobar
Formas y mediciones geométricas 35 % Puntos, líneas y ángulos Formas bidimensionales y tridimensionales RAZONAR. 20% Resolución de problemas no habituales. Actividades que
implican razonamiento Analizar – Generalizar – Justificar o demostrar Representación de datos 15 % Leer, interpretar y representar
Fuente: elaboraci ´on propia, a partir de datos de la Encyclopedia TIMSS.
30 minutos para completar este cuestionario.
Las preguntas tienen dos tipos de estructura: de elecci ´on m ´ultiple (se facilitan cuatro op- ciones de las cuales solo una es correcta) o de respuesta abierta. La mayor parte de las preguntas van acompa ˜nadas de un enunciado con contenidos gr´aficos seguido de una pregunta, y en algunas ocasiones varias preguntas est´an asociadas a un mismo enuncia- do.
Una vez analizados los datos de las pruebas se hacen p ´ublicos los resultados y algunas preguntas que han formado parte del test. Estas cuestiones se conocen como ´ıtems libera- dos y van acompa ˜nados de la gu´ıa de codificaci ´on con los indicadores de correcci ´on y los resultados estad´ısticos (internacionales y nacionales) obtenidos en la prueba9.
La tabla 2.7 muestra la distribuci ´on en t´erminos porcentuales de los bloques de contenidos y cognitivos de la prueba TIMSS 2011. En esta edici ´on, como ya hemos comentado, en
Espa ˜na participaron 4183 alumnos de 151 centros y un total de 200 profesores tutores, lo que significa que han sido evaluados 200 grupos o aulas. La muestra es estratificada en t´erminos de comunidades y titularidad de centros (p ´ublicos, privados y concertados) de forma que los resultados puedan considerarse representativos para el conjunto del Estado Espa ˜nol.
En TIMSS 2011, Espa ˜na logr ´o 482 puntos, por debajo de la media de la OCDE (522 pun- tos), por debajo de la media de la UE (591 puntos) y por debajo de la media de los todos los pa´ıses participantes (491 puntos)10. La diferencia de 40 puntos respecto a la media de los pa´ıses de la OCDE no es homog´enea respecto a los bloques de contenidos, disminuye a 34 puntos en el caso del bloque de N ´umeros, pero llega hasta los 47 puntos para los bloques de Geometr´ıa y Representaci ´on de datos. En las dimensiones cognitivas no hay variacio- nes significativas en la distancia de cada una de ellas a la media de la OCDE: 41 puntos menos en el dominio((Conocer)), 39 puntos en((Aplicar))y 38 puntos en((Razonar)).