Las ideologías curriculares y las pruebas estandarizadas

Las pruebas estandarizadas suelen considerar un Marco de Evaluación, una interpretación de lo evaluado –ya sea un determinado currículum o una serie de competencias–, específicamente diseñada para su medición. En él se identifican los contenidos o competencias a evaluar, se precisan el tipo de preguntas que se utilizaran y su nivel de dificultad, así como las ponderaciones relativas de cada sección o tipo de contenidos dentro del conjunto. En pruebas internacionales de alta complejidad, como las pruebas Pisa, Timss o la Prueba Internacional de Educación Cívica, la negociación del Marco de Evaluación es un tópico altamente sensible. Si la evaluación considera contenidos que no están estipulados en los currículums nacionales de determinados países, estos pueden ver afectados sus resultados en la medición.

Desde la perspectiva de esta investigación, los Marcos de Evaluación son decisivos, en tanto sintetizan el proceso de recontextualización del currículum prescrito para su medición estandarizada. Considerando que tanto las mediciones SIMCE, como la Prueba de Selección Universitaria, son evaluaciones de referente curricular, es decir, que supuestamente miden el currículum prescrito, el poder analizar sus respectivos Marcos de Evaluación

era una forma eficiente y directa para identificar qué dimensiones del currículum están ausentes de la medición y verificar si su distribución ideológica se mantiene o se transforma en relación al referente curricular que evalúan.

Sin embargo, no fue posible contar con ellos. En el caso del SIMCE, porque la medición no considera un Marco de Evaluación consistente y estable, transparente y público, sobre el que se articulen las evaluaciones de Historia y Ciencias Sociales. Según las consultas realizadas, está previsto su diseño para el 2014. Mientras que el caso de la PSU de Historia y Ciencias Sociales sí existe, pero no es posible acceder a él, ya que se considera como información crítica y confidencial, incluso cuando es solicitada con fines académicos. Es decir existe, pero no es transparente, o al menos, público.

Esta situación obligó a buscar otros mecanismos para poder analizar la interpretación curricular que realizan estas evaluaciones y ponderar la influencia de las distintas ideologías curriculares en ellas

Una posibilidad era analizar ejemplares de pruebas aplicadas, pero en el caso del SIMCE, estas también son tratadas con estricta confidencialidad. Lo que sí está disponible es una selección de ejemplos de preguntas a modo de orientación, pero son reducidas, y es legítimo suponer que fueron detenidamente seleccionadas para su publicación, por lo que no serían una muestra equilibrada del conjunto de las pruebas. Sin Marco de Evaluación, y sin ejemplares de pruebas aplicadas, fue necesario recurrir a otras alternativas metodológicas.

Para el análisis del SIMCE fue posible acceder a las Especificaciones para la elaboración de ítems SIMCE. Área de Historia, Geografía y Ciencias Sociales (SIMCE, 2011), documento utilizado para la externalización y licitación de ítems para nutrir los bancos de preguntas en Historia y Ciencias Sociales. Así también, fue posible contar con las Orientaciones para la Medición (SIMCE, 2011b y 2011 c), documentos que difunde el Ministerio entre los directores y docentes de los centros educativos para informar sobre los contenidos que se

evaluarán y las características del proceso. Aún así, la información recopilada era insuficiente, por lo que se optó por aplicar un sencillo cuestionario a cuatro profesionales con experiencia en el diseño y la elaboración de pruebas SIMCE de Historia y Ciencias Sociales, en el que se les interrogaba sobre las transformaciones que sufría el currículum prescrito en su traducción para la evaluación, y sobre el mensaje curricular que, a su juicio, se derivaba de esta medición.

Tabla 12. Consulta a profesionales con experiencia en el diseño de pruebas SIMCE.

Jacqueline Gysling Antropóloga. Ex coordinadora del Componente Currículum de la Unidad de Currículum y Evaluación.

Lucia Valencia Didacta de las Ciencias Sociales. Ex coordinadora del Equipo de Historia Y Ciencias Sociales del SIMCE.

Macarena Lazo Profesora de Historia y Ciencias Sociales. Ex miembro del Equipo de Historia y Ciencias Sociales del SIMCE.

Bárbara Silva Historiadora. Ex miembro del Equipo de Historia y Ciencias Sociales del SIMCE.

Finalmente, se procedió a cruzar la información del análisis documental con la obtenida a través de este cuestionario, para así poder realizar algunas observaciones fundadas sobre el tipo de finalidades, la concepción de contenidos y las prácticas de enseñanza que promueven las evaluaciones estandarizadas del SIMCE en esta área de aprendizaje (Anexo 6.1).

En el caso de la PSU, si bien no fue posible acceder al Marco de Evaluación, sí fue posible contar el temario de la prueba de Historia y Ciencias Sociales vigente desde el año 2003 hasta el presente y con facsímiles de pruebas reales

aplicadas en años anteriores (Demre, 2013). El temario es público, y en él se describe en detalle los ejes temáticos y las habilidades cognitivas que la medición considera. Los facsímiles por su parte, también son públicos, y además de las preguntas consideran solucionarios en lo que se precisan y fundamentan las respuestas correctas para cada ítem, ya que son comúnmente utilizados por los estudiantes para preparar esta evaluación.

Para esta investigación se sistematiza el temario, siguiendo el mismo criterio que para la documentación SIMCE, junto con dos facsímiles correspondientes a las pruebas del 2007 y 2008 (Demre, 2007 & 2008). El temario permite realizar una primera lectura de los criterios de selección de contenidos y habilidades, y contrastarlos con el currículum prescrito. Mientras que el análisis de las pruebas y sus solucionarios permiten, por una parte, contrastar los contenidos y habilidades declaradas con los efectivamente evaluados, y por otra, verificar la ponderación relativa de cada uno de estos dentro del conjunto (Anexo 6.2).

Tabla 13. Documentación utilizada para el análisis de las mediciones SIMCE y de la Prueba de Selección Universitaria en Historia y Ciencias Sociales.

SIMCE PSU

Especificaciones para la elaboración de ítems SIMCE. Área Ciencias Sociales. 2011.

Temario Prueba Electiva de Historia y Ciencias Sociales, 2013.

Orientaciones para la Medición SIMCE, 4º básico. Sector Historia Geografía y Ciencias Sociales, 2011.

Orientaciones para la Medición SIMCE, 8º básico. Sector Historia Geografía y Ciencias Sociales, 2011.

Facsímiles Oficiales. Prueba de Historia y Ciencias Sociales 2007, 2008.

Consulta a profesionales con experiencia en el diseño de evaluaciones SIMCE de Historia y Ciencias Sociales.

En síntesis, lo que interesa en ambos casos, el SIMCE y la PSU, es identificar qué dimensiones del currículum están ausentes en ambas mediciones y qué criterios se utilizan para la selección de contenidos y habilidades a evaluar, para así poder interpretar el tipo de enseñanza y la concepción de aprendizajes que propician. Finalmente, interesa verificar si el proceso de recontextualización del currículum para su medición termina por distribuir las ideologías curriculares de forma similar a cómo ocurre en los referentes curriculares, o si por el contrario, terminan por perfilar un currículum con unas finalidades, unos contenidos y unas prácticas de enseñan distintos a los del referente curricular que supuestamente evalúan.