CAPÍTULO 2 Los programas de evaluación
1. Los Programas nacionales e internacionales de evaluación educativa
1.1. El proyecto PISA
1.1.2. Resultados correspondientes a Argentina
El informe del año 2009. Los resultados de PISA se han presentado por medio de escalas con una puntuación media de 500 y una desviación típica de 100, lo que significa que dos terceras partes de los alumnos de los países de la OCDE obtuvieron entre 400 y 600 puntos. Estas puntuaciones representan distintos grados de competencia en el área de conocimiento. En el año 2009, las escalas del área de lectura se han dividido en siete niveles de rendimiento.
Además, los resultados también se presentan por medio de tres sub-escalas de lectura: 1) obtención de información, 2) interpretación de textos y 3) reflexión y valoración.
En la Tabla 2.1. se incluyen los niveles de rendimiento con las puntuaciones a las que se asocian, el porcentaje de estudiantes argentinos que se situó en los niveles establecidos y las habilidades implicadas en cada uno de ellos (OECD, 2010).
Argentina ha obtenido en el área de lectura, una puntuación media de 398 puntos. El mayor porcentaje de los estudiantes da cuenta de un rendimiento equivalente a los niveles 1 y 2, observándose un porcentaje exiguo situado en los niveles de más alto rendimiento. Forma parte del grupo de países cuyo puntaje es estadísticamente inferior al promedio de la OCDE. A su vez este grupo se divide en subgrupos de acuerdo a los puntajes obtenidos. Argentina integra el grupo conformado por Albania, Brasil, Colombia, Indonesia, Jordania, Kazakhstan, Montenegro y Túnez.
Si se considera el porcentaje de sujetos situados en cada nivel puede observarse que el 77% de los alumnos argentinos se ubica por debajo de la media de 500 puntos (por debajo del nivel 3). Es decir, que se trata de estudiantes que solo dominan los aspectos más básicos asociados a la competencia lectora.
En contraposición, los niveles más altos se caracterizan por requerir habilidades más complejas.
41
Tabla 2.1.
Niveles, puntuaciones de la escala PISA, porcentaje de estudiantes argentinos en cada nivel y habilidades implicadas (PISA 2009)
Nivel de rendimiento Puntuaciones Escala PISA Porcentaje estudiantes
argentinos en cada nivel Promedio OCDE
6 <698,32 0,1% 0,8%
Habilidades implicadas. El lector debe poder hacer inferencias, comparaciones y contrastes precisos. Requieren que demuestre una comprensión global y detallada de uno o más textos y que pueda integrar información. Las tareas implican que el lector sea capaz de trabajar con ideas poco familiares, con información debatible, y que pueda generar categorías abstractas de interpretación. Las actividades de reflexión y evaluación requieren que el lector elabore hipótesis o critique un texto complejo sobre un tema que no le resulta familiar, teniendo en cuenta diversas perspectivas, y aplicando una comprensión elaborada que proceda de fuera del propio texto o vaya más allá. Hay datos limitados sobre las actividades de acceder y obtener a este nivel, pero parece que una condición sobresaliente es la precisión de análisis y atención al detalle que no se encuentra explícito en el texto.
5 625,61 a 698,32 0,9% 6,8%
Habilidades implicadas. Las actividades de obtener información requieren que el lector localice y organice diversos pasajes de información dentro del texto, deduciendo cuál es relevante. Las tareas de reflexión requieren crítica y elaboración de hipótesis, acudiendo a conocimientos específicos. Tanto las de interpretación como las de reflexión requieren una comprensión global y detallada de un texto a cuyo contenido no están acostumbrados. Para todos los aspectos de lectura, en este nivel se precisa enfrentarse con conceptos contrarios a lo que sería de esperar.
4 552,9 a 625,61 6% 20,7%
Habilidades implicadas. Las actividades de obtener información requieren que el lector localice y organice diversos pasajes de información dentro del texto. Algunas requieren interpretar matices de lenguaje en un pasaje teniendo en cuenta el texto como un todo. Otras requieren aplicar categorías en un contexto desconocido. Las actividades de reflexión requieren que el lector aplique su conocimiento para elaborar hipótesis o criticar un texto. Debe demostrar una comprensión adecuada de textos largos y complejos cuyo contexto es desconocido.
3 480,18 a 552,89 16% 28,9%
Habilidades implicadas. Las tareas en este nivel requieren que el lector localice y, en casos, reconozca la relación entre distintos pasajes de diferente condición. Las tareas de interpretación, que el lector integre distintos pasajes para identificar la idea principal, comprender una relación o construir el significado de una palabra o una frase. Tienen que tener en cuenta muchas características para comparar, contrastar o categorizar. A menudo, la información requerida no resalta o hay otra información debatible; o existen otros obstáculos en el texto, como ideas contrarias a lo que se espera o negativas. Las actividades de reflexión requieren conexiones, comparaciones y explicaciones, o evaluar un rasgo concreto. En algunas el lector debe mostrar una comprensión de un texto en relación con contextos familiares o cotidianos. Otras no precisan de una comprensión detallada, sino sustentarse en un conocimiento menos común.
2 407,47 a 480,18 25,4% 24%
Habilidades implicadas. Las tareas en este nivel requieren que el lector localice distintos datos que pueden ser deducidos o que sigan diferentes condiciones. Otras implican reconocer la idea principal de un texto, comprender relaciones o construir significados con una parte limitada del texto cuando la información no se resalta y el lector puede hacer deducciones a un nivel elemental. Se incluyen comparaciones y contrastes basados en un único rasgo del texto. Necesitan de una relación entre el texto y conocimiento de fuera de él, sustentado en la experiencia y actitudes personales.
1ª 334,75 a 407,47 25% 13,1%
Habilidades implicadas. Las tareas en este nivel requieren que el lector localice distintos datos de información explícita, para reconocer el tema principal o la intención del autor en un texto de tema conocido, o que haga una conexión simple entre la información del texto y el conocimiento cotidiano. La información se resalta y apenas está presente un tipo de información debatible. Se le dirige explícitamente al lector para que considere distintos factores relevantes en la tarea y en el texto.
1b 262,04 a 334,75 15,8% 4,6%
Habilidades implicadas. Las tareas en este nivel requieren que el lector localice un dato en un contexto de información explícita y resaltada en un texto breve, de sintaxis sencilla con un tema y tipo de texto conocidos, como una narrativa sencilla o una lista simple. El texto sirve de apoyo al lector, con repeticiones, imágenes o símbolos conocidos. Apenas está presente un tipo de información debatible en tareas de interpretación. En éstas, el lector puede que tenga que hacer conexiones simples entre fragmentos de información adyacentes.
>1b >262,04 10,8 1,1%
Estos alumnos difícilmente puedan utilizar la lectura de modo independiente como una herramienta que pueda ayudarles a adquirir conocimientos y habilidades en otras áreas de conocimiento.
42
Tales habilidades refieren a como localizar información no explícita en textos poco familiares, complicados y de gran extensión, alcanzar una comprensión profunda de los mismos pudiendo inferir la información útil para la resolución de los reactivos y conectar significativamente la información proporcionada en el texto con información especializada.
En el informe PISA 2000 se afirma que: “Los estudiantes que alcanzan los niveles más altos de dominio de PISA tienen una gran probabilidad de mejorar el acervo de talento de su país. La proporción actual de estudiantes que se desempeña en estos niveles puede también influenciar la contribución que esa nación hará en el futuro al acervo de empleados de perfil muy alto en la economía global. Es por ello que comparar las proporciones de los estudiantes que alcancen el nivel más alto de dominio en aptitud para lectura es, en sí mismo, de gran relevancia”
(OCDE, 2002: 41).
Los niveles 5 y 6, están integrados en algunos países por aproximadamente el 15% de los sujetos y por menos del 5% en otros. Los datos de PISA ubican a la Argentina en este último grupo con un porcentaje sumamente reducido de sujetos (1%) en el extremo superior de la curva. En términos generales aquellos países que tienen los mayores porcentajes de sujetos situados en los niveles 5 y 6 también tienen los menores porcentajes en el nivel 1 y menor.
Otra cuestión importante que se señala explícitamente en el informe PISA es que los países no sólo deben fomentar un alto desempeño en sus alumnos sino también deben trabajar para reducir las desigualdades internas. La distancia que existe entre los estudiantes con los niveles de desempeño más alto y más bajo dentro de cada país aporta información útil acerca de la equidad. Una manera de obtener información respecto a este punto es considerar el valor del desvío estándar o analizar la distancia que separa el rango de puntuaciones obtenidas por la mitad central de la población. En la mayoría de los países el rango de puntajes de los estudiantes en la mitad central excede la amplitud de un nivel de rendimiento (72 puntos), aunque en algunos países duplica esa magnitud. En nuestro país esa diferencia es de 151 puntos, lo cual pone en evidencia que el problema no consiste solamente en el bajo rendimiento del promedio de los estudiantes sino también en la desigualdad en los aprendizajes.
43