Modelos y diseños de evaluación

Así como en la investigación, el proceso evaluativo también exige métodos y técnicas para recopilar, tabular, analizar e interpretar la información de acuerdo con los propósitos de la evaluación misma. De acuerdo con Cerda (2000, p. 69) un modelo es “una representación teórica formal y simplificada que busca caracterizar la forma de evaluación que ha de realizarse, las técnicas y procedimientos de recolección y análisis de información”. Dado que el propósito del presente proyecto es determinar el estado del arte en la evaluación del aprendizaje de un programa académico, es importante conocer la estructura o protocolo que siguen los modelos de evaluación, Correa, Puerta y Restrepo, (2002), exponen diez modelos de evaluación con su respectivos enfoques, la concepción propia del proceso evaluativo, propósitos, características y metodología. Todos encierran dentro de sus propósitos, recopilar, analizar e interpretar información, tomar correctivos, elaborar estrategias de mejora y tomar decisiones. En relación con la metodología todos coinciden en la definición de objetivos, establecen un protocolo o serie de pasos claves para el desarrollo del proceso evaluativo entre los que se cuentan la identificación de problemas y elaboración de

instrumentos y culminan con la elaboración de estrategias y toma de decisiones. A continuación se enuncian con su respectivo enfoque: modelo de evaluación de Ralph Tyler enfoque: analítico racionalista, modelo de evaluación de Metfessel y Michael enfoque: analítico racionalista, modelo de evaluación de Edward a. Suchman considerado el método científico de la evaluación enfoque: analítico-racionalista, modelo de Stufflebeam-modelo c.i.p.p. (contexto-insumos-procesos- productos) enfoque: analítico-racionalista, modelo de referentes específicos de Briones enfoque: racionalista-analítico, modelo judicial de Wolf enfoque: global naturalista, modelo de evaluación de Michael Scriven enfoque: analítico-racionalista, modelo de evaluación de Robert Stake (evaluación sensitiva o evaluación respondente) enfoque: global-naturalista, modelo de evaluación focalizada de Patton enfoque: global naturalista modelo de evaluación de Fetterman-evaluación por empoderamiento.

26

2.2.3.1 Formulación del proyecto de evaluación

Como se ha mencionado en párrafos anteriores, la evaluación es un proceso sistemático con algunas características similares a la ejecución de un proyecto de investigación, en consecuencia la formulación del proyecto de evaluación comprende la determinación del objeto de evaluación, el diseño metodológico, el cronograma y presupuesto de la evaluación. Los objetivos de evaluación pueden estar referidos al comportamiento de la organización frente a la ejecución del programa, a los productos, efectos, resultados o impactos del programa. Quiere decir, a medir los cambios en los usuarios del programa o de su entorno. Además de la formulación de unas preguntas u objetivos de evaluación, debe existir una

delimitación temporal del objeto de evaluación. O sea, es el valuador quien define el periodo de vida del programa que se quiere evaluar. Pueden evaluarse todas las etapas del programa o algunas de ellas, Correa, Puerta y Restrepo, (2002).

2.2.3.2 Diseño de evaluación

De acuerdo con Correa, Puerta y Restrepo, (2002), la evaluación toma prestados de la investigación social los diferentes diseños disponibles y que han sido probados en el estudio de la realidad social.

Algunos de estos diseños, incluso, no son exclusivos de las ciencias sociales, también son aplicados en las ciencias naturales, como es el caso de los diseños experimentales. Se debe determinar si el diseño de la evaluación será no experimental o experimental. Los diseños de evaluación están asociados a los enfoques de evaluación: de corte cuantitativo o de corte cualitativo y a los modelos de evaluación existentes. Cerda (2000), menciona cinco tipos de diseño: descriptivo, explicativo, experimental, comprensivo y participativo.

El diseño descriptivo se asocia con el enfoque cuantitativo y es eminentemente operativo pues consiste en la enumeración detallada de las operaciones necesarias para producir un fenómeno. El diseño de tipo explicativo se asocia con las ciencias naturales y el positivismo; básicamente busca determinar los factores que actúan en la producción de un fenómeno y presenta las razones por las cuales éstos se producen.

El diseño de tipo comprensivo se vincula con las ciencias sociales y se asocia con el paradigma cualitativo, es el que más se acerca al concepto de valorización pues permite un conocimiento más o menos

27

profundo del objeto de evaluación (procesos, cualidades, valores y actitudes). El diseño clásico para las evaluaciones ha sido el modelo experimental. Según Weiss (citada por Cerda, 2000), este tipo de diseño controla en mayor nivel que los otros, la validez interna de un producto o de un programa académico.

Correa, Puerta y Restrepo, (2002) afirman que el diseño metodológico comprende unas áreas técnicas que, según Stufflebeam y Shinkfiel (1995, p. 25, citados por Correa, Puerta y Restrepo, 2002), deben conocer a fondo los evaluadores profesionales. Entre ellas se encuentran las siguientes: Las entrevistas, los informes preliminares, el análisis de contenidos, la observación, el análisis político, el análisis económico, el examen investigativo, los informes técnicos, el estudio de caso, la evaluación sin metas, la escucha de opiniones contrapuestas, las asociaciones de defensa, las listas de control, la elaboración de pruebas, el análisis estadístico, el diseño de la investigación, el análisis sistemático, la teorización y la administración del proyecto.

2.2.3.3 Unidades de observación

Las unidades de observación son las variables, categorías, asuntos o componentes que deben ser medidos. Los objetivos o preguntas de evaluación contienen las variables que deben ser observadas o medidas. Para medir una variable es necesario traducirla a indicadores. La evaluación de un programa demanda la construcción y validación de indicadores particulares que van a depender de los objetivos del programa que se quiere evaluar, de su enfoque teórico, de la población usuaria del programa, de los propósitos de la evaluación, etc. Correa, Puerta y Restrepo, (2002).

2.2.3.4 Unidades de análisis

Las unidades de análisis también son denominadas fuentes de información. La elección de las fuentes está condicionada por las unidades de observación (lo que se quiere medir), por la naturaleza del programa objeto de evaluación, por los objetivos de evaluación, por los recursos humanos, técnicos y financieros disponibles, por la posibilidad de acceder a las fuentes y por la disponibilidad de tiempo. El modelo de evaluación es también determinante en la selección de las fuentes. Los enfoques cualitativos hacen énfasis en los muestreos estadísticos y algunos diseños, como el experimental, implican la selección de muestras aleatorias. Los diseños cualitativos trabajan con muestreos teóricos, muestreos intencionales, informantes claves, etc., Correa, Puerta y Restrepo, (2002).

28