I NTRODUCCIÓN
L OS PROGRAMAS DE DESARROLLO AGRÍCOLA Y RURAL EN
El desarrollo rural
Cuando el proceso de desarrollo rural se basa en un uso equilibrado y armonioso de los recursos naturales, hablamos de desarrollo rural sostenible. Con respecto a las actividades económicas y productivas que apoyan el desarrollo rural, a menudo se afirma que la principal fuente de desarrollo rural es el “desarrollo agrícola”.
Los retos del desarrollo rural
Las políticas tradicionales de desarrollo agrícola y rural
Hasta finales de la década de 1970, la estrategia se centró en estimular el sector mediante la modernización del sector agrícola. A inicios de la década de 1980 se destacó la implementación del Sistema Alimentario Mexicano (SAM), cuyo principal objetivo era lograr la autosuficiencia alimentaria a través de la modernización tecnológica del sector.
El ajuste de las políticas para el sector
La política sectorial hasta finales de los años 80 se caracterizó por estar orientada a ofrecer alimentos abundantes y baratos a los consumidores urbanos, promover la sustitución de importaciones y la protección comercial del mercado interno. Los derechos de propiedad de los productores también se fortalecieron mediante la modificación de los marcos legales pertinentes (Ley Agraria, Ley de Aguas y Ley Forestal).
La Alianza para el Campo
Esto significa que los recursos son ejercidos principalmente por los Gobernadores de los Estados de la República, lo que ha motivado la creación de órganos colegiados que determinan a nivel local el avance de los programas, teniendo en cuenta la norma adoptada por la SAGAR a nivel nacional. . emitidos para brindar coherencia y garantizar el cumplimiento de los propósitos nacionales. La APC está diseñada para estar menos influenciada por el clientelismo político, un factor que históricamente ha causado importantes perturbaciones que afectan la eficiencia y eficacia de sus programas.
La evaluación de programas como tendencia
Los evaluadores internos permanecen en el programa, por lo que son los mejores iniciadores del uso de los resultados de la evaluación. Quién recibirá los resultados de la evaluación, a su vez, determina las características de los informes a elaborar.
C ONCEPTOS BÁSICOS DE EVALUACIÓN DE PROGRAMAS
Enfoques para la evaluación
A continuación se describen brevemente los diferentes enfoques para la evaluación de programas. a) Evaluación como cumplimiento de metas. Esta definición de sentido común implica especificar la base para determinar el mérito o el valor (es decir, la recopilación sistemática de información) y los propósitos para hacer esa determinación (mejora del programa, toma de decisiones o generación de conocimiento). c) La evaluación como aplicación de métodos de investigación social.
Evaluación informal y evaluación formal
Utilizan criterios para elegir: costo, distancia del hogar, infraestructura y servicios que ofrece el colegio, calidad de la enseñanza, si son bilingües o no, etc. Sin embargo, la evaluación se diferencia de la investigación científica en que debe realizarse con los recursos y el tiempo disponibles, además de que la primera busca responder preguntas y la segunda busca generar conocimiento.
Por qué y cuándo evaluar
Documentar los efectos de aprendizaje del programa/resultados en los individuos o la comunidad con el fin de asignar responsabilidad. A continuación se presentan algunas preguntas básicas que debe hacerse al decidir cuándo realizar una evaluación.
Auditoría, seguimiento y evaluación
Una decisión importante en el proceso de evaluación del programa es decidir cuál es el momento más apropiado para realizar el estudio. La evaluación, a su vez, se preocupa por estudiar procedimientos y planes, pero relacionándolos con el contexto en el que se aplican y con los resultados obtenidos, de tal manera que muchas de sus conclusiones tienden a modificar los procedimientos de operación y planificación de actividades. .
Responsabilidad social y evaluación
Una vez más, este proceso no pone en duda ni la planificación en sí ni sus resultados.
La audiencia de la evaluación
Al conocer mejor a los involucrados en el programa, se podrá especificar mejor el enfoque de la evaluación. Analice los resultados de la discusión grabada y resuma lo que se dijo.
P APEL Y PERFIL DE LOS EVALUADORES
Competencia del evaluador
Capacidad para comprender el programa (operaciones, objetivos, etc.) y el contexto en el que opera. Capacidad de planificación y administración para realizar la evaluación en tiempo y forma y dentro del presupuesto asignado.
Actitudes de los evaluadores exitosos
Cómo seleccionar a un evaluador
E L CICLO DE LA EVALUACIÓN DE PROGRAMAS
Descripción del programa y su contexto
Por otro lado, es necesario tener en cuenta metas implícitas pero relevantes (por ejemplo, mejorar la imagen política del gobierno) o aquellas incluidas en la operación del propio programa. Los responsables son quienes cuidan el funcionamiento del programa y son quienes proporcionarán los datos necesarios para la evaluación.
Identificación del tipo apropiado de evaluación
¿Cuál es el estado actual de los productores, familias, comunidades, regiones, etc.? La evaluación de impacto se centra en determinar el éxito general, la eficacia y los resultados económicos, sociales y ambientales de un programa.
Analizar la viabilidad de efectuar la evaluación
En general, realizar una evaluación está vinculado a la necesidad de información sobre la situación actual de los beneficiarios del programa, sobre cómo funciona y cómo se puede mejorar, sobre si es aconsejable mantener el programa, sobre el impacto de el programa, etc. Por supuesto, la evaluación juega en algunos de estos casos un papel decorativo, por lo que no es recomendable realizarla.
Establecer preguntas e indicadores relevantes
Cuando se presenten claramente los objetivos del programa, se indicarán explícitamente los indicadores y criterios para juzgar el mérito o el valor. Los indicadores marcan la tendencia o dimensión de un cambio resultante del funcionamiento del programa (un indicador es una medida observable para mostrar que algo ha cambiado).
Enfoques para la colecta de datos
Revisión de la documentación existente
La información existente se puede encontrar en documentos, informes, archivos de programas, relatos históricos, actas de reuniones, mapas, fotografías, datos censales, estudios, etc. Evaluar resultados (utilizando registros públicos, estadísticas de empleo locales, datos de agencias y evaluación de programas similares, etc.).
Entrevistas semi–estructuradas
Explique el propósito de la entrevista y recuerde a los participantes que es voluntaria y que sus respuestas son confidenciales. Si un entrevistado se niega a responder una pregunta, intente obtener una respuesta, pero evite cualquier cosa que pueda poner en peligro el resto de la entrevista.
Observación participante
Las fotografías y las grabadoras ayudan, pero en algunos casos pueden resultar intrusivas y afectar la situación que se observa. ¿Cuál es el contenido de la situación que observas? hora del día; Condiciones climáticas; las relaciones –si las hay– entre los participantes; la posición de las personas en relación con las demás;
Evaluación rural rápida
El propósito del monitoreo de la ERR es evaluar el impacto de una intervención en una comunidad en particular. En este caso, la documentación inicial es fundamental para comparar el "antes y el después" de la intervención.
Estudio de caso
Durante el desarrollo del “Focus Group”, el moderador deberá explicar el propósito, asegurar el anonimato de los participantes y grabar la reunión. Algunos informes de los grupos focales son muy breves e incluyen sólo los aspectos más importantes de la discusión.
Análisis beneficio–costo
Los indicadores del análisis beneficio-costo cuantifican los resultados del programa en unidades monetarias (pesos) y los relacionan con su costo. Es útil para justificar el presupuesto, demostrar los beneficios del programa y ayudar a obtener los mayores beneficios de la inversión realizada por el programa.
Pruebas de información o conocimiento
Al determinar los beneficios y costos de un programa, asegúrese de que se midan en las mismas unidades monetarias. Resumir y analizar el nivel de comprensión alcanzado a lo largo del programa (generalmente esto incluye emitir una evaluación).
Las encuestas
Cree una prueba que consista en preguntas sobre el conocimiento o las habilidades que desea medir. Si las respuestas se dan en una discusión grupal, asegúrese de presentar toda la gama de respuestas.
Encuestas personales
Si la respuesta a una pregunta abierta es incompleta o muy vaga, intente obtener una respuesta más clara. Si el encuestado se niega a responder una pregunta, intente obtener una respuesta, pero sin poner en riesgo el estudio.
Cuestionarios administrados en grupos
El diseño de cuestionarios
Las preguntas formuladas en el cuestionario son los componentes básicos que determinan la efectividad de la investigación. Las respuestas a las preguntas cerradas encajan en categorías predeterminadas entre las que el entrevistado puede elegir.
Tipos de muestreo
El muestreo busca esencialmente establecer conclusiones válidas para toda la población a partir del estudio de una porción de ella (la muestra). El muestreo aleatorio o probabilístico se basa en la selección aleatoria de elementos de una población determinada.
El tamaño de muestra
El tamaño de muestra necesario para lograr una precisión y confiabilidad determinadas depende del grado de variabilidad de la población a muestrear. De este modo, una población relativamente homogénea podrá cumplir estos requisitos con un tamaño de muestra más pequeño.
Métodos de muestreo
Por lo tanto, para una precisión dada, niveles más altos de confiabilidad requerirán tamaños de muestra más grandes. Observe cómo el tamaño de la muestra depende básicamente de la variabilidad de la población y no del tamaño de la población.
Las etapas de una encuesta por muestreo
Y de ser así, cuál es la mejor época del año para realizar el trabajo de campo. Qué apoyo logístico dispone el cliente para realizar el trabajo de campo.
Prueba de los instrumentos de colecta
Dado que el trabajo de campo constituye una parte importante del costo de la evaluación, es importante planificarlo cuidadosamente para evitar errores costosos y obtener la máxima cantidad de información relevante para el estudio. Qué métodos de recolección de información, cualitativa y cuantitativa, se utilizarán en el trabajo de campo.
Cómo efectuar un trabajo de campo eficiente
Para garantizar el éxito del trabajo de campo, el apoyo de los actores locales es crucial. Una vez cubiertas las actividades anteriores se puede comenzar con el trabajo de campo propiamente dicho.
Sugerencias para la realización de entrevistas semi–
Se debe tener cuidado de garantizar que las entrevistas, la observación participante y otras actividades que involucren a participantes clave sean realizadas por personal calificado del equipo de evaluadores con experiencia y conocimiento detallado del programa a evaluar. El prestigio del equipo de evaluación ante los participantes clave no debe ponerse en peligro enviando personas sin experiencia.
Sugerencias para realizar observaciones participantes
Estrategia para el levantamiento de las encuestas
Compare las respuestas de aquellos que respondieron claramente con las de otros con las preguntas que respondieron ambos. Si no se encuentra ninguna diferencia, las respuestas de quienes respondieron se pueden generalizar a la población en general.
Características del análisis cualitativo de los datos
El análisis de contenido es un método de investigación que utiliza un conjunto de procedimientos para hacer inferencias válidas a partir del texto. Cuatro tipos de confiabilidad son relevantes en el análisis de contenido: estabilidad, reproducibilidad, precisión y validez.
Creación y prueba de un esquema de codificación
Interpretación del análisis de los datos
Un método que aporta más perspectivas a la tarea de interpretación es organizar reuniones con los implementadores del programa que se está evaluando. Los resultados se pueden distribuir a los operadores con anticipación, junto con otra información relevante como el plan de evaluación y la lista de preguntas, criterios y estándares que guiaron la evaluación; Por lo tanto, la reunión puede ser para discusión más que para presentación.
Salvaguardas del análisis cualitativo
Discuta los hallazgos con participantes clave u otros evaluadores e informe diferentes perspectivas sobre la misma situación. El análisis de datos cuantitativos consta de una etapa de preparación de la información, que consiste en la generación de bases de datos estables y confiables, y el análisis estadístico de la información propiamente dicha.
Construcción de bases de datos
Toda la manipulación de la información se puede realizar en una hoja de cálculo (como Excel, Quattro Pro o Lotus 123). Esto generará bases de datos confiables que luego podrán ser "exportadas" a programas de análisis estadístico que funcionarán sin problemas.
Escalas de medida
Análisis descriptivo
Estas medidas indican el grado de dispersión de las variables e incluyen amplitud, varianza y coeficiente de variación. La varianza es el promedio de las desviaciones al cuadrado de la media.
Inferencia estadística
En el proceso de prueba de hipótesis se pueden cometer dos tipos de errores: error tipo I y error tipo II. Rechazado Ho Error tipo I Acción correcta No rechazado Acción correcta Error tipo II.
Comparación de poblaciones
La prueba de chi-cuadrado ( ²) es el más popular de todos los métodos estadísticos inferenciales no paramétricos. El análisis de varianza (ANOVA) es la técnica estadística utilizada para probar la hipótesis de que las medias de más de dos poblaciones son iguales, ya que la prueba "t" no es apropiada en este caso.
La asociación entre variables
En la tabla de contingencia 2x2, el valor de Tau b es igual al coeficiente Phi. El valor r resultante y su correspondiente nivel de significancia evaluarán tanto la dirección (positiva y negativa) como la fuerza (entre 0 y 1) de la relación entre las dos variables.
Plan de informes
Tipos de informes
La comunicación con estos participantes debe mantenerse durante todo el proceso de evaluación para garantizar resultados significativos, aceptables y utilizables. En todo caso, es responsabilidad del evaluador adaptar los informes de evaluación al público al que van dirigidos.
Los informes escritos
Las buenas evaluaciones involucran a quienes participan en todas las fases de la evaluación (planificación, implementación y uso de los resultados). Los evaluadores deben respetar la seguridad, la dignidad y la autoestima de todos los involucrados en el proceso o los resultados de la evaluación.
U N PASO ADICIONAL : LA METAEVALUACIÓN
- Tipos de metavealuación
- Las normas para la evaluación de programas
- Los principios de los evaluadores de la AEA
- El papel del metaevaluador
R EFERENCIAS BIBLIOGRÁFICAS