II. TEMAS DE EVALUACION
1. DISEÑO DEL PROGRAMA
1.4. Lógica Horizontal de la Matriz de Marco Lógico
En esta sección se realiza un análisis del grado de adecuación de los indicadores escogidos para reportar el nivel de eficacia, calidad, eficiencia y economía de cada uno de los componentes y propósitos, y de esta forma tener una visión general del desempeño del Programa.
Propósito: Indicadores y medios de verificación
Eficacia/resultado final
• Porcentaje establecimientos municipales y particulares subvencionados que cumplen con la normativa vigente. Este indicador permite conocer el porcentaje de establecimientos educacionales fiscalizados que cumplen con la normativa vigente y no se cuenta con la información para hacerlo, dado que el programa lleva la estadística respecto del número de visitas y no acerca de los establecimientos educacionales visitados.
Eficacia/Producto
Porcentaje de establecimientos municipales y particulares subvencionados visitados. Este indicador permite conocer el porcentaje de establecimientos
educacionales fiscalizados desagregadamente y se cuenta con la información para hacerlo.
Variación del número de fiscalizaciones realizadas anualmente. Este indicador posibilita conocer la eficacia del producto y se cuenta con información
Porcentaje de Visitas a establecimientos municipales y particulares subvencionados que resultan en Actas tipo B, no cumpliendo levemente con la normativa vigente. El resultado de la visita como se señalaba previamente conduce a la emisión de un Acta, en este caso, a la B, respecto de la cual se cuenta con la información acerca del número de establecimientos categorizados en ella y a la vez, esta información está desagregada por región y tipo de establecimiento. Más aún se puede conocer el tipo de infracción que llevó a la emisión de este tipo de Acta, aunque habitualmente no es utilizada por el programa
Porcentaje de Visitas a establecimientos municipales y particulares subvencionados que resultan en Actas tipo C, no cumpliendo gravemente con la normativa vigente Tal como en el indicador anterior, cuenta con la información acerca del número de establecimientos categorizados en este tipo de Acta y, a la vez, esta información está desagregada por región y tipo de establecimiento. Más aún se puede conocer el tipo de infracción que llevó a la emisión del Acta C, aunque habitualmente no es utilizada por el programa. Así mismo, cabe recordar que la función del programa termina con la emisión de esta Acta, no contándose con información sobre el curso que sigue el proceso posterior.
Porcentaje de establecimientos municipales visitados, con Acta B, sobre el total de establecimientos municipales visitados. El indicador es de producto y, se cuenta con la información para monitorear y evaluar.
Eficacia/ Resultado Intermedio
Porcentaje establecimientos municipales y particulares subvencionados que cumplen con la normativa vigente42. El indicador es de eficacia-resultado intermedio y se cuenta con la información requerida.
Porcentaje de visitas a establecimientos municipales y particulares subvencionados que resultan en Actas tipo A, cumpliendo con la normativa vigente. El indicador es de eficacia-resultado .Intermedio y, se cuenta con la información para monitorear y evaluar.
Porcentaje de visitas a establecimientos particulares subvencionados que resultan en Acta A sobre el total de visitas a establecimientos particulares subvencionados. El indicador es de eficacia-resultado y, se cuenta con la información para monitorear y evaluar.
42 Cuando un establecimiento cumple con la normativa vigente los inspectores emiten un Acta tipo
Porcentaje de visitas a establecimientos municipales que resultan en Acta A sobre el total de visitas a establecimientos municipales. El indicador es de eficacia- resultado.Intermedio y, se cuenta con la información para monitorear y evaluar. Porcentaje de establecimientos particulares subvencionados visitados, con Acta B, sobre el total de establecimientos particulares subvencionados visitados El indicador es de eficacia-resultado y, se cuenta con la información para monitorear y evaluar.
Porcentaje de establecimientos municipales visitados, con Acta C, sobre el total de establecimientos municipales visitados El indicador es de eficacia-resultado y, se cuenta con la información para monitorear y evaluar.
Porcentaje de establecimientos particulares subvencionados visitados, con Acta C, sobre el total de establecimientos particulares subvencionados visitados El indicador es de eficacia-resultado y, se cuenta con la información para monitorear y evaluar.
Porcentaje de establecimientos municipales visitados El indicador es de eficacia- resultado y, se cuenta con la información para monitorear y evaluar.
Economía / Producto
Porcentaje de gasto devengado sobre el presupuesto inicial del programa43. El indicador está debidamente enunciado y se cuenta con la información para monitorearlo.
Eficiencia / Producto
Porcentaje de gastos administrativos del programa44 en relación al gasto total del programa. El indicador es de eficiencia y se cuenta con información parcial para su evaluación.
Componente: Indicadores y Medios de Verificación
Eficacia/Producto
Porcentaje de visitas de fiscalización realizadas respecto de las programadas. El indicador es adecuado y se cuenta con la información.
43 Datos de presupuesto y gasto devengado deben corresponder a la suma de los datos de
presupuesto y gasto de la Unidad de Inspección + los datos de presupuesto y gastos asociados con el tratamiento de las Actas C en las Seremis y en la Dirección Jurídica del MINEDUC. Sin embargo, los indicadores están estimados sólo con los datos de la Unidad de Inspección.
44 Los Gastos Administrativos deben ser la suma del gasto administrativo de la Unidad de
Inspección + los datos de gastos administrativos asociados con el tratamiento de las Actas C en las Seremis y en la Dirección Jurídica del MINEDUC. Sin embargo, los indicadores están estimados sólo con los datos de la Unidad de Inspección.
Porcentaje de inspectores capacitados al año, respecto del total de inspectores en el país, al final del año respectivo. El indicador está adecuadamente formulado, sin embargo no se cuenta con información para emitir juicio evaluativo.
Eficacia / Proceso
Visitas promedio por establecimiento educacional (municipal y particular subvencionado) El indicador es de eficacia-proceso y se cuenta con la información requerida.
Visitas promedio por establecimientos municipales El indicador es de eficacia- proceso y se cuenta con la información para evaluar.
Eficiencia / Producto
Promedio de fiscalizaciones mensuales por inspector. El indicador es de eficiencia y se cuenta con información para su evaluación.
Costo promedio por fiscalización realizada. El indicador es de eficiencia y se cuenta con información para su evaluación.
Costo promedio por inspector capacitado. El indicador es de eficiencia y no se cuenta con información parcial para su evaluación.
El análisis realizado permite señalar que existen 16 indicadores cuantificables para el propósito y 7 para el Componente
En lo general, a nivel de propósito y de componente los indicadores presentados son suficientes en número y adecuados en su definición en la medida que dan cuenta de los procesos, productos y los resultados intermedios. Por otra parte, se cuenta con los medios de verificación y estos permiten verificar los indicadores definidos. Sin embargo, en la medida que el Programa lleva su estadística respecto del número de visitas y no acerca del número de establecimientos visitados, no se cuenta con información al respecto. A pesar de ello, el análisis de la matriz se valida en su lógica horizontal.
Sin embargo, se hace necesario a) llevar la estadística en número y porcentaje de establecimientos visitados, posibles de trabajar posteriormente en forma desagregada, e incorporar otros indicadores referidos a calidad que digan relación con los mínimos exigidos a un establecimiento educacional, por ejemplo: porcentaje de establecimientos educacionales que cumplen con tener planes de estudios, con contar con mobiliario según la norma, con equipos docentes debidamente titulados