1. Seguir desarrollando estudios así como los conceptos y la metodología para el diseño, el análisis y la interpretación
de los estudios de impacto
Durante el desarrollo de los estudios de impacto hubo diversas situaciones en donde se evidenció que los expertos técnicos y los economistas “hablaban diferentes idiomas”. Esto dificultó la realización de algunos estudios y seguramente la superación de este obstáculo constituye un desafío permanente para las instituciones de la IC. Asimismo se identificó la necesidad de crear una capacidad científica para realizar estudios de impacto (ex ante y ex post). En el caso de los países más grandes de la región, se puede crear esta capacidad dentro de las instituciones de la IC (como por ejemplo en Inmetro del Brasil), pero en la mayoría de los casos el camino más fácil es desarrollar un pool de expertos ligado a las instituciones que entienden lo que es la IC y que pueden apoyar al desarrollo de tales estudios.
Por lo tanto, es imprescindible profundizar en las metodologías de análisis e interpretación.
Por ejemplo sería muy útil recabar la información para establecer la línea base habiendo definido la metodología al inicio de una intervención, de modo que pueda ser utilizada efectivamente para analizar el impacto de dicha intervención en el futuro. También, la metodología debe poder adaptarse en caso de que la información no esté disponible.
2. Promover la documentación de la línea base y el desarrollo de indicadores en intervenciones de la IC (por ejemplo nuevos servicios) que muestran un alto potencial para un estudio de impacto en el futuro
Uno de los grandes desafíos de los estudios de impacto es la definición del punto de partida, es decir la falta de información para describir la situación antes de la intervención. Es por ello recomendable documentar bien la situación de partida, especialmente en aquellos casos en que se espera un alto impacto.
Por otro lado, en muchos casos el acceso a los datos es difícil. Lo cual se debe a que muchas veces las empresas son celosas de la entrega de información, asimismo en el caso del sector público y de las instituciones de la IC estas pueden no contar con la información documentada. En el capítulo sobre aspectos metodológicos de los estudios de impacto se presentan algunas ideas de cómo diseñar indicadores de desempeño tendientes a dimensionar los efectos de la IC. En dicho capítulo se observa que mientras que para los indicadores de desempeño hay algunas soluciones simples para determinar adecuadamente el impacto de una política, muchas veces hace falta realizar estudios que requieren de la ayuda de expertos.
En el caso del estudio del Pisco peruano, el objetivo principal fue analizar el proceso de certificación del pisco y tratar de entender el efecto que el mismo puede haber tenido en el fuerte crecimiento de la industria.
En este sentido, se propone una metodología de evaluación de impacto, la cual permite aproximarse al efecto neto como consecuencia de obtener la autorización de uso de la D.O. en los productores de pisco.
Sin embargo, esta metodología de evaluación de impacto tuvo como obstáculo la carencia de información disponible y documentada acerca de la producción de Pisco.
3. Lograr una plataforma o red activa de intercambio de experiencias, de problemas y soluciones para el desarrollo
de estudios de impacto
Asimismo queda claro que no todas las instituciones de la infraestructura de la calidad podrán ejecutar estudios para tener una mejor base para evaluar el impacto de sus servicios. Una red de intercambio podría ser utilizada para transmitir los resultados de un estudio realizado por una entidad a otra. Otra posibilidad sería tratar estos temas dentro de las organizaciones regionales e internacionales (ver por ejemplo la página web del BIPM, donde se encuentra recopilada una lista de fuentes de estudios de impacto107).
La cooperación técnica internacional y el intercambio de experiencias constituyen una herramienta muy útil para fortalecer la IC y deben ser promovidos, como mostró el desarrollo de la presente publicación, para facilitar oportunidades de intercambio de experiencias así como el acceso a competencia técnica externa.
4. Realizar estudios de impacto para todos los elementos de la IC de forma individual o de forma sistémica
Uno de los retos a futuro es lograr la ampliación del número de estudios de impacto en todas las aéreas de la IC (metrología, acreditación, normalización, ensayos). Estos estudios deben profundizar el análisis de los impactos que tiene la IC no solo en el ámbito económico, sino también incluir los impactos sociales y medioambientales. Asimismo sería importante la realización de estudios que muestren el impacto de la IC como sistema integrado, y no de cada componente por separado. Muchas veces el efecto conjunto de los diferentes componentes de la IC es mucho mayor que la simple suma de los efectos individuales.
107 http://www.bipm.org/en/practical_info/useful_links/impact.html.
Bibliografía
CEPAL-PTB (2011), “Impacto de la Infraestructura de la Calidad en América Latina: instituciones, prácticas y desafíos para las políticas públicas”, Eds. Gothner, K. y S. Rovira, CEPAL, Naciones Unidas, Santiago de Chile.
Epílogo: una guía práctica para la realización de estudios de impacto de la infraestructura
de la calidad
108Jorge Gonçalves
109Jan Peuckert
110A. Introducción
Un estudio de impacto es una investigación realizada para identificar y medir los impactos positivos y negativos en una sociedad y /o en el medio ambiente que resultan de cierta intervención o de cierto fenómeno. En cuanto a los servicios de la infraestructura de la calidad, los estudios de impacto se refieren, por ejemplo, a intervenciones en los campos de la metrología, de la normalización, de la evaluación de conformidad y de la acreditación; y pueden referirse a la creación de un material de referencia certificado, al desarrollo de un nuevo instrumento de medición, al establecimiento de un nuevo servicio de calibración, a la certificación de granjas orgánicas, así como a la acreditación de laboratorios, por ejemplo.
Debido a fuertes complementaciones entre los servicios de la infraestructura de la calidad, es a veces más exacto analizar los impactos de un grupo de intervenciones en lugar de una sola intervención. Si se ha seguido, por ejemplo, un esquema de certificación para el establecimiento de un patrón, o si el desarrollo de un nuevo instrumento de medición fue seguido por la acreditación del laboratorio que ejecuta los ensayos, es más acertado evaluar los impactos de ambas intervenciones que de una sola, dado que será difícil aislar los impactos de cada intervención. Antes de empezar con el estudio de impacto sobre un servicio de la infraestructura de la calidad es, por lo tanto, necesario definir precisamente la intervención (o el grupo de intervenciones) a ser analizada y la cronología de las diferentes intervenciones.
108 En el Anexo I se presenta un glosario que explica algunas palabras que son empleadas en estudios de evaluación de impacto y que son decisivos para el buen entendimiento de la guía.
109 Consultor del PTB.
110 Research Fellow, Cátedra Economía de la Innovación, Universidad Técnica de Berlín.
Además, los estudios de impacto constan de tres etapas diferentes. En primer lugar hay que delinear una teoría de impacto que debe identificar todos los posibles impactos —positivos y negativos, sociales, económicos y ambientales— de una intervención y todas las partes interesadas (es decir la población y/o las instituciones afectadas por una intervención). En segundo lugar es necesario comprobar estos impactos hipotéticos. La última fase trata de la interpretación de los resultados. En esta fase hay que definir los impactos que han resultado como consecuencia del servicio de la infraestructura de la calidad y los impactos que no han sido identificados como consecuencia de un servicio de este tipo, asimismo se deben dar recomendaciones de políticas.
En cuanto al personal requerido para un estudio de impacto, es necesario al menos una persona que entienda profundamente el servicio o los servicios de la infraestructura de la calidad a analizar y que sea capaz de desarrollar una teoría general del impacto, así como alguien con conocimientos de estadística para coordinar la recopilación de datos y el procesamiento de conformidad con la teoría de impacto establecida. Si la institución no dispone de alguien con el conocimiento estadístico requerido, se puede emplear temporalmente y especialmente para este objetivo una persona de una universidad o de un instituto de investigación.
El tiempo requerido para la realización de un estudio de impacto depende sobre todo de la implementación del servicio (si fue implementado o no). En el caso que el servicio aún no haya sido implementado será más fácil realizar un estudio amplio sobre la variedad de impactos y demostrarlos.
Esto, sin embargo, requiere normalmente más tiempo que desarrollar un estudio de impacto sobre un servicio que ya ha sido prestado, dado que primero será necesario implementar el servicio y después esperar un período hasta que el mismo produzca efectos (la duración de este período depende del tipo de los impactos supuestos). Si el servicio ya fue implementado, el estudio de impacto puede ser realizado más rápidamente (pero tardará al menos 3 meses). No obstante, puede enfrentar dificultades técnicas en cuanto a la disponibilidad de los datos requeridos para demostrar los impactos supuestos.
Por las razones expuestas, es muy importante elegir el estudio de impacto adecuado sobre todo respecto a la concordancia entre el tiempo, los gastos y la viabilidad asociados con los diversos estudios de caso posibles y las expectativas iniciales de la institución.
En último término, el interés de las partes interesadas en el estudio de impacto sobre servicios de la infraestructura de la calidad puede ser muy importante para tener acceso a datos (por ejemplo sobre las cantidades producidas en el curso de los años, las exportaciones, los precios, la inversión en investigación y desarrollo, etc.) que pueden ser inaccesibles de otra manera y que son esenciales para demostrar los impactos. Por eso, una buena estrategia de comunicación puede ser crucial para la realización de un estudio de impacto. Esto significa que —por una parte— es preciso poder explicar los beneficios de la realización de estudios de impacto (es decir, la necesidad de desarrollar más servicios de la infraestructura de la calidad) y —por otra parte— es necesario garantizar que los datos de empresas individuales serán confidenciales, en particular que no caerán en manos de sus competidores y que sólo se emplearán los indicadores recopilados.