• No se han encontrado resultados

PARTE III: DESARROLLO

Capítulo 7: Debilidades y Fortalezas de las Estrategias de M&E: Análisis y Discusión

7.2. Resumen de debilidades y fortalezas en GOCAME

La estrategia integrada de M&E GOCAME ha sido producto de la constante investigación de un grupo de I+D preocupados por la creciente demanda de aplicaciones software/web y sus altos requerimientos de calidad. La investigación comenzó hace doce años planteando una metodología de medición y evaluación [OLS, 2000] y con el correr del tiempo se fue transformando en lo que hoy conocemos como GOCAME. Su

132

evolución fue gradual y sostenida. Incluso parte del objetivo de este estudio es encontrar características importantes y útiles de otras estrategias para incluirlas en GOCAME, con el fin de robustecerla.

En principio, GOCAME cumple con los tres pilares evaluados en este estudio. Uno de ellos, como es el caso de la Calidad de las Capacidades del Proceso, se cumple en menor medida, pero aun así está en un nivel marginal de cumplimiento. Por lo que se pueden encontrar fácilmente fortalezas de esta estrategia.

Una de las ventajas es su base ontológica la cual permite la definición clara y precisa de todos los términos y relaciones necesarios para la comprensión de la estrategia en su totalidad. Característica importante al momento de su divulgación, aprendizaje y aplicación. A partir de las definiciones especificadas en la ontología de métricas e indicadores [MAR, 2004] se construyó el marco conceptual. Este marco conceptual está modularizado según las principales actividades que se deben llevar a cabo en todo proyecto de M&E: Definición y Especificación de Requerimientos no Funcionales, Especificación del Contexto, Diseño y Ejecución de la Medición, Diseño y Ejecución de la Evaluación, y, Análisis y Recomendación. Esta modularización permite al evaluador o a los integrantes del equipo de Aseguramiento de Calidad comprender en detalle cada aspecto de la estrategia sin perderse en el modelado conceptual total. Por otro lado, la existencia del marco conceptual ayuda a la puesta en marcha de un proyecto de M&E debido a que la organización no tiene que empezar de cero cada vez, como así también, facilita el diseño e implementación de distintas herramientas de soporte a la estrategia. El marco conceptual está modelado en el lenguaje UML.

Por otro lado, su proceso está definido formalmente y con un nivel de completitud bastante alto desde los tres puntos de vistas discutidos: Funcional, Informacional y de Comportamiento. De estas tres perspectivas, la más desarrollada es la Funcional pero existe una investigación en curso, que dará lugar a una tesis doctoral, donde se pretende definir con más rigor las distintas vistas y con mayor nivel de granularidad. La definición formal del proceso fue realizada por [BEC, 2010]usando diagramas de actividad de UML 2 y SPEM 2.0 Profile [OMG-SPEM, 2002], un lenguaje flexible y robusto que permite un modelado amplio de todos los procesos y sus vistas.

La propuesta GOCAME se apega a los estándares de medición y evaluación de la ISO proporcionando una visión integrada de ambos, no sólo desde el punto de vista de las actividades que componen los procesos sino también desde el punto de vista de los términos empleados.

También es digno de destacar la correspondencia existente entre la base conceptual y el marco conceptual, lo que evidencia un trabajo sistemático y consistente.

Otra fortaleza de la estrategia es su adaptabilidad para llevar a cabo estudios de medición y evaluación en otros dominios y con diversas categorías de entes; es decir, no sólo un recurso como el presentado en esta tesis sino también con productos y procesos.

Cabe destacar que recientemente se concluyó una tesis doctoral donde se presenta un enfoque y una herramienta que permite la recomendación del mejor árbol de requerimientos y sus correspondientes métricas a partir del uso de una memoria organizacional basada en casos [MAR, 2011]. Esto le brinda una gran flexibilidad al momento de encarar un nuevo proyecto de M&E y permite que el conocimiento implícito presente en los empleados de la organización sea capitalizado por la misma.

De este modo, expusimos las fortalezas que encontramos en la estrategia GOCAME. A continuación resumimos sus debilidades.

Las debilidades principalmente están en el pilar de la calidad de las capacidades del proceso debido a que carece de una descripción de actividades con cierto grado de completitud. A esto se le suma que

133

GOCAME no posee roles definidos, por lo tanto, tampoco posee asignación de roles a actividades. Este déficit puede resultar en un mayor esfuerzo de comprensión a realizar por parte del usuario de la estrategia al momento de poner en marcha un proyecto de medición y evaluación.

Los artefactos del proceso, se encuentran en una situación similar a las actividades, pero en un nivel más crítico. Directamente los artefactos no están descriptos.

Con respecto al modelado de las distintas vistas del proceso, carece de la vista organizacional, y el nivel de granularidad de las vistas restantes se encuentra en el límite de lo requerido.

Si bien la base conceptual está basada en los estándares de medición y evaluación de la ISO, lo hace a un nivel parcial, sólo concuerda en aquellos términos más importantes del dominio (atributo, entidad, indicador, etc.).

Otro aspecto a mejorar es el módulo de recomendaciones, donde se deben definir con más precisión la terminología y las posibles técnicas o métodos a utilizar. Se debe definir y modelar el proceso incrementando su granularidad. A su vez, todo esto se debería integrar a C-INCAMI Tool, permitiendo un soporte más eficiente y robusto al análisis de datos obtenido de las evaluaciones y a la toma de decisiones en los procesos de recomendación brindando un informe claro y conciso que guíe al responsable del área de calidad en la arduas tareas que involucra el aseguramiento de la calidad de los procesos y productos de la organización.

GOCAME está enfocada a nivel de proyecto sin enlazar los objetivos del negocio más allá de la determinación de la necesidad de información que puede surgir desde una inquietud de la organización o de un proyecto en particular.

Por último, es necesario que el uso de GOCAME transcienda los límites académicos y comience a ser utilizado en ambientes industriales desde los cuales se provean evidencias de sus beneficios como así también, parámetros que permitan evaluar el costo/beneficio de su aplicación. En [LEW, 2011] se presenta una estrategia (SIQinU –Strategy for understanding and improving Quality in Use) que se alinea con GOCAME y que presenta resultados de un caso de estudio en una organización real.