Centros propios del Instituto de Salud Carlos III.
Mapa 5. Distribución geográfica de los grupos de investigación en CIBERSAM.
C. Modelo EFQM (European Foundation for Quality Management).
1.7. Evaluación de la actividad científica.
Actualmente la ciencia es uno de los elementos más importantes en el desarrollo social, tecnológico y económico de cualquier país. Su crecimiento y aplicación, el desarrollo de la actividad científica y del trabajo experimental, son factores esenciales en el progreso y mejora de la calidad de vida de la sociedad. Por este motivo, “la investigación debe ser considerada una inversión productiva esencial, aunque sus efectos económicos sólo pueden apreciarse a medio y largo plazo"(129).
Según el Manual de Frascati(130) y el Manual de Estadística sobre actividades científicas y tecnológicas de la Organización de las Naciones Unidas (UNESCO), la actividad científica se define como “aquellas actividades sistemáticas estrechamente relacionadas con la producción, promoción, difusión y aplicación de los conocimientos científicos y técnicos en todos los campos de la ciencia y la tecnología. Incluye: investigación y el desarrollo experimental (IDE), la enseñanza y la formación científica y técnica (EFCYT) y los servicios científicos y técnicos (SCT)”
La ciencia se divide en:
• “Ciencias experimentales: éstas serían las ciencias por excelencia. En ellas el método científico se aplica con mayor rigor. Algunas de estas ciencias son la física, la química, la astronomía..., entre otras.
• Ciencias formales: Son un instrumento al servicio de las ciencias empíricas. No versan sobre la realidad, sino sobre ideas. Son las matemáticas y la lógica.
• Ciencias sociales: no son realmente ciencias, son disciplinas que han tratado de copiar a las ciencias experimentales. Son la filosofía, la psicología, la sociología”(131), etc.
Los tipos de investigación de la ciencia, son los siguientes:
• Investigación básica: (sectores público y privado). Su objetivo es alcanzar un entendimiento o conocimiento de los fenómenos básicos de la naturaleza. En España, se realiza preferentemente en Universidades, en el CSIC y en Organismos Públicos de Investigación.
• Investigación aplicada: (sectores público y privado) También es una investigación original, que se basa en los resultados de la investigación básica.
• Desarrollo experimental: es la aplicación práctica de los resultados de la investigación a partir de una investigación básica o aplicada, aunque realmente no se trata de un tipo de investigación.
Existen varias razones que hacen necesaria la implementación de políticas de evaluación de la actividad científica. Debido al impacto de la ciencia en la sociedad, es necesario facilitar una más adecuada y transparente asignación de recursos materiales y económicos que permitan alcanzar de manera más efectiva y eficaz, tanto los objetivos de investigación como la toma de decisiones de los agentes implicados. La actual escasez de recursos materiales y económicos destinados a investigación, incluso en los países más desarrollados, hace mas necesaria la implementación de métodos de evaluación(132) que permitan identificar a aquellos investigadores, grupos, centros u organismos que obtienen los mejores resultados a través del uso de esos recursos. Además, la actividad evaluativa será un mecanismo que promueva la calidad científica(133).
Igualmente, una correcta evaluación permitirá identificar de manera eficaz fortalezas y debilidades de la actividad científica en países, grupos o investigadores, facilitando la implementación de medidas que favorezcan el desarrollo científico, la distribución de recursos materiales y económicos y la implementación de políticas más coherentes de gestión en I+D+i. Sin embargo, el uso de metodologías no adecuadas puede provocar cambios en los hábitos de trabajo de los investigadores que no siempre se corresponden con una mejora del trabajo científico(134-136), ya que es posible que los investigadores se adapten a los criterios de la evaluación y no a los objetivos científicos. Para evitar este tipo de situaciones, cualquier evaluación debe estar basada en los principios de objetividad, neutralidad, independencia y transparencia.
En este sentido, la bibliometría y los estudios bibliométricos “son una herramienta muy eficaz a la hora de evaluar la ciencia y sus áreas afines"(137). La bibliometría permite, entre muchas otras características, estimar los resultados de producción y la visibilidad en la evaluación de los trabajos de investigación. Estos métodos se pueden utilizar como un instrumento de evaluación en la investigación junto con otras metodologías, tales como la revisión por pares o paneles de expertos(137).
1.7.1.Bibliometría y Cienciometría: Análisis, definición y alcance.
En 1969 Alan Pritchard(138) fue el primero que definió el término bibliometría “como la aplicación de los métodos estadísticos y matemáticos dispuestos para definir los procesos
de la comunicación escrita y la naturaleza y el desarrollo de las disciplinas científicas mediante técnicas de recuento y análisis de dicha comunicación”.
“El tratamiento y manejo de la literatura científica por medios cuantitativos de recuento y análisis sirve no solo para analizar el volumen de publicaciones, la productividad de autores, revistas o materias, sino también en un sentido más amplio, para el conocimiento de los procesos y la naturaleza de las ciencias, y fue a partir de 1960 cuando comenzó a utilizarse el término cienciometría para referirse a estos análisis”(138).
La bibliometría es una herramienta eficaz para el análisis cuantitativo de la producción científica mundial a través de la literatura publicada; por otra parte, la cienciometría permite el análisis cuantitativo de los aspectos sociales de la ciencia.
Debido a que los artículos publicados en revistas científicas son considerados la forma más elaborada de comunicación de la ciencia, los estudios bibliométricos se aplican principalmente a éstos. “A través de la bibliometría es posible evaluar la actividad, estructura y evolución de una ciencia, cuantificar sus resultados y aplicarlos en campos como la biblioteconomía, la historia de las disciplinas, la sociología de las ciencias o la política científica”(139).
1.7.2.Métodos de evaluación de la ciencia.
Evaluar la calidad de la actividad científica es siempre un proceso complejo. Para estimar la actividad científica es frecuente la utilización de métodos cuantitativos y cualitativos, tales como los indicadores bibliométricos y la revisión por pares o peer review. Estos métodos de evaluación son usados por ejemplo, a la hora de tomar decisiones sobre financiación, promociones o para asignar premios en los ámbitos científicos y académicos.
Los indicadores bibliométricos recogen y analizan información desde el punto de vista cuantitativo, dando una visión general del estado de la actividad científica. Desde el punto de vista cualitativo de la investigación, las opiniones de expertos o peer review ofrecen una información mucho más precisa, ya que es realizada por investigadores de prestigio en el área evaluada. Para obtener unos resultados más ajustados y precisos, es recomendable el uso de ambos métodos de evaluación(133, 140). A continuación se describen ambos métodos.