EVALUACIÓN DE LA PRODUCCIÓN CIENTÍFICA DE LA REVISTA INGENIERÍA Y UNIVERSIDAD A PARTIR DE INDICADORES
BIBLIOMÉTRICOS EN EL PERÍODO 2009-2013
JENNY PAOLA PÁEZ POSSE JINNETH VIVIANA PRIETO MARTÍNEZ
PONTIFICIA UNIVERSIDAD JAVERIANA FACULTAD DE COMUNICACIÓN Y LENGUAJE CIENCIA DE LA INFORMACIÓN – BIBLIOTECOLOGÍA
BOGOTÁ D.C., NOVIEMBRE 2013
ii
EVALUACIÓN DE LA PRODUCCIÓN CIENTÍFICA DE LA REVISTA INGENIERÍA Y UNIVERSIDAD A PARTIR DE INDICADORES
BIBLIOMÉTRICOS EN EL PERÍODO 2009-2013
JENNY PAOLA PÁEZ POSSE JINNETH VIVIANA PRIETO MARTÍNEZ
Trabajo de grado para optar al título de
Profesional en Ciencia de la Información – Bibliotecología
Director:
ORLANDO GREGORIO CHAVIANO
PONTIFICIA UNIVERSIDAD JAVERIANA FACULTAD DE COMUNICACIÓN Y LENGUAJE CIENCIA DE LA INFORMACIÓN – BIBLIOTECOLOGÍA
BOGOTÁ D.C., NOVIEMBRE 2013
iv
ARTICULO 23, RESOLUCIÓN N° 13 DE 1946
“La Universidad no se hace responsable por los conceptos emitidos por sus alumnos en sus trabajos de tesis. Sólo velará porque no se publique nada contrario al dogma y a la moral católica y porque las tesis no contengan ataques personales contra persona
alguna, antes bien se vean en ellas el anhelo de buscar la verdad y la justicia”
v Contenido
Índice de tablas ... vii
Índice de figuras ... viii
Resumen ... ix
Abstract ... x
Introducción ... xi
Antecedentes... xiv
Situación problémica ... xvi
Problema de investigación ... xvi
Objetivo general ... xvi
Objetivos específicos ... xvi
Justificación de la investigación ... xvii
1. Panorama bibliométrico ... 1
2. Producción científica ... 5
3. Indicadores ... 6
3.1 Indicadores de producción. ... 11
3.2 Indicadores de colaboración. ... 12
3.3 Indicadores de impacto. ... 14
3.3.1 Índice H. ... 14
3.3.2 Factor de impacto. ... 15
3.3.3 Índice de inmediatez. ... 16
3.3.4 SCImagoJournal Rank (SJR). ... 16
4. Limitaciones de los indicadores... 18
4.1 Algunas de las limitaciones de los indicadores. ... 18
4.1.1 Carácter cuantitativo. ... 18
4.1.2 Diferencias entre áreas. ... 18
4.1.3 Limitaciones de bases de datos. ... 19
5. Conclusiones parciales del capítulo ... 20
6. Caracterización de las fuentes ... 21
vi
7. Descripción del método bibliométrico empleado ... 22
7.1 Fuentes de información empleadas. ... 22
7.1.1 Fuentes primarias. ... 22
7.1.2 Fuentes secundarias. ... 23
7.2 Recuperación de información. ... 23
7.3 Estrategia de búsqueda. ... 23
7.4 Procesamiento y representación de la información. ... 25
7.5 Niveles de agregación. ... 26
7.6 Esquema de indicadores y variables empleados. ... 26
7.6.1 Indicadores de producción o visibilidad. ... 27
7.6.2 Indicadores de impacto. ... 28
7.6.3 Indicadores de colaboración. ... 29
8. Conclusiones parciales del capítulo ... 29
9. Productividad de autores ... 30
10. Distribución de la cantidad de artículos según número de autores ... 33
11. Distribución de artículos según número de firmas ... 34
12. Instituciones de mayor productividad ... 35
13. Distribución de contribuciones y citas ... 36
14. Fluctuación de la productividad por año ... 37
15. Productividad de descriptores utilizados por los autores ... 38
16. Trabajos más influyentes de acuerdo al número de citas ... 39
18. Índice de Price ... 41
19. Red de colaboración ... 43
Conclusiones generales ... 47
Recomendaciones ... 48
Referencias bibliográficas ... 50 Anexos
vii
Índice de tablas
Tabla 1. Relación de indicadores bibliométricos de mayor uso en la actualidad ... 9
Tabla 2. Niveles de agregación ... 26
Tabla 3. Esquema de indicadores y variables de producción empleados ... 27
Tabla 4. Esquema de indicadores y variables de visibilidad de impacto para la muestra evaluada ... 28
Tabla 5. Esquema de indicadores de colaboración. ... 29
Tabla 6. Volúmenes de la revista Ingeniería y Universidad analizados ... 30
Tabla 7. Participación de autores ... 31
Tabla 8. Distribución de artículos por autores ... 34
Tabla 9. Distribución por firmas ... 34
Tabla 10. Instituciones de mayor productividad ... 36
Tabla 11. Distribución de contribuciones y citas por año ... 37
Tabla 12. Productividad de descriptores ... 38
Tabla 13. Trabajos más influyentes según número de citas ... 39
Tabla 14. Visibilidad de la producción científica por tipología documental ... 41
Tabla 15. Índice de Price ... 42
viii
Índice de figuras
Figura 1. Representación comparativa de disciplinas ... 4
Figura 2. Mapa general de producción científica de un dominio ... 13
Figura 3. Ejemplo de tabla índice H... 15
Figura 4. SJR Ingeniería y Universidad ... 17
Figura 5. Método de búsqueda en Scopus. ... 24
Figura 6. Resultados de búsqueda en Scopus... 25
Figura 7. Distribución de artículos según número de firmas ... 35
Figura 8. Fluctuación de la productividad por año ... 37
Figura 9. Red de colaboración de las principales instituciones que participan en el flujo de información de Ingenieríay Universidad ... 456
ix Resumen
Los Estudios Métricos de la Información como la bibliometría, informetría y cienciometría posibilitan por medio de indicadores y metodologías la evaluación de variables y dominios científicos para entender sus estructuras y tendencias. La presente investigación se realiza con el objetivo de evaluar, a partir de distintos tipos de indicadores bibliométricos, la producción científica de la revista Ingeniería y Universidad editada por la Pontificia Universidad Javeriana, publicada en la base de datos Scopus. Inicialmente, se abordan temas teóricos de los estudios métricos en general, desde el origen y la formación, hasta los principales conceptos asociados a las métricas; se tratan, también, tópicos relacionados con los principales indicadores que permiten la evaluación y obtención de tendencias.
Posteriormente, se identifican los conjuntos de indicadores para la realización del estudio y para finalizar, se describen los resultados de la producción científica visible en Scopus de la revista Ingeniería y Universidad durante el periodo 2009-2013, lapso que posibilita conocer el estado actual de dicha producción y presentar a partir de las conclusiones algunas recomendaciones para mejorar su visibilidad e impacto.
Descriptores: bibliometría, estudio bibliométrico, indicadores bibliométricos, evaluación de revistas científicas.
x Abstract
The Metric Studies of Information, such as Bibliometrics, Informetrics, and Scientometrics, use different indicators and methodologies that enable the assessment of scientific variables and domains, in order to understand their structures and tendencies. This research project pursuits the objective of assessing, by means of different types of bibliometric indicators, the scientific production of the journal Ingeniería y Universidad edited by Pontificia Universidad Javeriana, published in the Scopus database. Initially, this dissertation deals with general theoretical issues of Metric Studies, from its origins and development to the main concepts related to metrics; this first part also discusses topics related to the main indicators that enable the assessment and gathering of tendencies. The middle section of the project is focused on the identification of the groups of indicators that make this study possible. Finally, the last part of the dissertation describes the results of the scientific production of the Ingeniería y Universidad journal that was registered on the Scopus database during the 2009-2013 term. This period of time facilitates a precise view of the current state of this type of production, while also enabling the presentation of some recommendations to improve its visibility and impact, an aspect that is discussed in the conclusions of this research project.
Descriptors:Bibliometrics, bibliometric study, bibliometric indicators, assessment of scientific journals.
xi Introducción
El dinamismo actual de la ciencia ha generado avances, actualización y aumento en la producción científica de acuerdo a lo planteado por Agudelo, Bretón López y Buela Casal (2003), lo cual posibilita la creación de nuevas publicaciones con diversos fines como fuentes de visibilidad para la investigación. Por su parte, los estudios métricos, encargados de la evaluación y obtención de indicadores en diferentes niveles de agregación y fuentes de datos, permiten establecer el estado de la producción científica publicada, verificable en revistas de dicha índole y en bases bibliográficas e índices de citación. Las disciplinas métricas como la cienciometría, la informetría y la bibliometría posibilitan la evaluación y análisis de la actividad científica al brindar herramientas con las cuales es factible representar la producción publicada según los elementos que la componen a través de métodos estadísticos, esto con el fin de obtener resultados cuantificables (Jiménez, 2000).
Los estudios bibliométricos inician con la recolección de una información particular que se analiza, organiza e implementa para obtener finalmente ciertos indicadores. Estos últimos establecen e identifican diversas variables que, según Gorbea Portal (1994), serán parte de un examen cualitativo y cuantitativo, generando datos estadísticos para el desarrollo de métodos y conclusiones.
Debido al crecimiento exponencial de las publicaciones científicas, se han adelantado vertiginosamente los estudios métricos y han surgido numerosos indicadores para la valoración de tales publicaciones (Filippo y Fernández, 2002). A partir de ellos se establecen criterios, metodologías de evaluación que favorezcan el mejoramiento continuo y propendan a la alta calidad de instituciones o grupos de investigación. Por lo tanto, es necesario tener en cuenta algunas pautas de diagnóstico a la hora de seleccionar las ediciones más relevantes o pertinentes de cada área científica, definiendo un estándar de calidad que sirva de guía para el mantenimiento y continuidad de las publicaciones (Buela Casal, 2003).
xii
En la actualidad, importantes instituciones se dedican a la evaluación de la investigación, enfocándose en el diseño de instrumentos para el análisis –considerando tanto los niveles micro como los macro–, los cuales determinan pautas mínimas para la medición de calidad de publicaciones científicas. En el caso de Latinoamérica se cuenta con sistemas como Latindex, Scielo o Redalyc, entre otros, que disponen de un comité de selección1. Específicamente para el caso colombiano se encuentra Publindex, desde donde se establece un listado de requisitos para la evaluación de revistas en todas las áreas de investigación, planteando preceptos como la calidad editorial, la normalización, la visibilidad nacional y la visibilidad internacional.
Por otro lado, el modelo de criterios de calidad para la evaluación de publicaciones científicas, diseñado en 1964 por el grupo de trabajo de la UNESCO para la selección de revistas, se ha tomado como referencia en los diferentes contextos nacionales en los que se trabaja con variables como la presentación de las publicaciones, la duración, la regularidad, la periodicidad, la aceptación de colaboradores de otras instituciones, el nivel de especialización y la inclusión en índices, entre otras. Estos criterios dan la posibilidad de complementar la información revelada por los indicadores, los cuales forman parte fundamental de los análisis bibliométricos (López Cózar, Ruiz Pérez y Jiménez Contreras, 2006).
La aplicación de estudios métricos en la evaluación de revistas científicas posibilita la valoración de calidad y funcionamiento de las mismas. Actualmente se hace uso de los resultados obtenidos para tener una mayor seguridad en la toma de decisiones sobre el enfoque y metas de la publicación, además de ser consultados por los autores para conocer cuál es la revista más pertinente en la cual publicar los resultados de sus investigaciones. En las instituciones académicas estos estudios se utilizan para evaluar la actividad, visibilidad e impacto de sus ediciones, profesores y centros de investigación en general.
Sin embargo, las revistas científicas representan una realidad compleja, por tanto la
1Para mayor información puede ingresar a Publindex, donde se encuentra el listado de servicios de indexación con comité de selección y por áreas temáticas.
xiii
evaluación de su calidad dependerá de numerosas variables. Se trata de objetos multidimensionales, al igual que todos los elementos que conforman la ciencia (Moravcsik, 1989), que no pueden medirse en términos absolutos. Por ello, es necesario utilizar una amplia variedad de factores e integrarlos con el fin de lograr una evaluación racional. Estos factores suelen llamarse indicadores, y apuntan a la calidad.
Para la realización de la presente investigación la fuente de datos primaria seleccionada fue la revista Ingeniería y Universidad2, publicación periódica semestral editada por la Facultad de Ingeniería de la Pontificia Universidad Javeriana que tiene como objetivo servir a la divulgación y difusión del trabajo científico e investigativo de la ingeniería. Con base en los resultados del análisis bibliométrico efectuado a la revista, se podrá establecer el estado actual de sus niveles de producción científica y así realizar propuestas de mejoramiento que posibiliten la generación de mayor calidad científica y editorial, además del incremento de su visibilidad e impacto, específicamente, en la base de datos Scopus.
2 Pontificia Universidad Javeriana. Revista Ingeniería y Universidad. Recuperado de:
ingenieriayuniversidad.javeriana.edu.co
xiv Antecedentes
Los análisis bibliométricos tienen diferentes aplicaciones dependiendo del contexto, los objetivos a medir, el uso o la interpretación de sus resultados. En circunstancias generales, son utilizados en variados niveles para evaluar la gestión, la calidad y el avance según sea el caso de estudio. Por ejemplo, en las bibliotecas, se emplean en distintos campos, principalmente con el propósito de mejorar su colección, la gestión y mantenerla actualizada. En el caso particular de las revistas estos análisis se elaboran para poder entender y evidenciar el funcionamiento de la publicación o realizar un estudio comparativo frente a otras publicaciones de la misma área. De esta forma, se busca definir cómo aumentar la visibilidad y mejorar su calidad científica, editorial y de contenidos.
Para la validación y desarrollo de la actividad científica, la comunicación representa un proceso fundamental, ya que a través de ella esta actividad adquiere un valor de actualización al interior de la comunidad especializada en cada área del conocimiento. Por ello, la edición de textos científicos constituye una práctica esencial en la transmisión de los saberes y la construcción de nuevos paradigmas, sin omitir que es una forma de reconocimiento al trabajo del investigador (Bordons y Zulueta, 1999). Así, las revistas científicas se erigen como el principal medio de difusión de las investigaciones, cumpliendo funciones básicas como la selección de contenidos científicos y de información relevantes en cada área de investigación (Baiget y Torres Salinas, 2013). En términos de Le Coadic (citado por Ezeiza Pohl, 2003), se concibe la publicación científica como «el conjunto de artículos ordenados, formalizados y publicados según el dictamen de calidad ejercido por sus pares científicos». Según la anterior definición, se realiza una selección a través de la evaluación por pares (peer review), donde se valoran los artículos en su grado de novedad, calidad y la contribución de contenidos provechosos para la comunidad (Campanario, 2003).
Giordanino (2004) menciona que el sistema de revisión se inicia cuando aparecen las primeras revistas científicas en el siglo XVII; además, afirma que «en el escenario de la comunicación científica, hay cuatro grandes actores: los autores de los trabajos, los editores
xv
de las revistas, los evaluadores que revisan los trabajos y los lectores de los trabajos publicados». El examen de calidad, tarea de los terceros actores, es un paso que se cumple antes de comenzar con la aplicación de las técnicas bibliométricas, las cuales permiten seleccionar algunos datos específicos como los de autor/es, título general de la publicación periódica, año de publicación, tipo de documento, idioma o lengua, resumen (caso de que la bibliografía sea analítica) y palabras clave o descriptores (Carrizo Sainero, 2000), elementos que además de ser fundamentales, permiten la ejecución del análisis y la cuantificación de dicha información para el desarrollo de indicadores.
En el contexto de las revistas son numerosas las aplicaciones que se han dado a partir de los estudios bibliométricos. Reyes Barragán et al. (2000) por ejemplo, evalúan una serie de revistas seleccionadas en el tema de psicología de acuerdo a criterios de calidad y actualidad de las ediciones; Arencibia Jorge (2007) hace uso de Scopus como fuente de datos con la intención de valorar las tendencias según la visibilidad de la publicación en esta base de datos, y Camps (2007) obtiene indicadores para el desarrollo de políticas nuevas y para el análisis del estado actual de los artículos después de cierto periodo de haber estado publicadas.
Por su parte, Rivera Garzón (2008) seleccionó para su investigación la revista Universitas Psychologica –la cual ha mostrado gran repercusión y rápido impacto en su área–, enfocándose principalmente en el análisis de la caracterización del tipo de autores y su influencia en el progreso de la publicación. López López et al. (2001), en cambio, examinan aspectos como la productividad, la colaboración y las materias presentadas en la revista Información y Documentación para alimentar su estudio de calidad de la publicación. Espino Hernández et al. (2013), por otro lado, toman para su trabajo sobre la revista Panorama Cuba y Salud variables como la actualidad de la bibliografía según el índice de Price, la tipología de documentos encontrados en la bibliografía y el índice de colaboración, entre otras variables, para luego realizar una comparación frente a otras publicaciones en el campo, obteniendo resultados equilibrados y brindando recomendaciones para mantener y aumentar progresivamente el nivel de los indicadores.
xvi
Todas las propuestas señaladas abren caminos en la exploración de las múltiples perspectivas de la bibliometría, cuyo surgimiento obedece a la importancia que ha adquirido progresivamente como disciplina, pues, como señala Rousseau (2001), «en los últimos años se experimentó un gran desarrollo que ha tenido como resultado que los estudios bibliométricos sean cada vez más requeridos y se hayan generalizado».
Situación problémica
Ausencia de un estudio bibliométrico que evalúe la actividad científica de la revista Ingeniería y Universidad en donde los resultados e indicadores sirvan de apoyo a la gestión editorial.
Problema de investigación
¿Cómo se ha desarrollado desde la perspectiva bibliométrica la producción científica de la revista Ingeniería y Universidad durante el periodo 2009-2013?
Objetivo general
Evaluar la producción científica de la revista Ingeniería y Universidad entre los años 2009-2013 a partir de indicadores bibliométricos.
Objetivos específicos
Determinar los indicadores bibliométricos más pertinentes para el desarrollo del estudio de la revista Ingeniería y Universidad.
Caracterizar el comportamiento de la producción científica de la publicación en la fuente de datos seleccionada para el estudio.
Presentar los resultados para uso y evaluación de la revista Ingeniería y Universidad.
xvii
Justificación de la investigación
La importancia de la valoración de la calidad científica ha generado tendencias en la evaluación de procesos en busca de mejoras continuas, esto con el fin de alcanzar un nivel aceptable que posibilite el ingreso a una corriente principal (fuentes de citación)3. Aspectos como la revisión por pares, los índices de citación o los indicadores de visibilidad de impacto, entre otros, constituyen elementos a tener en cuenta para que las revistas alcancen altos niveles de calidad científica y sean reconocidas en la comunidad nacional e internacional.
La publicación científica es necesaria para la divulgación de las investigaciones dado que su permanencia y visibilidad son una muestra de su calidad. Este desarrollo da lugar a un indicador de relevancia frente a las publicaciones pares (Filippo y Fernández, 2002;
Piccone y Jousset, 2011). En el caso específico de la revista Ingeniería y Universidad se puede observar que ésta mantiene un nivel de visibilidad y relevancia importante en el contexto académico frente a otras ediciones de la misma disciplina a partir de su inclusión en Scopus en el año 2011. Con esto se considera pertinente la realización del presente estudio bibliométrico a fin de evaluar sus fortalezas y debilidades en el campo de la investigación. Además, a partir de la aplicación de las herramientas e indicadores bibliométricos, se procurará presentar resultados de análisis que permitan establecer criterios para la mejora y toma de decisiones por parte del equipo editorial.
Por tanto, el principal aporte que pretende el estudio bibliométrico a la revista Ingeniería y Universidad es obtener insumos desde los indicadores bibliométricos que posibiliten conocer las tendencias de producción, citación y colaboración de la publicación, y a partir de ello explicar el análisis para la creación de planes de trabajo orientados a escalar mejores posiciones en la corriente principal.
3 Se toma como fuente de análisis y evaluación solo la corriente principal como una forma de comunicación de la ciencia, sin olvidar que existen otras como Libros, Congresos, Seminarios etc...
1
Capítulo 1: Marco teórico de la investigación 1. Panorama bibliométrico
El estudio estadístico de la ciencia lleva al surgimiento de las especialidades métricas, las cuales permiten medir cuantitativamente la producción científica en las áreas del conocimiento. Gorbea Portal (1994) plantea que la evaluación de la producción científica comenzó a tener mayor fuerza en la década de los 60 con la utilización de diversos estudios métricos sobre producción de información científica, gracias a importantes autores como A.
Prichard y G. Witig, quienes en 1981 publicaron un índice bibliográfico de trabajos sobre el tema. Más adelante, sumaron sus aportes los trabajos realizados por A. Khurshid y H. Sahai (1981), quienes se enfocan en el desarrollo de las diferentes leyes métricas.
La producción científica conduce a la divulgación del conocimiento técnico y científico derivado de las investigaciones, sobre las cuales se realiza una revisión de calidad mediante estudios estadísticos de la bibliografía citada, lo que brinda una idea del estado actual de la ciencia (Sancho Lozano, 2002).
Pero para entender esta dinámica y las anteriores afirmaciones es necesario recurrir a la historia de la bibliometría. Hulme, en el año 1923, realizó un recuento de las publicaciones a través del método denominado bibliografía estadística, el cual permitió la recolección de datos para el análisis. Ya para el año de 1934 Paul Otlet acuña el término de bibliometría para denominar una técnica que facultaba la cuantificación y estructura para la presentación de resultados, procedimiento que presentó en su obra El tratado de documentación (Carrizo Sainero, 2000). No obstante, el trabajo que históricamente ha demostrado mayor relevancia ha sido el de Hulme, quien además de exponer la relación entre la actividad científica y el potencial económico de las naciones, definió con la bibliografía estadística el desarrollo de las actividades intelectuales de la humanidad desde la perspectiva del crecimiento (Jiménez Contreras, 2000).
El desarrollo de la bibliometría como disciplina se fundamenta en las leyes bibliométricas, las cuales se inician con el trabajo adelantado por Alfred Lotka en 1926. La ley que lleva su
2
nombre estudia la dispersión de los trabajos científicos entre los autores para determinar la cuota de contribución de cada uno al progreso de la ciencia en un flujo de información.
Posteriormente, Samuel Bradford publica un artículo definiendo la ley de la dispersión de las publicaciones científicas, y más tarde surge la Ley de Price, en 1963, acerca del crecimiento exponencial de la información científica (Urbano, 2000; Price, 1973; Baños, 2012).
Conceptualmente, como disciplina instrumental de la bibliotecología, la bibliometría se encarga de estudiar los aspectos cuantitativos de la producción, diseminación y uso de la información, la evaluación, gestión bibliotecaria y la identificación de publicaciones núcleo. Su implementación está dirigida al análisis del curso de una determinada disciplina científica, así como de su comportamiento. Gregorio (2004) plantea que además de aportar información cuantitativa para el análisis integral en el campo de la bibliotecología, comprende la aplicación de estudios estadísticos para diagnosticar las características del uso y creación de los documentos, el examen cuantitativo de la producción de publicaciones, el empleo de métodos matemáticos en el análisis del uso de los libros y otros soportes que integran los sistemas de bibliotecas, así como la inspección cuantitativa de las unidades físicas editadas y de las unidades bibliográficas. Según Spinak (1996), se ocupa también del estudio de la organización de los sectores científicos y tecnológicos a partir de las fuentes bibliográficas y patentes para identificar los actores, sus relaciones y tendencias.
El término bibliometría (Urbano, 2000) se vincula con los orígenes bibliotecarios y documentales de la disciplina, mientras que la cienciometría se asocia con la historia y la medición de la ciencia. La informetría, en cambio, se encuentra más vinculada a la materia esencial de estudio de la información que a los objetos o campos de ampliación sobre los que actúa; indaga en los aspectos cuantitativos de la información y permite, sobre la base de elementos cualitativos y cuantitativos, el análisis de los fenómenos y procesos relacionados con la información. Entre sus aplicaciones más importantes en el presente se cuentan el examen de los flujos de información y de la obsolescencia de la información, y el cubrimiento temático de bases de datos (Gregorio, 2004).
3 Como disciplina científica, su función es:
El estudio de los aspectos cuantitativos de la ciencia como disciplina.
El análisis y la evaluación de las políticas científicas.
La comunicación científica.
La cienciometría, por su lado, mediante indicadores numéricos, se encarga de la evaluación de la producción científica de publicaciones, patentes etc. a partir de métodos matemáticos para el estudio de la ciencia y de la actividad científica en general, además de medir el nivel de progreso y el aporte de la ciencia a las diferentes esferas de la sociedad. Su implementación se realiza en diferentes áreas, así, dentro de sus materias de interés, se encuentran temas como «la recuperación de información, la administración de bibliotecas, la historia de las ciencias y las políticas científicas de una institución o gobierno» (Araújo Ruiz, y Arencibia Jorge, 2002). También mide los avances científicos alcanzados por los países, y como disciplina instrumental de la Ciencia de la Información se dedica a:
El análisis del lenguaje y la frecuencia del uso de las palabras y frases.
El hallazgo de las características de la productividad de los autores.
La evaluación de fuentes de información.
El examen de la obsolescencia de la información.
El incremento de la literatura por temas.
La distribución idiomática según la disciplina o el área estudiada.
4
Figura 1. Representación comparativa de disciplinas
Fuente: Thelwall, 2005.
Como se observa en la Figura 1, existe entre los términos anteriormente expuestos una estrecha relación en la que la informetría representa el campo más amplio, que contiene a la cienciometría y a la bibliometría, así como a otras métricas. La bibliometría es considerada por muchos autores como un subcampo de la informetría, aun así el término más conocido es bibliometría. Con cierta regularidad se plantea que la cienciometría se encarga de la aplicación de técnicas bibliométricas a la actividad científica y que la evaluación de patentes se denomina bibliometría de patentes (Urbano, 2000; Arencibia Jorge y Moya Anegón, 2008; Díaz Pérez, 2009, Araujo Ruiz y Arencibia Jorge, 2002).
Actualmente, para agrupar los términos métricos de mayor uso (bibliometria, cienciometria, informetría y webmetría), se sugiere el uso del término iMetrics. Estudios recientes evalúan el tema en busca de la cantidad de artículos que bajo el término señalado hacen referencia a las disciplinas métricas (Milojević, S. y Leydesdorff L., 2013).
5 2. Producción científica
La ciencia ha definido un ciclo de investigación dividido en diferentes etapas donde se presentan y aportan ideas para su desarrollo en busca de un objetivo final, que no es otro que la divulgación de los resultados por medio de las revistas científicas. De acuerdo con Gorbea Portal (2005), esto genera aportes a la evolución de la ciencia, por lo cual a principios del siglo XVII se creó la publicación científica, que favoreció la actualización de los temas de interés y la visualización de la actividad científica.
En las instituciones académicas y científicas se ha propuesto como parte de las actividades de mejoramiento de la investigación la comunicación y presentación al público especializado de los resultados de investigaciones, así como de las tendencias y las necesidades. Esto ha permitido que la colaboración académica y científica aumente, pues en años anteriores el concepto de colaboración no era del todo reconocido (Ardanuy, 2012).
De allí que «la razón de existir de las revistas científicas [sea]: la discusión abierta y libre de los hallazgos experimentales, las hipótesis y las teorías» (López Cózar, Ruiz Pérez y Jiménez Contreras, 2006), dando paso así a la creación de redes de investigación para el desarrollo de las ciencias.
En este contexto las revistas científicas representan el medio especializado donde pueden publicarse los avances de cada rama, además de actuar como generadoras de nuevo conocimiento. Como consecuencia de ello alcanzan difusión y un nicho propio en ciertos círculos sociales, coadyuvando además a la conservación y al archivo del conocimiento. De acuerdo con Romero Torres, Acosta Moreno y Tejada Gómez (2013), las revistas de países latinoamericanos no son ajenas a la indexación en bases de datos, pero cuentan con bajos niveles de visibilidad debido a la limitada financiación de investigación científica, restringiendo en muchos casos la colaboración de autores extranjeros que representarían justamente una mejor visibilidad (Gómez et al., 1999; Urdín Camino et al., 2001; Urbano, 2001).
6
El aumento de la producción científica publicada en las revistas de mayor impacto en los últimos tiempos ha propiciado el desarrollo de diferentes recursos de consulta. Entre los más importantes se encuentran las diferentes bases de datos, que facilitan la indexación de las publicaciones y se han convertido en una herramienta fundamental, y cuyo uso se extiende a la aplicación de los estudios bibliométricos, realizados a partir de indicadores que logran identificar no sólo la cantidad de investigaciones, sino además la corriente principal y las redes de colaboración que se generan en pro del avance de las diferentes disciplinas.
Albornoz (2012) comenta lo siguiente:
se duplicó la cantidad de artículos publicados en revistas científicas registradas en el Science Citation Index (SCI) por autores de países de América Latina y el Caribe…
la relación entre las publicaciones y el número de investigadores se ha mantenido relativamente constante... La participación de autores… en las diferentes bases de datos ha aumentado considerablemente en los últimos 10 años, en las bases CAB (Ciencias Agrícolas), SCI (Multidisciplinaria), BIOSIS (Biología), PASCAL (Multidisciplinaria), MEDLINE (Salud), Compendex (Ingeniería) e Inspec (Física).
El crecimiento es algo menor en el Chemical Abstracts (CA).
Esta dinámica corrobora que la publicación científica ha logrado mayor auge, invitando a que los investigadores participen con la edición de sus investigaciones, compartan conocimiento científico y adquieran una notoriedad en su área.
3. Indicadores
Se pueden definir como indicadores los factores que se utilizan en el proceso evaluativo de cualquier actividad. Estos se aplican en correlación dependiendo de la etapa de investigación que se quiera evaluar, ya que «la ciencia, (…) al ser multidimensional, no podrá valorarse con un indicador simple» (Sancho Lozano, 2002). De acuerdo con González, S. (2011), los indicadores bibliométricos son:
Parámetros que se usan para determinar: el crecimiento de cualquier campo de la ciencia,
7
según la variación cronológica del número de trabajos publicados; la productividad de los autores o instituciones, medida por el número de sus trabajos y la colaboración entre los científicos o instituciones, número de autores por trabajo o centros de investigación que colaboran.
Para Gómez Caridad y Bordons (1997), por otro lado, «constituyen datos estadísticos deducidos de las publicaciones científicas. Su uso se apoya en el importante papel que desempeñan las publicaciones en la difusión de los nuevos conocimientos, papel asumido a todos los niveles del proceso científico». Los indicadores representan una medición agregada y compleja que posibilita describir o valorar un fenómeno, su naturaleza, estado, evolución y tendencias, evaluación necesaria en cualquier área del conocimiento. Desde la bibliometría se aplican y obtienen diferentes indicadores para medir el nivel de productividad de los dominios científicos (Martínez y Albornoz, 1998).
Dado que no se pueden fijar «valores de referencia» para los indicadores, la evaluación de la ciencia por medio de estos sólo se puede basar en comparaciones internacionales. Lo que expresan los indicadores son la proporción de publicaciones que cada país aporta a la
«corriente principal de la ciencia» (Sancho Lozano, 2002). En sentido general, y de acuerdo a lo planteado por Urbano (2000), mediante los diferentes estudios bibliométricos se puede valorar la producción científica de una disciplina efectuando labores como:
Determinar las publicaciones con más prestigio e impacto en las que se obtiene un mayor reconocimiento al publicar.
Evaluar la productividad, el rendimiento y el ranking que ocupan autores, instituciones académicas y de investigación, o incluso países, en términos de producción científica.
Conocer el índice de especialización científica de una nación: qué áreas del conocimiento son más destacadas en el ámbito nacional y cuál es su peso relativo en el panorama internacional.
Trazar las vinculaciones de determinados grupos, países y tendencias dentro de una misma disciplina, y determinar la composición de redes de investigación.
8
Establecer el grado de colaboración con el que se trabaja en una determinada área del conocimiento, tanto en el ámbito nacional como internacional.
Establecer el grado de colaboración entre las instituciones de investigación básica (universidades y centros de investigación) y la industria.
Evaluar la transferencia tecnológica entre el sistema de investigación y el sistema productivo.
La implementación de sistemas de evaluación de la actividad científica es una necesidad actual dado que representa una de las formas de optimización de los recursos destinados a la investigación. Estos métodos constituyen una herramienta útil que ha permitido complementar el juicio de los expertos a la hora de dar resultados sobre sus investigaciones (Bardons y Zulueta, 1999).
Filippo y Fernández (2002) consideran que los indicadores bibliométricos son la representación de datos estadísticos extraídos «de las distintas características de las publicaciones científicas, en base (sic) al importante papel que desempeñan estas en la difusión y transmisión del conocimiento generado en la investigación», y se definen según Ardanuy (2012) como:
Datos numéricos calculados a partir de las características bibliográficas observadas en los documentos publicados en el mundo científico y académico, o los que utilizan los usuarios de tales documentos, y que permiten el análisis de rasgos diversos de la actividad científica, vinculados tanto a la producción como al consumo de información.
Estos adquieren validez siempre y cuando se apliquen de forma correcta –teniendo en cuenta sus ventajas y debilidades como medida indirecta de la actividad de la comunidad científica–, pues no tienen la misma influencia en el estudio de la producción científica macro frente a un análisis micro, y en cada uno variarán los indicadores a utilizar.Los diferentes indicadores bibliométricos:
Pueden dividirse en dos grandes grupos: los que miden la calidad y el impacto de las
9
publicaciones científicas (indicadores de publicación), y aquellos que miden la cantidad y el impacto de las vinculaciones o relaciones entre las publicaciones científicas (indicadores de citación). Pueden medirse como índices simples, relativos o ponderados, según los criterios que se tomen en cuenta. De igual forma pueden medirse atendiendo a series cronológicas o como medidas de distribución, y los estudios pueden realizarse a nivel micro (individuos, grupos de investigación o revistas individuales), meso (instituciones o grupos temáticos) o macro (países, regiones o toda una disciplina). (Arencibia Jorge y Moya Anegón, 2008)
Estos indicadores también permiten expresar cuantitativamente las características bibliográficas del conjunto de documentos estudiado, así como las relaciones existentes entre estas características, lo que proporciona informaciones objetivas y cuantitativas sobre los resultados del proceso, tales como investigador, volumen, evolución, visibilidad y estructura, pero no informan sobre los progresos del conocimiento (Ardanuy, 20012;
Filippo y Fernández, 2002).
Tabla 1. Relación de indicadores bibliométricos de mayor uso en la actualidad INDICADORES DE ACTIVIDAD O PRODUCCIÓN CIENTÍFICA INDICADORES DE PRODUCCIÓN
Número de publicaciones.
Índice de especialización temática.
Distribución por idioma y tipos documentales.
Índice de transitoriedad.
Idiomas de publicación.
Nivel básico/aplicado.
INDICADORES DE VISIBILIDAD DE IMPACTO Indicadores basados en el Impact Factor.
Factor de impacto esperado.
Factor de impacto ponderado.
Factor de impacto relativo.
10 Potencial investigador.
Distribución por cuartiles.
Posición decílica.
Posición normalizada.
Impacto potencial.
SJR de las revistas.
SNIP de las revistas.
o INDICADORES BASADOS EN EL NÚMERO DE CITAS Número de citas.
Promedio de citas.
Porcentaje de documentos citados y no citados.
Tasa de citación relativa.
Índice de atracción.
Tasa de autocitación.
Trabajos altamente citados.
INDICADORES DE COLABORACIÓN Índice de coautoría.
Índice de coautoría institucional.
Patrones de colaboración (local, regional, nacional, internacional).
Medidas de similaridad.
INDICADORES RELACIONALES INDICADORES DE PRIMERA GENERACIÓN
Redes de coautoría (científicos, países, departamentos universitarios, etc.).
Redes de cocitación (científicos, revistas, categorías, JCR, etc.) INDICADORES DE SEGUNDA GENERACIÓN
Método de las palabras asociadas.
Mapas cognitivos de temas e impacto.
Mapas combinados temas-autores.
Fuente: Callón y Courtial, 1995 (citado por Estévez, 2012)
11
En los últimos años los estudios bibliométricos han sido cada vez más requeridos y utilizados no sólo para la cuantificación de la producción, sino para otros fines como identificar grupos y áreas de excelencia, asociaciones temáticas, interdisciplinaridad, disciplinas emergentes, redes de colaboración temática y prioridades; también se emplea en la elaboración de rankings y la gestión y evaluación de la actividad científica de dominios.
En el caso particular del presente estudio, dedicado a explorar la producción científica de la revista Ingeniería y Universidad contenida en la base de datos Scopus, se abordarán temas relacionados con la bibliometría como soporte para determinar la calidad de dicha publicación mediante las citas, redes de colaboración y otros indicadores bibliométricos, esto con el fin de evaluar la publicación de manera integral.
3.1 Indicadores de producción.
Los indicadores de producción se obtienen a partir del simple recuento de las publicaciones científicas. Es posible medir la productividad científica tomando como eje la cantidad de publicaciones (Ardanuy, 2012) presentadas «por un autor, un departamento o un grupo de investigación, una institución, una disciplina o un país durante un período de tiempo determinado» (Sancho Lozano, 2002). Se define como el logaritmo decimal del número de publicaciones.
La construcción del inventario del número de trabajos origina una base de datos para establecer objetivamente la actividad de una publicación, sin embargo, a menudo esto se maneja subjetivamente con la finalidad de presentar los resultados más favorables, sin tener en cuenta los sesgos de este tipo de conteos. En la actualidad, las bases de datos son empleadas como la principal referencia para realizar esta clase de estudios, aun considerando las limitaciones lingüísticas y geográficas, además de los cuestionamientos que se han realizado a la evaluación de calidad de las publicaciones que están incluidas en dichas bases de datos (Cañedo Andalia, 1999; García, et al., 2002; Maltrás, 2003).
12
Los recuentos son una operación aditiva que supone que todas las publicaciones son equiparablemente portadoras de lo valioso para la ciencia, afirma Maltrás (2003), sugiriendo así que, independientemente de los debates en donde se hace referencia a la pérdida del valor científico, para la bibliometría, en tanto ciencia de análisis estadístico, la valía científica puede considerarse fuera de su alcance. En realidad, lo que busca esta disciplina es conocer el funcionamiento del sistema y de la producción científica, que alude a la suma de unidades elementales de novedad y relevancia, es decir, apunta a la cantidad y no a la calidad, debido a que esta última estaría definiría por la contribución científica. De esta manera, algunos de los casos en donde se puede hacer uso de los mencionados indicadores son: la productividad de los autores, el número de autores por artículo, el número de artículos publicados por un autor, años, tipología documental, entre otras aplicaciones.
3.2 Indicadores de colaboración.
Ardanuy (2012) considera que los indicadores de colaboración miden las conexiones existentes entre contribuyentes científicos en una publicación conjunta. Por un lado, se encuentra cooperación que no se traduce en una edición firmada por varios autores, y de otro, se presentan interacciones muy periféricas o indirectas entre especialistas que, sin embargo, dan como resultado publicaciones firmadas por varios autores (Pacheco Mendoza y Milanés Guisado, 2009).
Estos indicadores de colaboración científica se construyen utilizando datos de instituciones y autores, permitiendo, según Sancho Lozano (2001), la emergencia de modelos de cooperación internacional entre países, regiones o sectores que estimulan la coparticipación de distintos organismos, las relaciones entre instituciones educativas e industria, etc.
En bibliometría, de acuerdo con Pacheco Mendoza y Milanés Guisado (2009), la colaboración se puede estudiar mediante tres parámetros:
La distribución de artículos por números de firmas.
13
El índice de colaboración o índice firmas/trabajo.
La estructura social de la colaboración (detección de grupos de colaboración o colegios invisibles4.
El estudio de la colaboración científica se ejecuta, según González Albo et al. (2012), «a través del número de autores por documento, número de centros por documento y tasas de colaboración, que cuantifican la colaboración entre autores y centros, y describen su orientación nacional y/o internacional». Además, en la evaluación de la investigación y la actividad científica, especialmente en dominios científicos en niveles de agregación meso y macro, la evaluación de la cooperación permite conocer el porcentaje de generación de investigación que tiene el dominio, visto en términos de participación y exclusividad.
Figura 2. Mapa general de producción científica de un dominio
Fuente: Elaboración propia.
4 Los colegios invisibles son aquellos grupos que trabajan en un campo científico similar, en donde se comunican por un medio informal diferente a las publicaciones científicas. (López Piñero y Terrada, 1992).
PRODUCCIÓN CIENTÍFICA DE UN DOMINIO
Producción
exclusiva Producción
participada Todos los
autores de un mismo
dominio
Contribuyentes principales Colaboradores Todos los
autores de diferente
dominio
14 3.3 Indicadores de impacto.
Los indicadores de impacto están relacionados con la calidad de las publicaciones, sin embargo es necesario aclarar que esta tendencia constituye un indicador simple de medida cualitativa dado que los artículos antes de ser editados son sometidos a una revisión por pares, lo cual permite establecer el nivel de calidad antes de su edición. Sancho Lozano (2002) y Maltrás (2003) consideran que estos indicadores generalmente se toman a partir de dos criterios: el primero es para medir un nivel cualitativo de la actividad de la publicación, el segundo para establecer un grado de visibilidad. Ambos son desarrollados a partir del volumen de citas generadas por dicha publicación, teniendo en cuenta que el proceso de citación depende de la calidad de los artículos editados, lo cual puede favorecer o debilitar un documento científico.
Con el fin de conocer algunos de los tipos de indicadores relacionados con el impacto, a continuación se realiza una descripción y funcionamiento de ellos.
3.3.1 Índice H.
El índice H fue planteado por Jorge Hirsch (Arencibia Jorge y Carvajal Espino, 2008), profesor de física de la Universidad de California. Al principio este indicador fue cuestionado debido a su sencillez, sin embargo ha sido aceptado y aplicado en las bases de datos actuales más relevantes, como el caso de ISI Web of Science (WoS) y Scopus. La idea principal es inspeccionar cada uno de los trabajos de un autor y ordenarlos en dos listas: la primera ascendente, donde se agregan los rangos, los cuales son dados por el orden de artículos según su número de citas; y la segunda descendente, donde se asignan las citas.
Cuando ambos valores coinciden esto es tomado como el número del índice H (Rossueau, 2006; Egghe, 2011). Su formulación teórica puede leerse en la idea de que el número de orden más alto donde la cantidad de citas sea mayor o igual (no menor) al mismo, será considerado el índice Hirsch o índice H de ese autor (ver Figura 3). En la práctica el índice H de un autor puede encontrarse cuando éste tiene al menos h trabajos con h citas recibidas.
15
Figura 3. Ejemplo de tabla índice H
Fuente: Figuras adaptadas de SCImago, 2006 3.3.2 Factor de impacto.
El factor de impacto fue creado por Eugene Garfield (1999) y ha sido presentado en la actualidad como un indicador de la base de datos ISI WoS. A lo largo de su historia ha recibido reconocimiento debido a que el planteamiento revolucionó el mundo científico y
RANGO CITAS
1 6
2 5
3 4
4 4
5 2
6 1
7 1
8 1
9 0
10 0
16
cambió el modo de ver de la comunicación de la ciencia; sin embargo, también ha sido objeto de críticas en el presente. De acuerdo con Aleixandre Benavent (2009), por ejemplo, se proponen «estrategias para aumentarlo por métodos extra-científicos, como disminuir el número de artículos “citables”, (…) fomentar la autocitación y aumentar el número de revisiones» a las revistas científicas.
Para su implementación se toma el número total de artículos publicados en un año, por ejemplo el año 2012, con esta muestra se revisan los dos años anteriores, según el ejemplo serían los años 2010 y 2011, para así poder obtener el número de citas que han suscitado en este periodo de tiempo. Sin embargo, se debe tener presente que además de los artículos de calidad, la cantidad de artículos genera una influencia importante en el resultado final (Sancho Lozano, 2002; Maltrás, 2003; Aleixandre et al. 2007). El factor de impacto se calcula dividiendo el número de citas recibidas en el año actual sobre el total de artículos publicados en los dos años anteriores.
Ejemplo: FI 2012 = citas en el año actual (2012) que reciben los artículos editados en los dos años precedentes (2010-2011) sobre la cantidad de artículos publicados 2010-2011 (JCR, 2012).
3.3.3 Índice de inmediatez.
El indicador que integra el índice de inmediatez mide el número de artículos publicados en un año y citados ese mismo año. Expresa el número medio de citas recibidas por los documentos de una revista en el mismo año de su edición. Se pueden analizar en WoS, Scopus, Google Scholar. Desde el punto de vista de Maltrás (2003), este indicador sirve para evaluar la inmediatez de la citas en una publicación científica.
3.3.4 SCImagoJournal Rank (SJR).
El SCImago Journal Rank (SJR) es un indicador creado por el grupo SCImago y su análisis es dado a partir de la base de datos Scopus. Considera el número de citas reunidas durante los tres últimos años. Torres Salinas y Jiménez Contreras (2010) indican que además de
17
considerar los documentos publicados en un año por cada revista, se pueden consultar algunas opciones adicionales para la comparación, arrojando los resultados en tablas que permiten el análisis de la situación de una publicación, de un país o de una disciplina científica.
Figura 4. SJR Ingeniería y Universidad
Fuente: tomado de SCImago (www.scimagojr.com)
18 4. Limitaciones de los indicadores
Como se ha expuesto en la descripción de algunos de los indicadores bibliométricos, estos constituyen una valiosa herramienta para el estudio de la actividad científica, pero hasta ahora no existe un indicador completo que permita la evaluación integral de dominios. Por ello, se han originado diferentes niveles de medición que deben ser utilizados de forma adecuada dependiendo de su contexto o nivel de aplicación, por lo cual es necesario conocer cómo se presentan (Torres Salinas y Jiménez Contreras, 2010; Camps, 2008;
González de Dios et al. 1997).
4.1 Algunas de las limitaciones de los indicadores.
4.1.1 Carácter cuantitativo.
Los indicadores poseen una limitación perceptible: sólo son un complemento a la revisión de pares académicos y únicamente brindan datos estadísticos, pero no acerca de la calidad.
Según Maltrás (2003), los análisis estadísticos son mayormente conteos conforme un indicador, por lo cual muchas veces no se considera si el objeto de análisis es bueno o malo en calidad o resultados, sino los datos numéricos que este arroja.
4.1.2 Diferencias entre áreas.
Es recomendable realizar los estudios bibliométricos para una misma área del conocimiento debido a la complejidad de practicar una comparación entre áreas, pues el nivel de desarrollo de cada una será distinto. Por ejemplo, la producción en ciencias sociales no es tan frecuente como la producción en ciencias básicas, por lo cual no puede haber una medición comparativa.
Ejemplo de la afirmación anterior es el Factor de Impacto de ISI deberían evitarse las comparaciones de los factores de impacto de revistas que pertenecen a áreas diferentes, ya que las dinámicas de generación del conocimiento, las pautas de cita y los mecanismos de publicación son, en general, diferentes. Además, de notar que el ISI, a veces, utiliza
19
criterios poco claros para incluir una revista en un grupo o en otro (Garfield, 2006)
Las fuentes de soporte más usadas son las bases de datos o índices de citación. El factor de impacto sólo es generado para las revistas incluidas en ISI; sin embargo, surgen numerosas críticas para generar la validez del FI e incluso se cuestiona la evaluación de la citación porque es una modalidad de cultura naciente y en desarrollo entre los científicos. El FI tiene mayor acogida como indicador de visibilidad que de calidad (Sancho Lozano, 2002;
Maltrás, 2003; Aleixandre et al. 2007).
4.1.3 Limitaciones de bases de datos.
Las bases de datos presentan limitaciones que pueden ocasionar alguna irregularidad en el resultado final de la presentación de los indicadores. Como se sabe, los principales obstáculos son los sesgos de carácter lingüístico, geográfico y de cobertura. Maltrás (2003) señala que uno de los inconvenientes principales es la normalización de los nombres. En el caso de instituciones y revistas el problema está relacionado con las abreviaturas con las que se conocen, en el caso de los autores el conflicto nace por el modo de normalización establecido en cada publicación, motivo por el que un mismo autor puede contarse como diferente dos o más veces si su nombre no se ha normalizado, lo que impide el correcto funcionamiento de la recuperación de información.
La normalización de nombres es una problemática que ha generado conflicto en las bases de datos, ya que al recuperar la información puede existir pérdida de datos relacionados debido a su forma de entrada o de indexación. En la mayoría de casos se advierte el uso de siglas, nombres abreviados, errores al ingresar datos o información incompleta, por esto se genera la pérdida de información Para ello ISI Web of Science ha creado el campo de búsqueda “Organization-enhanced" (organización normalizada) para unificar las distintas variaciones de los nombres de las instituciones
20 5. Conclusiones parciales del capítulo
Como se ha visto en este capítulo a partir de las nociones histórico-teóricas de la bibliometría y el desarrollo de sus indicadores, se trata de una disciplina relativamente reciente que ha evolucionado, continúa formándose y adaptándose a las necesidades de la ciencia. Esto ha permitido que se dé un cambio en el mundo de la comunicación científica, ya que los investigadores y las instituciones están en el constante ejercicio del estudio de sus especialidades particulares, lo que impulsa a su vez la formación de redes de colaboración, comparación de resultados, debates científicos y evaluación de resultados.
La obtención de indicadores ha propiciado el desarrollo de nuevas normas y comportamientos en la academia científica, cambios en la justificación de la inversión, adaptación a la publicación constante, promoción de nuevas redes de participación, todo debido al proceso de evolución de la bibliometría como herramienta de evaluación y gestión.
En conclusión, la bibliometría es una disciplina que aún necesita ajustes para poder eliminar aquellas limitaciones en los indicadores propuestos, generando así un fortalecimiento en la veracidad de sus análisis, su precisión y métodos.
21
Capítulo 2: Marco metodológico de la investigación 6. Caracterización de las fuentes
Revista Ingeniería y Universidad
La revista Ingeniería y Universidad (IyU) fue fundada en el año 1997 y, según su
«Presentación», se encarga de publicar investigaciones científicas «de alta calidad y novedad en las diferentes áreas de la ingeniería. Son de especial interés contribuciones con relevancia local y para la región en temáticas como robótica y automatización industrial, bio-Ingeniería (sic), ingeniería ambiental e ingeniería de transporte y logística». De igual forma, acepta «especialmente artículos originales; aunque también se consideran artículos de revisión y de reflexión». La revista es publicada en lengua española, pero le otorga preponderancia a estudios en lengua inglesa que garanticen un público en la escena mundial.
Desde el punto de vista del valor científico, todos los artículos o contribuciones están sujetos a una revisión por parte de pares académicos, que ejercerán el rol de evaluadores, designados por la dirección de la publicación. Estos evaluadores acreditados emitirán su concepto acerca de la calidad de los artículos, en cuanto al contenido científico, de acuerdo con las pautas establecidas por el comité editorial de la revista.
El resultado de la valoración será dado en términos de publicable, pendiente con observaciones o rechazado (ver normas Ingeniería y Universidad. Recuperado de: http://puj- portal.javeriana.edu.co/portal/page/portal/Facultad%20de%20Ingenieria/pub_ryu/Instrucciones%20a%20los
%20autores).
Además, para efectos de circulación y visibilización, la publicación se encuentra indexada en Scopus desde el año 2011, así como en los siguientes servicios de indexación y resumen listados en su «Presentación»:
Chemical Abstracts.
DOAJ (Directory of Open Access Journals).
22 Dialnet (Universidad de La Rioja).
Ebsco (JournalInformationServices).
Fuente Académica.
Google Scholar.
Publindex (Índice Nacional de Publicaciones Periódicas Científicas y Tecnológicas).
Latindex (Sistema Regional de Información en Línea para Revistas Científicas de América Latina, el Caribe, España y Portugal).
Periódica (Índice de Revistas Latinoamericanas en Ciencias).
Redalyc (Red de Revistas Científicas de América Latina y el Caribe).
SciELO Colombia (Scientific Electronic Library Online).
7. Descripción del método bibliométrico empleado
7.1 Fuentes de información empleadas.
7.1.1 Fuentes primarias.
Revista Ingeniería y Universidad: publicación científica de la Facultad de Ingeniería de la Pontificia Universidad Javeriana. Se utilizó la información publicada por la revista visible en la base de datos Scopus en el periodo evaluado.
Scopus: base de datos bibliográfica que indexa artículos de más de 18.000 revistas de diferentes editores internacionales y desde la cual se puede recuperar información referente a diversas áreas del conocimiento como las ciencias básicas, la tecnología, la medicina o las ciencias sociales, entre otras. Permite diferentes formas de búsqueda y recuperación de la información de los artículos indexados, tales como autor, título, área del conocimiento, resumen, etc. Para el acceso a la base es necesario ser suscriptor (Scopus, 2005; Codina, 2005). Se aprovechó para el rastreo de la información contenida sobre la revista objeto de este estudio.
23 7.1.2 Fuentes secundarias.
EndNote: gestor de referencias bibliográficas que permite manejar listados de referencias para el análisis de datos estadísticos relativos a la bibliografía almacenada, los cuales se recopilan como ficheros o librerías que se pueden obtener de manera manual (ingresando los datos). Usado para la sistematización de la información pertinente.
7.2 Recuperación de información.
Criterios de inclusión que se tuvieron en cuenta para definir la muestra:
Fuente de información: el estudio se enmarcó en la producción científica de la revista Ingeniería y Universidad a partir de la información visible en la base de datos Scopus de Elsevier.
Periodo de tiempo: se enmarcó en la producción científica comprendida en el periodo 2009-2013 (primer semestre).
7.3 Estrategia de búsqueda.
La búsqueda y recuperación de información se llevó a cabo el 20 de septiembre de 2013 en la versión en línea de las bases de datos Scopus(http://www.scopus.com/home.url?). Se eligió como periodo de tiempo el transcurrido entre el año 2009 hasta el primer semestre del año 2013, realizando una recuperación de todos los registros concernientes a la revista Ingeniería y Universidad pertenecientes a ese lapso. Una vez descargada la integridad de la información pertinente, incluidas las contribuciones, se procedió a la conformación de la base de datos específica para la elaboración del procesamiento. La ecuación de búsqueda utilizada fue Ingeniería y Universidad en el campo Publication name en el periodo objeto de análisis.
24
Figura 5. Método de búsqueda en Scopus.
Fuente: Scopus(http://www.scopus.com/home.url?)
La totalidad de los registros recuperados correspondientes a la producción científica de la revista analizada fue de 101, a partir de los cuales se consiguió la caracterización de dicha producción científica y la obtención de indicadores de producción, citación y colaboración.
25
Figura 6. Resultados de búsqueda en Scopus
Fuente: Scopus (http://www.scopus.com/home.url) 7.4 Procesamiento y representación de la información.
Los registros recuperados se exportaron a EndNote 13.0, gestor bibliográfico que permitió la normalización de la información recuperada. Además, el procesamiento de todos los datos contenidos en la base de datos y el cálculo de los indicadores seleccionados para el estudio se realizaron mediante el programa Microsoft Excel, del paquete de programas Microsoft Office 2007, donde fueron creadas las tablas y figuras correspondientes.
26 7.5 Niveles de agregación.
Los niveles de agregación en un flujo de información se refieren al tipo de información que se va a medir desde la cantidad para obtener indicadores. Chinchilla (2005) y Arencibia Jorge (2007) plantean tres dimensiones que son las más utilizadas en la evaluación bibliométrica: el nivel macro, el medio (o meso) y el micro. El nivel micro comprende la medición de la producción de manera individual; el nivel medio o meso se refiere a la medición de instituciones y grupos de investigación, y el nivel macro abarca la producción de un país o una región geográfica.
Tabla 2. Niveles de agregación
NIVELES OBJETO DE ESTUDIO
Micro Individuos, grupos, revistas individuales.
Meso Instituciones, grupos temáticos.
Macro Países, regiones o toda una disciplina.
Fuente: Tomado de Chinchilla, 2005; Arencibia Jorge, 2007
La investigación actual se enmarca en el nivel micro, lo que se traduce en el estudio individual de la revista Ingeniería y Universidad como dominio científico.
7.6 Esquema de indicadores y variables empleados.
Los indicadores diseñados para la siguiente investigación proponen caracterizar la producción científica de la revista Ingeniería y Universidad en el periodo analizado.
27 7.6.1 Indicadores de producción o visibilidad.
Tabla 3. Esquema de indicadores y variables de producción empleados
Indicadores Variables que
intervienen
No. Publicaciones
Autores Años
Descriptores Tipo de documento
No. Autores de transición
No. Autores especializados
Autores
No. Publicaciones
No. Autores élite Autores
Fuente: Rivero Hernández, 2013.
28 7.6.2 Indicadores de impacto.
Tabla 4. Esquema de indicadores y variables de visibilidad de impacto para la muestra evaluada
Indicadores Variables
No. Documentos citados
Citas Año
Número de trabajos Tipo de documento Idioma de la publicación
Autores destacados
Citas Autores
No. Publicaciones
Trabajos destacados
Año Título
No. Citas recibidas
Promedio de citas por documentos
Citas
No. Publicaciones Tipo de documento Idioma de la publicación Patrones de colaboración Fuente: Rivero Hernández, 2013.
29 7.6.3 Indicadores de colaboración.
Tabla 5. Esquema de indicadores de colaboración
Indicadores Variables
Índice de coautoría
No. Documentos Autores
Instituciones
Fuente: Rivero Hernández, 2013.
8. Conclusiones parciales del capítulo
Los indicadores bibliométricos permiten el análisis cualitativo y cuantitativo de las características bibliográficas del objeto de estudio dado que son datos que se obtienen de los documentos publicados o citados por los investigadores para analizar la actividad científica. Así, los indicadores aplicados en el presente estudio identifican las tendencias de producción y contribución de los diferentes autores que participan en la revista, los niveles de colaboración y productividad por parte de las diferentes instituciones y los trabajos más citados o destacados de la publicación.
Mediante la obtención de resultados en los análisis realizados a partir de los indicadores aplicados se podrán evaluar estrategias de optimización de la producción científica de la revista.
