Indicadores bibliométricos: origen, aplicación, contradicción y nuevas propuestas.

Resumen

La proliferación y globalización de la literatura científica ha puesto en evidencia la ya reconocida necesidad de crear un sistema de evaluación, calificación y comparación de la calidad para este tipo de producción. En respuesta a esta necesidad han surgido metodologías que incluyen escalas e indicadores para la cuantificación, evaluación y calificación del efecto que una publicación tiene sobre el entorno científico. Aunque, actualmente estos sistemas se consideran útiles como herramientas para la medición de la calidad de los procesos de investigación, son motivo de gran controversia dada su cuestionada independencia, representatividad y validez. El objetivo del presente artículo es explorar los orígenes, ventajas, desventajas del actual sistema, así como las nuevas tendencias para el desarrollo de indicadores bibliométricos y su aplicación como herramienta para la evaluación de la actividad científica.

Palabras clave: Indicadores bibliométricos, Factor de impacto, Evaluación, Calidad, Publicaciones científicas, Validez.

Introducción

El análisis de la publicación de artículos científicos, eslabón fundamental dentro del proceso de investigación, se ha convertido en la unidad estándar que permite calificar la calidad del proceso generador de conocimiento y su impacto en el entorno científico. Los indicadores bibliométricos, utilizados durante décadas para evaluar la cantidad y procedencia de las revistas científicas (1) han adquirido recientemente un papel importante dentro del proceso de evaluación de la calidad de la actividad científica, y tanto los autores de los textos como los grupos académicos que respaldan sus reportes, son calificados permanentemente según el impacto de las revistas en las que publican (2) y el efecto de éstos sobre la generación de nuevo conocimiento. (3) Por otra parte, la creciente necesidad de las distintas entidades gubernamentales y la industria para seleccionar con criterios uniformes y objetivos las fuentes de información a las cuales recurrir en el momento de tomar decisiones técnicas, administrativas y políticas, (4) ha generado un mayor interés en la utilización de estos indicadores, dado que ofrecen un método estándar para la evaluación de la calidad y eficacia de la contribución al desarrollo científico de los textos producidos por los grupos de investigación. (5) Sin embargo, y a pesar de su aceptación global, la aplicación de estos indicadores ha mostrado con el tiempo, tener algunas debilidades y falencias al ser aplicados como herramienta de evaluación de la producción científica, lo que está promoviendo una corriente de críticos y contradictores que promulgan nuevos métodos y alternativas para evaluar estos parámetros, partiendo de la observación de que los indicadores bibliométricos fueron diseñados para evaluar el impacto de las revistas y no la calidad del los procesos científicos.

De la utilización cada vez más frecuente de métodos matemáticos y estadísticos para el análisis de la producción científica y de su calidad, nace la bibliometría definida por Garfield en 1978 como "la cuantificación de la información bibliográfica susceptible de ser analizada", originando dos grandes ramas de desarrollo, la bibliometría fundamental y la aplicada, esta última comprende la parte inferencial y descriptiva de la cienciometría. (6, 7)

El objetivo de esta monografía es recorrer los orígenes y la evolución de algunos de los marcadores bibliométricos actualmente utilizados, exponer sus principales ventajas y desventajas, y dar a conocer algunas nuevas propuestas para la evaluación de la producción científica.

Orígenes y evolución de los indicadores bibliométricos

El primer trabajo publicado que emplea métodos bibliométricos se titula "Historie des sciences et des sçavants depuis deux siencle" de Alphonse de Condolle en 1885 de Alphonse de Condolle en 1885, quien aplica algunos métodos matemáticos en un estudio para comparar las publicaciones científicas de 14 países europeos y los Estados Unidos de América. (6) Treinta años después, en 1917 Cole y Eales aplican estos métodos bibliométricos a los trabajos de anatomía, analizando las publicaciones realizadas entre 1543 y 1860. Luego en 1923 Hulme analiza autores y revistas referenciadas en el "Inrenational Catalogue of Scientific literatura" del período 1901-1913, evaluando publicaciones científicas, condiciones económicas y crecimiento de la civilización moderna. (6) No fue sino hasta 1927 que Gross y Gross propusieron por primera vez que el recuento de las citaciones realizadas de un artículo podía ser utilizado como indicador para evaluar y comparar la calidad de la producción científica, dando de esta manera inicio al empleo de marcadores bibliométricos en el proceso de evaluación de la producción científica. (8) Posteriormente, en 1955 Eugene Garfield (1) propuso que este método de evaluación podría ser utilizado como un indicador del impacto que una producción científica tenía sobre el medio. Pero esta tendencia sólo adquirió su nombre actual en 1963, cuando la publicación del Science Citation Index (SCI) utilizó por primera vez el término "factor de impacto" (FI) para referirse a este mismo indicador al ser aplicado a la evaluación de la calidad de las revistas científicas. En esta comunicación se propuso por primera vez que las revistas cuyas publicaciones generaran mayor número de citaciones tenían un mayor impacto en la comunidad científica, siendo esta una de las primeras iniciativas para postular un indicador global para la evaluación de las revistas científicas. Luego de la aparición de este primer informe se continuaron haciendo publicaciones esporádicas de estos indicadores reconocidas como el Journal Citation Index (JCI), en las que se presentaban y comparaban los FI de las diferentes revistas. Entre 1975 y 1989, se siguieron emitiendo estos informes como boletines anuales de la SCI, entre 1990 y 1994 se encontraron disponibles para el público en forma de microfilmes, y en el año 1995, se dispuso de esta información en formato digital CD-ROM. (9)

Actualmente se puede acceder por Internet al Journal Citation Reports (JCR), que es una plataforma de información producida por el Institute for Scientific Information (ISI), compañía de Thomson Scientific localizada en Toronto -Canadá- …