Las citas bibliográficas en la evaluación de la actividad científica: significado, consecuencias y un marco conceptual alternativo

Abstract

Background and aims: In the evaluation of scientific activity, metrics are applied based on the number of bibliographic citations received by articles from a journal or from a scientist. The objectives of this work are to establish the meaning of a bibliographic citation, discuss the consequences of the use of metrics based on bibliographic citations as a synonym of scientific quality including its effect in the field of Botany, and propose an alternative conceptual framework for evaluating the scientific activity. Results: A series of factors prevent the statistical support of these metrics: size of the potential audience, the variation in publication and citation practices between the different disciplines, the long-tail statistical distribution of citations, the journal and language of publication, and that an observed statistical regularity will tend to collapse once pressure is put on it when used for control purposes. The consequences of using citations to evaluate are: inhibition of creativity, reification of the scientific achievement, assess the product based on the number of its consumers, the journals with the highest number of citations become a power factor, devaluation of topics with local or regional value, science becomes an industrialized activity, metrics replace judgment, and generating bibliographic citations is part of the objectives of a scientific article. Conclusions: The origin and validity of these metrics are the consequence of a market society, that is, a way of life organized on the basis of market reasoning and morality and where human and social relations are mere consumer relations.

Introducción y objetivos: En la evaluación de la actividad científica se aplican métricas basadas en el número de citas bibliográficas que reciben los artículos de una revista o los de un científico. Los objetivos de este trabajo son establecer el significado de una cita bibliográfica, discutir las consecuencias del uso de las métricas basadas en las citas bibliográficas como sinónimo de calidad científica incluyendo su efecto en el campo de la Botánica, y proponer un marco conceptual alternativo de evaluación de la actividad científica. Resultados: Ciertos factores impiden sustentar estadísticamente a esas métricas: tamaño de la potencial audiencia, variación de las prácticas de publicación y de citación entre las distintas disciplinas, la distribución estadística “long tail” de las citas, revista e idioma de la publicación y que una regularidad estadística observada tenderá a colapsar una vez que se ponga presión sobre ella al utilizarla con propósitos de control. Las consecuencias del uso de las citas para evaluar son: inhibición de la creatividad, cosificación del logro científico, valorar al producto en función del número de consumidores, las revistas con mayor número de citas se transforman en un factor de poder, desvalorización de los temas con valor local o regional, la ciencia se industrializa, las métricas reemplazan al juicio, y generar citas bibliográficas forma parte de los objetivos de un artículo científico. Conclusiones: El origen y la vigencia de estas métricas son la consecuencia de una sociedad de mercado es decir, una forma de vida organizada sobre la base del razonamiento y la moral del mercado y donde las relaciones humanas y sociales son meras relaciones de consumo.