BibliometrÃa y Academia
Por Luis-Javier MartÃnez20 November 2008
¿La inocencia perdida?
La bibliometrÃa (cienciometrÃa, etc.) recuerda un poco a la psicometrÃa. Aunque trabaja con objetos más materiales, mide en definitiva el resultado de comportamientos psicosociales. Los conceptos bibliométricos más penetrantes (indicadores de calidad) tienen dificultades de fundamentación similares a las del campo psicológico (¿miden, predicen, correlacionan con propiedades…?) (Harnad, 2008).
Y desde hace poco, aplicada intensamente a la evaluación de la investigación, la bibliometrÃa asume funciones, en la industrialización del conocimiento, que van más allá de la neutralidad valorativa de la simple ciencia de la ciencia: ¿ha perdido la inocencia y se la puede acusar, como tanto se ha reprochado a la psicometrÃa, y a la psicologÃa en general, de haberse pasado al Lado Oscuro?
Dicho en truculento: ¿sirve la bibliometrÃa a la explotación productivista del neoproletariado intelectual de la economÃa del conocimiento? O, al revés: ¿será la bibliometrÃa capaz de abolir la sacrosanta “libertad de cátedra†heredada en las “torres de marfil†académicas desde las bulas papales del Medievo?
Auge y moda de la bibliometrÃa
Hace años que lo bibliométrico experimenta un notable auge. Los gobiernos, gestores de la investigación, tribunales académicos, agencias de financiación y estadÃsticos usan los estudios métricos de la ciencia de manera intensa y creciente. Las carreras de los investigadores, en todos los paÃses, están repletas de factores de impacto, citas y otros datos. Se han multiplicado las fuentes de información que ofrecen indicadores para la evaluación de las publicaciones.
El Ãndice h se popularizó en dos años y ha sido seguido por numerosas propuestas similares. Se habla de rankingmanÃa, impactolatrÃa, etc. Los especialistas en humanidades, nunca antes pendientes de estas cosas, han empezado a preocuparse.
Más allá de la fuerza replicadora de las tecnologÃas e industrias de la información, este movimiento no lo han desencadenado los “bibliómetras†o los expertos en ciencia de la ciencia, sino los responsables de las polÃticas cientÃficas y universitarias, y también los propios cientÃficos, que en bastantes casos lo han interiorizado de forma entusiasta. El Ãndice h lo inventó un fÃsico, no un sociólogo de la ciencia, ni un documentalista, y muchas de las extralimitaciones en el uso e interpretación de los factores de impacto no son imputables a Thomson Reuters.
Contra los abusos bibliométricos
Pero el hecho de que la evaluación métrica de la investigación esté cada vez más presente en la práctica de la ciencia y en la carrera profesional de los cientÃficos despierta crÃticas y reacciones adversas. Se han intensificado sobre todo los ataques a las bases de datos de Thomson Reuters, pero se denuncian también otros aspectos del análisis cuantitativo de los resultados de la investigación. Y me parece que estas crÃticas reflejan tensiones y conflictos latentes, resultado de cambios sociales.
Varias asociaciones de matemáticos han impugnado la excesiva dependencia de las citas (Adler, 2008). La revista Science ha alzado su voz contra el mal uso de los factores de impacto (Simons, 2008). En el ámbito de la biomedicina se ha escrito que el abuso de estos factores distorsiona la edición y la investigación cientÃficas y hasta perjudica las necesidades clÃnicas (Brown, 2007), lo que ha tenido una interesante y demoledora réplica sobre la situación española (Delgado, 2007). “Ethics in Science and Environmental Politics†ha dedicado un número entero (2008) a cuestionar los Ãndices bibliométricos. Y hay bastante correspondencia dirigida por los investigadores a las revistas cientÃficas al respecto, como la carta a Nature de Herman Tse (2008).
PolÃtica cientÃfica requiere bibliometrÃa
La validación crÃtica del nuevo conocimiento por las comunidades cientÃficas se realiza mediante “peer reviewâ€. Pero la ciencia también se evalúa desde el punto de vista práctico de la gestión de la investigación: como en toda actividad compleja que se organiza y consume recursos, la evaluación de resultados es el correlato de la planificación y forma parte de las polÃticas cientÃficas.
El enorme desarrollo de la I+D en las últimas décadas, su priorización en las agendas públicas, no serÃa gestionable sólo mediante evaluación por pares (asà lo subraya SCImago, 2006, 304), como cuando la ciencia era cosa de aislados y reducidos entornos exclusivamente académicos, que investigaban a su aire, consumiendo pocos recursos, sin exigÃrseles nada. Vivimos tiempos en que exhibir (al menos) un respeto escrupuloso a la “accountability†lleva a los gestores públicos a una evaluación intensa y cuantitativa, ejecutada con técnicas eficientes, ágiles y baratas.
A los cientÃficos que se lamentan de tanta rendición de cuentas y tanta bibliometrÃa, los gestores pueden responderles que nunca la sociedad invirtió tanto en investigación e investigadores. Y que la ciencia se ha desarrollado en libertad hasta que ha quedado responsablemente sujeta a los ingentes recursos que se dedican a ella. Sujeta por la bibliometrÃa y por la transferencia comercial de conocimiento rentable.
Y los cambios sociales
Por tanto, el auge de la evaluación métrica de la ciencia no es sólo un requisito tecnocrático. Se enmarca en el proceso de industrialización de la investigación que caracteriza a nuestra sociedad: la ciencia post-académica (Ziman, 2003) o la revolución tecnocientÃfica (EcheverrÃa, 2003).
La actividad investigadora ha perdido el carácter libre y artesanal que aún conservaba hasta cierto punto en el sector público para convertirse en una empresa colectiva que produce en serie. Deviene un “sistema sociotécnico†(Cronin, 2005), impulsado y dirigido, entre otras cosas, por la optimización de los registros bibliométricos de sus agentes, y en el que el cientÃfico deja de ser un “académico†para convertirse en un empleado “sui generisâ€, salvo que se emancipe como emprendedor con los frutos de su investigación.
Propuesta la ciencia como principal fuerza productiva, la sociedad (o las “sociedadesâ€) demandan resultados de las grandes factorÃas de conocimiento en las que tantos recursos invierten. Medir esos resultados es una exigencia natural. La bibliometrÃa, articulada de una u otra forma, más o menos eficaz, sirve como herramienta de análisis del rendimiento en el nuevo modo de producción. Sobre todo cuando, como en la ciencia básica, no se pueden computar retornos directos, económicos e industriales.
Algunas contradicciones
EcheverrÃa (2003) explica que la tecnociencia encierra abundantes conflictos de valores. Hoy sabemos que los sistemas sociales pueden albergar contradicciones sin que se dispare como por resorte ningún salto dialéctico hacia un estadio superior. Sin embargo, la situación origina tensiones, inquietud. Creo que las crÃticas contra el supuesto abuso de la bibliometrÃa expresan contradicciones y conflictos del desarrollo tecnocientÃfico, resistencias desde valores más “académicosâ€. Porque las tensiones pueden ser muchas…
La presión productivista conduce a la publicación “salami†y otros artificios, y no es ajena al aumento del plagio, el fraude, etc. La especulación con el “capital simbólico†(Cronin, 2005) que representan las citas, más allá del natural y libre pago de las deudas intelectuales, ¿podrÃa conducir a la desnaturalización inflacionaria de su valor?
La rendición pública de cuentas, con la ayuda del análisis métrico de la investigación, puede que acabe con las “torres de marfilâ€. Pero la ciencia ha reclamado siempre libertad intelectual, ejercicio sin restricciones de la creatividad, como su mejor fermento. ¿Es a largo plazo productivo para la ciencia tanto escrutinio? ¿El afán de resultados rápidos o impacto seguro será fecundo para el desarrollo cientÃfico? ¿Cuánta independencia intelectual conviene? ¿Los fines del investigador son buscar la verdad o aumentar el registro de citas?
Por mencionar el lado aplicado, ¿las “necesidades sociales†de la investigación son “intereses humanos†o “nichos del mercadoâ€? ¿Y quién decide al respecto: la conciencia del cientÃfico, el espÃritu del “cluster†regional, el plan estratégico de la empresa patrocinadora…?
Toda esta situación concuerda poco con las normas ideales de la ciencia codificadas por R. K. Merton (1985) (comunitarismo, universalismo, desinterés, originalidad y escepticismo organizado); más bien justo con las contrarias (Ziman, 2003, 84). ¿Mantendrá la ciencia su crédito como “cosmovisión independiente del mercadoâ€? ¿O perderá, con su industrialización, a pesar del esfuerzo propagandÃstico que realiza, parte de su liderazgo moral?
La inocencia perdida
La expansión de la evaluación métrica de la investigación es inseparable de la “taylorización†del trabajo cientÃfico propia de la tecnociencia y conlleva la fosilización de las ideas de “Academiaâ€, “libertad de cátedraâ€, etc. El análisis métrico intensivo de la ciencia es parte de la infraestructura necesaria para la gestión y explotación del conocimiento a escala industrial, como fuerza productiva central, fuente de riqueza y de poder.
Como toda tarea técnica, la métrica de la investigación puede hacerse mejor o peor; pero auditar la productividad, optimizar los rendimientos y gestionar la complejidad no es fácil cuando se trata de procesos cognitivos naturales. En cualquier caso, todos estos cambios generan resistencias, contradicciones y conflictos en los valores, fines y normas de la ciencia.
Y en cualquier caso también, la bibliometrÃa (cienciometrÃa, etc.) ha perdido la inocencia, por supuesto, tanto como la psicometrÃa, la microbiologÃa, la computación o la fÃsica de altas energÃas.
Referencias
Adler, R.; Ewing, J.; Taylor, P. (2008). Citation statistics: A report from the International Mathematical Union (IMU) in cooperation with the International Council of Industrial and Applied Mathematics (ICIAM) and the Institute of Mathematical Statistics (IMS). Consultado en: 16-11-08:
http://www.mathunion.org/fileadmin/IMU/Report/CitationStatistics.pdf
Brown, H. (2007). “How impact factors changed medical publishing—and scienceâ€. En: BMJ, v. 334, pp. 561-564.
Cronin, B. (2005). The Hand of Science: academic Writings and its Rewards. Lanham, Md: Scarecrow Press.
Delgado López-Cózar, E.; Ruiz-Pérez, R.; Jiménez, E. (2007). Impact of the impact factor in Spain. Rapid responses to: Brown, H. 2007. “How impact factors changed medical publishing—and scienceâ€. En: BMJ, v. 334, pp. 561-564.
EcheverrÃa, J. (2003). La revolución tecnocientÃfica. Madrid: Fondo de Cultura Económica.
Grupo Scimago. (2006). El Ãndice h de Hirsch: aportaciones a un debate. En: El profesional de la información, v. 15, n. 4, pp. 304–306.
Harnad, S. (2008). Validating research performance metrics against peer rankings. En: Ethics in Science and Environmental Politics, v. 8, n. 1, pp. 103-107.
Merton, R. K. (1985). La sociologÃa de la ciencia: investigaciones teóricas y empÃricas. 2ª ed. Madrid: Alianza.
Simmons, K. (2008). The Misused Impact Factor [Editorial]. En: Science, v. 322, n. 5899, p. 165.
Tse, H. (2008). A possible way out of the impact factor game [Correspondence]. En: Nature, v. 454, n. 7207, pp. 938-939.
The use and misuse of bibliometric indices in evaluating research perfomance: ESEP Theme Section. 2008. En: Ethics in Science and Environmental Politics, v. 8, n. 1.
Ziman, J. M. (2003). ¿Qué es la ciencia? Madrid: Cambridge University Press.
Luis-Javier MartÃnez
Miembro del Grupo ThinkEPI
documenéame -
















