Evaluación de revistas electrónicas
Por Isidro F. Aguillo18 May 2005
Cómo citar este artículo:
Aguillo, Isidro F. “Evaluación de revistas electrónicas”. Anuario ThinkEPI, 2007, v. 1, pp. 152-153.
En el curso de un estudio sobre revistas electrónicas españolas hemos revisado diferentes propuestas realizadas para evaluarlas tanto a nivel formal como de contenidos. La verdad es que esto es necesario porque existe un gran desconocimiento por parte de los editores de las posibilidades del medio digital y la mayoría de los títulos presentan deficiencias importantes.
Sin embargo, tampoco las propuestas de indicadores que hemos visto son especialmente completas en su descripción de las características reales de las revistas electrónicas. He de decir de antemano que personalmente considero el modelo tradicional de revista muerto a medio plazo y que no debería haber obstaculo para que fuera el artículo la unidad de referencia. Eso puede ayudaros a comprender mi sorpresa al comprobar que la frecuencia de publicación es uno de los criterios que Latindex ha transferido desde su propuesta para edición en papel a la de edición electrónica.
Independientemente de que alguien me rebata este punto con argumentos, este mensaje solicita vuestra ayuda para añadir criterios más específicos del entorno Web y que deberían valorarse en la descripción y evaluación de revistas. Yo os propongo algunos ejemplos que creo interesantes, relacionados con el consumo, visibilidad e impacto de los contenidos:
Estadísticas de consumo
Desde un punto de vista formal, las estadísticas de visitas deben estar disponibles en la sede web de manera abierta y detallada. En cuanto a contenidos, el número y distribución de los artículos leídos (volcados) identificados individualmente y con indicación temporal, es el mínimo exigible. Otros datos de visita pueden ser útiles.
Visibilidad
En la Web los enlaces hipertextuales cumplen una misión muy importante. Hasta la fecha sólo se tienen en cuenta las citas bibliográficas, pero contar el número y origen de los inlinks ayudará a establecer la visibilidad de la revista. Eventualmente también los outlinks pueden ser útiles. El editor debería incorporar un listado periódico de los enlaces recibidos de terceros distribuidos por dominios. Esto es trivial en motores de búsqueda como Yahoo y MSN Search.
Otras maneras de medir la visibilidad se pueden realizar de forma más gráfica. El comando related de Google nos informa del “vecindario” de la revista, las páginas visitadas de Alexa indican patrones de los usuarios y los términos de Kartoo ilustran relaciones de contenidos.
Impacto
La disponibilidad del Web of Knowledge hace que sea posible contabilizar el número de citas que han recibido las revistas no fuente. El editor debería publicar los totales por año y la distribución por artículo. La generación de un valor de factor de impacto comparable al del JCR parece
fuera de lugar individualmente, aunque se podría hacer en estudios comparativos. Existe ya una posible alternativa en internet, que es la que propone el Google Scholar, cuya búsqueda avanzada permite buscar por revista y da número de citas.
Esta es una lista provisional, pero me gustaría conocer vuestra opinión, sugerencias de otros indicadores o planteamientos radicalmente diferentes. Obviamente, doy por supuestas medidas de accesibilidad, usabilidad y relacionadas con metadatos y otros estándares (OpenURL).
documenéame -
Otras aportaciones
INDICADORES EXPUESTOS EN UN ARTÍCULO DE LA REVISTA BiD Y FACTOR DE IMPACTO EUROPEO
Por Reme Melero
Estoy de acuerdo contigo Isidro en que en un contexto digital la periodicidad no tiene el sentido que en papel, y de hecho ya hay muchas revistas que ponen la fecha en que se cuelga en internet y numeran los artículos, de forma que al final de año constituyen un volumen aquellos publicados en ese año natural.
En cuanto a indicadores, supongo que conoces los trabajos de Josep Manuel Rodríguez (p. e. “Parámetros e indicadores de calidad en la evaluación de una revista electrónica. El caso de BiD: textos universitaris de biblioteconomia i documentació”, de aceso libre en http://www.ub.es/biblio/bid/06gairi2.htm en el que se contemplan algunos pocos puntos más de los ya señalados por ti.
En cuanto a impacto, en el año 2002 se publicó una monografía…:
Euro-Factor (EF)TM
The European Journal Quality Factor. The new European “scientific currencyâ€
A new journal quality factor analyzing the best European biomedical journals 2002 EF-List
Editor-in-Chief Roland Hofbauer, Vienna
Editors
Michael Frass, Vienna
Bernhard Gmeiner, Vienna
Alan D. Kaye, Texas
Quality Analysis of European Scientific Journals in the new EUROFACTOR-DATABASE
VICER Publishing
ISBN 3-902104-99-6
…en que se propone un nuevo índice de impacto llamado Eurofactor en el que según sus autores se tiene en cuenta el mercado científico europeo (filosofía ISI, pero corregida):
Un saludo y perdón por la extensión de mi mensaje
DOAJ: UN REFERENTE DE EVALUACIÓN DE REVISTAS OA
Por Cristóbal Urbano
Creo que al hablar de la evaluación de “revistas electrónicas” se hace necesario segmentar algunos instrumentos de análisis en función de si se trata de revistas nacidas desde la filosofia Open acess (OA), o si son revistas que combinan distribución comercial con embargo temporal de la distribución libre en Internet.
Para las revistas OA un referente para su evaluación a escala internacional es el directorio DOAJ (Directory of open access journals), que como criterios de inclusión tiene los siguientes:
HAY QUE ESTUDIAR MÁS LAS POSIBILIDADES EXISTENTES
Por Isidro F. Aguillo
Es muy interesante la lista que comentas, pero salvo los criterios obvios relacionados con el Open access, ninguno de los indicadores es específico de revistas electrónicas.
El medio ofrece muchas más posibilidades que no se están teniendo en cuenta.
DEFINICIÓN DE “LATENCIA”
Por Reme Melero
El siguiente parámetro está relacionado con lo que se ha ido mencionado en los anteriores mensajes: revista electrónica, impacto y una medida que en un entorno open access es importante: la latencia, es decir el tiempo que transcurre desde la publicación de un artículo en internet hasta que es citado en ese mismo medio (ejemplo: http://opcit.eprints.org/tdb198/opcit/citationage/).
Tiene cierta analogía con el indice de inmediatez del ISI, teniendo en cuenta que aqui la base es el artículo y no la revista.