Criterios de Evaluación de Revistas en Bases de Datos:
SciELO, LILACS, BVS
Lilian Calò
BIREME/OPS/OMS
La Biblioteca Virtual en Salud es basada en el trabajo en red, con productos, servicios, eventos y tecnologías siendo tratados como un bien publico regional y global.
Biblioteca, red de bibliotecas
Centro de información e indexación
• ••1967 1982 1987 1998
•sistemas nacionales de información
biblioteca virtual en salud
VI Reunión del Sistema Latino-Americano y del Caribe de Información en Ciencia, en Costa Rica,
en marzo 1998, la red se compromete a construir de forma cooperativa la Biblioteca Virtual en Salud
Red de contenidosRed
socialRed AAI – Ambientes
Aprendices e Informados
Red BVS
Acceso a la información científica y técnica indexada en AL&C
• AL&C es probablemente la región en desarrollo con mayor capacidad y mejor infraestructura de acceso a la información científica y técnica en salud. Esta evaluación considera tanto el acceso a las referencias bibliográficas como a los textos completos de los documentos.
• La contribución e impacto de LILACS y la BVS es significativo en la promoción de la información científica y técnica calificada, organizada, accedida y evaluada.
Evaluación de la Producción Científica
• Es importante evaluar la producción científica para traducir la investigación en programas y políticas públicas y saber lo que es relevante;
• Indicadores de impacto científico: Factor de Impacto, Scimago Journal Rank, Eigenfactor, Indice h, medidas de uso y download, nuevas métricas;
• Indexación en Bases de Datos regionales e internacionales: Scopus, LILACS, Colciencias, Latindex, SciELO, MEDLINE, Web of Science, JCR.
Ley de Bradford
• En economía es conocido como Ley de Pareto o Ley 80-20
• Un número relativamente pequeño de revistas de cada especialidad publica la mayor parte de los resultados científicos significativos;
• 2000 revistas corresponden a 85% de los artículos publicados y 95% de los artículos citados
• Esta porción de revistas no es fija, una constante reevaluación e indexación de nuevas revistas es necesaria.
Bases de Datos • Permiten organizar y catalogar las revistas;
• Realizar búsquedas por asunto, autor, periódico, palabras-clave;
• Su función primordial es separar los periódicos basado en la calidad en los artículos publicado;
• Criterios varían poco entre las varias bases regionales e internacionales;
• Para que sean más representativas, las bases no necesitan indexar la totalidad de los periódicos, y sí los más representativos;
Contribución de Ibero America a la producción científica mundial
BRAZIL 124 1,101 24606 1,950CHILE 44 0,391 3839 0,304MEXICO 43 0,382 9682 0,767ARGENTINA 21 0,186 5919 0,469COLOMBIA 20 0,178 1759 0,139VENEZUELA 13 0,115 1029 0,082COSTA RICA 1 0,009 333 0,026CUBA 1 0,009 662 0,058ECUADOR 1 0,009 290 0,023JAMAICA 1 0,009 292 0,023PERU 1 0,009 524 0,042TRINID & TOBAGO 1 0,009 18 0,001URUGUAY 1 0,009 61 0,005AL&C 272 2,415 49014 3,89
SPAIN 163 1,447 39606 3,139PORTUGAL 8 0,071 7793 0,618IberoAmérica 443 3,934 96413 7,64
USA 4079 36,222 341.055 27,035Canadá 172 1,527 51.274 4,064América do Norte 4251 37,750 392.329 31,10
WoS / World 11.261 100 1.261.551 100
% WorldCountry Titles % WorldArticles in
WoS
Indexación de revistas de AL&C en bases de datos
LILACS SciELO WoS JCR MEDLINE SCOPUSArgentina 126 68 21 12 8 58Bolivia 9 8 0 0 0 0Brasil 330 221 133 72 43 310Chile 59 91 47 22 3 81Colombia 99 106 23 9 3 37Costa Rica 12 10 1 1 1 3Cuba 30 34 1 1 1 27Ecuador 15 0 1 1 0 4Estados Unidos 3 1 1 1 1 1Guatemala 4 0 0 0 0 0Honduras 1 0 0 0 0 0Jamaica 2 1 1 1 1 3México 37 55 43 33 13 104Panamá 2 0 0 0 1 1Paraguay 7 3 0 0 0 0Peru 18 13 1 0 2 7Puerto Rico 2 0 0 0 2 6Uruguay 12 6 1 1 0 5Trinidad & Tobago 0 0 1 0 0 0Venzuela 51 49 14 9 3 44Total 819 666 289 163 82 691
CountryBase de Dados
LILACS
LILACS
El Modelo SciELO(Scientific Electronic Library Online) de
publicación• Contribuir con el desarrollo de la investigación científica nacional a través de
la expansión del la difusión, publicación y evaluación del los resultados di investigación;
• Aumentar la visibilidad, acceso, credibilidad, uso e impacto de las revistas de buena calidad en todo el mundo;
• Consolidar un modelo de publicación basado en las denominadas "vías doradas" de acceso abierto, con publicación en línea de colecciones de revistas consideradas como bienes públicos;
• Promover la integración entre las fuentes de información nacionales y internacionales;
• Fornecer indicadores infométricos y cienciométricos en el proceso de la comunicación científica en Ibero-America e más recientemente también en Sudáfrica.
Desarrollo Histórico de SciELO• Inspirado en el articulo Lost science in the third world di W. Gibbs
(Scientific American,273 (2), 92–99, 1995);
• Criado en el año 1997 a través de un programa de colaboración entre BIREME/OPS/OMS y la Fundación de Amparo a la Investigación del Estado de Sao Paulo (FAPESP);
• Empezó con 10 revistas entre las mejores y de mayor impacto
publicadas en Brasil;
• En 1998, se junta a SciELO el Consejo Nacional de Investigación de Chile, lo que estimula la participación de los otros países del America Latina;
• Adhesión de una nueva colección/país por año;
• Hoy, la red SciELO es formada por 15 colecciones nacionales y dos colecciones temáticas que son publicadas en la Web, en un conjunto formado por más de 750 títulos, 270 mil documentos y 5 millones de citaciones.
La red SciELO
(*) La colección Salud Pública superó las fronteras de America Latina, incluyendo revistas europeas. En los próximos años se espera que se desarrolle como una colección internacional.
Colección Inicio Revista % ArtículosArgentina 2004 63 3%Brasil 1997 214 58%Chile 1998 87 10%Colombia 2004 95 4%Cuba 2001 34 5%Portugal 2004 28 2%España 2001 44 6%Venezuela 2000 49 4%Salud Pública 2000 12 7%Ciencias Sociales 2006 32 0%
Totales 658 100%
Colección Certificada
La red SciELO
Collection Inicio Revista % ÁrticulosBolivia 2009 8 9%Costa Rica 2000 10 11%Mexico 2003 55 54%Paraguay 2007 3 4%Perú 2004 13 14%Sudáfrica 2009 10 8%Uruguay 2005 6 8%West Indies 2006 1 1%
Totales 106 100%
Colección en Desarrollo
La colección SciELO Perú debe ser certificada en principio de 2011, aún que para eso hay que retirar algunas revistas que no cumplen los criterios
Criterios de Selección SciELO
• El desarrollo de cada colección SciELO es asistido por un Comité Consultivo científico independiente, que hace cumplir los criterios ordinarios para la selección y permanencia de las revistas de la colección;
• El Comité Consultivo es constituido por los expertos de diversas áreas científicas, y representantes de las agencias de fomento analizan el cumplimento de los criterios basándose en recomendaciones ad hoc y consideraciones bibliométricas.
• El Comité Consultivo tiene una función fundamental: ayudar el alcance y mantenimiento de su certificación y seguir la vigilancia en los años posteriores;
• Las colecciones bien conducidas pueden alcanzar la certificación en un año; otras colecciones pueden quedar en el período de prueba durante muchos años si las correctas condiciones políticas, de gestión y científicas no fueran logradas.
El Comité Consultivo
El Comité es constituido por los representantes de la comunidad nacional de Comunicación
Científica
Criterios de SciELO BrasilPara crear una colección SciELO nacional, la evaluación de las revistas es obligatoriaCriterios de Pre-selección: •Acceso abierto, endogenia, puntualidad
Criterios analizados:•Contenido científico•Proceso de Peer-review•Periodicidad y puntualidad•Títulos de los artículos, resumen y palabras-claves en ingles•Afiliaciones de los autores•Citas recibidas•Política de derechos del autor (Creative Commons)•Registro de ensayos clínicos•Formulario de Conflito de Interés de ICMJE
Funciones del Comité Consultivo SciELO
• Inclusión de nuevas revistas científicas en la colección;
• Exclusión de títulos de revistas científicas de la colección;
• Modificaciones en los criterios di evaluación para la inclusión y permanencia de revistas científicas en la colección;
• Seguimiento de los indicadores di desempeño que son publicados regularmente por las revistas de la colección;
• Definición y mejora de las operaciones del Comité, lo que permite el cumplimiento eficiente de los objetivos mencionados
Visitas al sitio SciELO Brasil
Observaciones sobre SciELO
• SciELO es uno de los modelos de publicación en Open Access más bien sucedidos en los países en desarrollo;
• Para muchas revistas, el mayor desafío actual es ampliar el Comité Editorial como una condición necesaria para ocupar un eventual lugar entre las revistas más importantes (core journals) del mundo en su área;
• Para lograr este objetivo, será decisivo recibir apoyo político de las agencias nacionales de fomento, como una evaluación de referencia de la producción científica en cada país.
Fuente:A.L.Packer, The SciELO Open Access: A Gold Way from the South
Canadian Journal of Higher Education Volume 39, No. 3, 2009, pages 111-126
Bases de Datos de Revistas Científicas Criterios
Scopus LILACS SciELO NLM Web of
Science/ JCR
Número de títulos en la base 18.000/16.500 peer reviewed
801 640 5455 (MEDLINE) 11.261 / 6.620
Títulos aceptados 40% 25-27% 18% 20-25% 10-12%/ 5-6%
Periodicidad y Regularidad Importancia
relativa Si Si Si Si
Recomendaciones ICMJE* No Si o otro standard
Si o otro standard
Si Si
Peer Review No
necesariamente Si Si Si Si
Analice de citaciones (Factor de Impacto)
Importancia relativa
No importante Importante Importancia
relativa Importante
DiverSidad Internacional de autores
Importancia relativa
No importante Importante Importancia
relativa Importante
Cuerpo Editorial Diversificado Importancia
relativa Importante Importante
Importancia relativa
Importancia relativa
Mérito y carácter científico –contribuciones originales
No importante Importante Importante Importante Importante
Título, resumen y palabras clave en inglés
No necesariamente
Si, resumes en ingles
Si Si Si
Referencias en alfabeto romanas
No No No Si Si
Publicaciones en el área médica y biomédica
No Si No Si No
Comparación entre criterios de Bases de Datos
(*) International Committee of Medical Journal Editors – Uniform Requirements for Manuscripts Submitted to Biomedical Journals (http://www.icmje.org/)
"Estos resultados deben hacernos repensar FI y SJR como el “golden standard” de las medidas de impacto científico. Los resultados aquí presentados indican que las métricas basadas en medidas de uso y no de citación - como ha sido más común - pueden representar una mejor medida de consenso".
Conclusiones• La indexación de una revista en una base de datos regional o
internacional no obedece solamente a criterios formales;• La situación de las revistas concurrentes en la selección presente
o precedente en la misma área de conocimiento es un factor determinante;
• Muchas veces criterios comerciales, geográficos o de fomento de una área especifica influencian la selección de revistas por una base de datos;
• En el año 2008 Thomson Reuters seleccionó 700 nuevas revistas en el mundo de carácter regional para apoyar la diseminación del conocimiento regional. El proceso de selección duró cerca de 2 años;
• De estas, 80 son de AL&C en varias áreas del conocimiento, incluso ciencias de la salud. Los criterios son los mismos que para la admisión en la WoS, pero sin dar tanta importancia a las citas.
• La indexación en base de datos es una indicación de cualidad de una revista pero no es el único criterio para aferir esta cualidad.