Analysis of scientific domains using Scopus-based scientometric tools: experiences of the SCImago Research Group Zaida Chinchilla Rodríguez Instituto de Políticas y Bienes Públicos. CSIC. SCImago Research Group. I International Workshop on Scientometric Studies related to the Biomedical Sciences. CNIC, La Habana, Cuba.

Estructura de la presentación 1.Consideraciones generales sobre el análisis de dominios científicos. La necesidad de evaluar y evaluar qué? 2.Herramientas basadas en datos Scopus 3.Cuba en el contexto nacional, regional e internacional 4.Recomendaciones generales

Análisis cienciométricos ¿para qué? Necesidad de evaluar –Políticas públicas de ciencia y tecnología –Desarrollo de herramientas metodológicas –Fuentes de información científica –Batería de indicadores –Sistemas de información científica –Benchmarking

Instrumentos de interface Subsistema de Generación de Conocimiento Subsistema de Innovación Sistema Científico-Tecnológico Instrumentos de Interface

Cuba

Cantidad y calidad Políticas Científicas Distribución de fondos I+D –Grupos excelentes, líneas prioritarias consolidadas (tamaño y visibilidad) Recuento de publicaciones = productividad investigadora Volumen/Tamaño no Repercusión/Visibilidad Indicadores de recuento se relacionan con la investigación de calidad, son los indicadores de citación los más próximos a este concepto. Artículo se publica en una revista académica = proceso de revisión inter pares, (signo de calidad). Pero…no supone más que una oferta a la comunidad científica. Es el uso lo que certifica el grado de calidad real de una contribución (artículo, libro, etc.)

Calidad Calidad no es medible, no se reduce a un número –Grado que un agente contribuye al progreso del conocimiento –Capacidad de resolver problemas –Ofrecer nuevas ideas sobre la “realidad” –Desarrollo de nuevas tecnologías Comunidad científica quién pone la etiqueta. Son los pares los que determinan la superación de un umbral mínimo que pueda garantizar la calidad

Impacto/Visibilidad/Repercusión Influencia real de los resultados Está afecta por factores: –Ubicación del autor (institución, grupo) –El idioma o accesibilidad del canal de comunicación usado –Campo temático Aspecto de calidad medible por indicadores cuantitativos Calidad-pares-cienciometría-complemento

Excelencia Identificación de canales y elaboración de modelos de medición Denota superioridad comparativa. Los resultados superan un umbral prefijado Su identificación es necesaria para la potenciación de determinadas áreas pero puede incurrir en una exclusión de interés en otras. Ejes de actuación y estructuración del sistema de ciencia que permitan continuidad y atracción de recursos Detección de zonas de mejora para el establecimiento de redes de colaboración, la creación de una mayor interconexión entre los niveles micro-macro, estimular la movilidad y transferencia de conocimientos

Sistemas de evaluación Basado en canales de comunicación científica que aseguren la calidad Dos elementos esenciales: –Umbral mínimo de calidad –Ranking de publicaciones Los umbrales bajos reducen la visibilidad y por tanto, el impacto Los sistemas binarios no aseguran la calidad del conocimiento generado. Necesitamos sistemas difusos Los sistemas de evaluación deben ser adaptados periódicamente según la evaluación de resultados

Consideraciones metodológicas Muestra de datos Gauthier, E. (1998) Bibliometric Analysis of Scientific and Technological Research: A User's Guide to the Methodology. ST , Canada: Observatoire des Sciences et des Technologies (CIRST). Nivel de confianza Ciencia Básica Ingeniería, informática Economía Humanidades Revistas internacionales Congresos, informes, patentes, revistas internacionales y nacionales Informes técnicos, revistas internacionales y nacionales Libros, monografías, revistas nacionales GÓMEZ, I.; BORDONS, M. (1996 ). Limitaciones en el uso de los indicadores bibliométricos para la evaluación científica. Política Científica, 46:

Arbitradas (±30000)* ISI-WOS (±9000) SCOPUS (±17000) Fuentes de datos (*) Fuente UlrichsWeb

Resumiendo, Fuentes confiables que aseguren representatividad y calidad mínima Generación de indicadores de acuerdo a estándares internacionales Benchmarking global Categorización temática que permite la ubicación en contextos globales Inducción de mejores prácticas

Herramientas

Ejemplos para el caso de Cuba

Distribución regional de la producción

Citas por documento respecto al promedio mundial

Ranking mundial de países (I)

Ranking mundial de países (II)

Evolución de la producción científica en los principales países latinoamericanos

Ranking latinoamericano. Número de documentos

Datos sobre la producción cubana

Ranking latinoamericano. Impacto normalizado

Distribución temática (Cuba, Colombia y Chile)

Citas por documento por áreas

Fortalezas y debilidades

Especialización temática, índice de atracción y volumen de producción en Medicina

Volumen frente a Calidad (Áreas)

Volumen frente a calidad (categorías)

Patrones de citación

Patrones de publicación

Revistas cubanas en Scopus

¿Dónde se publica la ciencia cubana?

Principales revistas de publicación

Países de publicación, revistas y visibilidad

Publicación Q1 y la visibilidad (I)

Publicación Q1 y la visibilidad (II)

Evidencias

Evidencias (III)

Patrones de colaboración

Tipos de colaboración por áreas

Colaboración internacional de la medicina cubana.

Socios colaboradores

Colaboración interinstitucional en Medicina

Análisis institucional

Ranking Iberoamericano SIR 2010

Recomendaciones (I) Convertir en objetivo institucional la visibilización de los resultados de investigación tanto a nivel nacional e institucional: –Desarrollar e impulsar el uso por parte de los investigadores de repositorios institucionales. Adhesión formal a las declaraciones de Berlin y Budapest –Creación de un cosechador nacional de repositorios. Difusión en Google Scholar y otros difusores internacionales de los contenidos en repositorios –Aprobación de un protocolo para la inclusión de trabajos vinculándolo con la concesión de incentivos. –Implicar a los servicios de investigación, biblioteca y editorial en la visibilización internacional de la investigación –Mejorar el posicionamiento web del ‘site’ institucional a fin de lograr una mayor presencia de los contenidos de investigación en el mundo científico.

Recomendaciones (II) Trabajar con los editores de las revistas para conseguir que mejoren sus posiciones en los índices internacionales o que accedan a ellos Minimizar el impacto de la publicación Q4 buscando mejores destinos de publicación con independencia de la vinculación del investigador con el editor de la revista (análisis diferencial por áreas) Fomento de la colaboración internacional dentro de intervalos de confianza del rango de las autorías.

Recomendaciones (III) Aumentar la base de investigadores activos internacionalmente. Asegurar calidad homogénea en las diferentes áreas apoyándose en la colaboración internacional. Crear una unidad de apoyo a la publicación científica con tres misiones específicas: –Hacer el seguimiento de las prácticas de comunicación científica en cada institución. Mejorar el conocimiento de los investigadores en lo referente a los procesos de comunicación científica. En particular, lo relativo a las publicaciones de su especialidad y su visibilidad en el mundo. –Apoyar a los investigadores que lo necesiten en el proceso de traducción científica, corrección de estilo, adecuación a las normas para autores de las revistas y formateo de los documentos –Difundir ente los investigadores los destinos de publicación por especialidades y rango de visibilidad para facilitar su selección

Gracias por la atención Seguimos trabajando…

Analysis of scientific domains using Scopus-based scientometric tools: experiences of the SCImago Research Group Zaida Chinchilla Rodríguez Instituto de Políticas y Bienes Públicos. CSIC. SCImago Research Group. I International Workshop on Scientometric Studies related to the Biomedical Sciences. CNIC, La Habana, Cuba.