Jiménez Contreras, E.; Cabezas Clavijo, Á. Bibliometría y evaluación de la ciencia [Taller]. AIDICO, Instituto Tecnológico de la Construcción. Valencia, 4 y 5 de noviembre de 2009

1. Taller de Bibliometría y Evaluación de la Ciencia Valencia, 4-5 noviembre 2009 Evaristo Jiménez Contreras Álvaro Cabezas Clavijo ec3 - Evaluación de la Ciencia y de la Comunicación Científica http://ec3.ugr.es

3. La comunicación de la ciencia Taller de Bibliometría y evaluación de la ciencia Los indicadores bibliométricos y la evaluación de la actividad investigadora

8. El ciclo de producción de conocimientos certificados y del reconocimiento Experimentación, datos Lectura de artículos Preparación del artículo Publicación Difusión Audiencia específica: colegas, sugerencias Aplicaciones Empresa pública o privada Temas Proyectos Financiación Recursos

14. COLABORACIÓN Nº Autores/trabajo Patrones colaboración Ordenes de firma RELACIONALES Análisis de co-palabras; redes de colaboración Qué elementos se consideran en las evaluaciones científicas

17. Un investigador tiene un índice h cuando h de sus documentos han recibido al menos h citas cada uno, y el resto tiene no más de h citas por documento. El índice H Hirsh, J.: An index to quantify an individual's scientific research output. PNAS November 15, 2005,46 16569-72

18. Bases de datos para evaluación de la ciencia Taller de Bibliometría y evaluación de la ciencia

21. Web of Knowledge (WOS, JCR, ESI)

23. Búsqueda básica (13 campos de consulta)

25. 1 2 Búsqueda de autores (author finder) Ejemplo: Emilio Delgado López-Cózar

27. Resultados 6 7 8 Refina por áreas o instituciones

42. Factor de impacto de la revista Categorías JCR a las que se adscribe Posición de la revista en dichas categorías Información básica de una revista

46. Papers más citados Evolución anual Ránking de paises para la categoría

50. Búsqueda básica (18 campos)

53. Affiliation Search Ejemplo: Emilio Delgado López-Cózar Cuidado en las búsquedas por autor

60. Tipos de resultados 3. Resultado que nos dirige a una fuente secundaria donde se recoge el documento 2. Resultado que nos devuelve una cita 1. Resultado que nos dirige al documento original a texto completo

63. Versiones del mismo documento

65. Comparativa GS vs WoS/Scopus • Tradicional mala cobertura de revistas de Humanidades y Ciencias Sociales. Política de expansión en la actualidad en estos ámbitos del conocimiento. ▼ • Mala cobertura de las revistas de Humanidades y Ciencias Sociales presentes en otras bases de datos ( MLA Bibliography , Philosopher’s Index , PsycInfo , Sociological Abstracts , …) ▼ • Rigurosos proceso de selección de las revistas científicas, especialmente en la Web of Science ▲ • No existe ningún tipo de control en los procesos de selección de las revistas que indiza por la que todo tipo de revistas tienen cabida ▼ COBERTURA DE REVISTAS CIENTÍFICAS Índices de citas multidisciplinares (Web of Science; Scopus) Google Scholar

66. • Solo localiza citas de revistas y congresos ▼ • Localiza citas emitidas por los documentos no cubiertos por otras bases de datos, especialmente desde preprints, congresos o tesis doctorales. Esta característica lo hace especialmente útil para las siguientes disciplinas: Humanidades, Ciencias Sociales e Ingenierías ▲ • Acceso directo al documento si la biblioteca lo tiene contratado ▲ • Acceso directo al documento si la biblioteca lo tiene contratado ▲ • Acceso solo a la referencia de los artículos ▼ • Acceso directo a publicaciones científicas a texto completo y gratuitas ▲ • Dominio de la literatura de carácter anglosajón. Especialmente en WoS ▼ • Mayor cobertura de literatura en lenguas nacionales ▲ • Contenidos exclusivamente científicos y mayoritariamente sometidos a revisión ▲ • Cobertura de documentos que podrían no ser de carácter académico: programas de asignaturas, guías de biblioteca, temarios, etc... ▼ • Solo cubren los contenidos de revistas científicas y recientemente libros de actas de congresos (WoS: Conference Proceedings Citation Index ) ▼ • Posibilidad de encontrar documentos muy diversos: pre-prints, artículos revistas, libros, tesis, informes, comunicaciones a congresos… ▲ • Cobertura de una amplia tipología de fuentes de información: repositorios, bases de datos, catálogos on-line de bibliotecas, web personales e institucionales (universidades, institutos de investigación, sociedades científicas, empresas…), productos de Google (Google Patents y Google Books) ▲ • Transparencia absoluta en las fuentes que componen las bases de datos. Disponibilidad de Master List actualizados ▲ • Falta de trasparencia en la cobertura. No se declaran acuerdos con editoriales ni de las fuentes que se indizan ▼ COBERTURA GENERAL • Pago de licencias ▼ • Libre Acceso ▲ PRECIO Índices de citas multidisciplinares (Web of Science; Scopus) Google Scholar

67. • Incluyen diversas opciones de filtrado (disciplina, año, tipo documental) que nos permiten refinar las búsquedas ▲ • Solo incluye el filtrado por 7 disciplinas ▼ • Cada registro está clasificado en una tipología documental (artículo, revisión, carta, nota, recensión, etc….) ▲ • No identifica ante que tipología documental nos encontramos. Tan solo los libros ▼ • Localiza las diferentes versiones de un documento y las agrupa bajo un mismo encabezamiento de título ▲ • Se puede consultar todos los resultados que una consulta genera ▲ • Solo se muestran los 1000 documentos en cada consulta ▼ • Posibilidad de exportar los resultados a software de análisis de datos: Histcite , Refviz , NWB, BibExcel ▲ • Posibilidad de exportar los resultados a software de análisis de datos: Publish or Perish ▲ • Presenta gran variedad de resultados duplicados ▼ • Costes de procesamiento de la información con menores costes en horas. ▲ • Gran coste en el procesamiento de los datos lo que hace difícil su uso en estudios de gran escala. ▼ • Exportación de los resultados en diferentes formatos (RIS, txt, tabulados, etc…) ▲ • Solo permite exportar los resultados, uno a uno, a un software bibliográfico. ▼ • Permiten ordenar los resultados según diferentes opciones (Título, Nº de citas, fecha de publicación, primer autor,…) ▲ • Los resultados se presentan directamente ordenados por número de citas y no existen otras opciones ▼ • Herramientas de análisis bibliométricos on-line como Citation Report en WoS ▲ • No tiene ninguna herramienta para analizar resultados ▼ • Posibilidad de buscar en 13 campos diferentes en WoS y 18 en Scopus ▲ • Solo ofrece tres campos de búsqueda (Autor, Revista y Año de Publicación) ▼ INTERFAZ, BÚSQUEDAS y RESULTADOS

68. • Control absoluto de las revistas científicas ▲ • Ausencia de cualquier tipo vocabulario controlado. No existe control de las revistas científicas, éstas pueden aparecer indizadas de diferente forma ▼ • No existe normalización pero tienen herramientas para identificación de autores (WoS=Author Finder) ▲ • No existe normalización de los autores ▼ CONTROL DE LA INFORMACIÓN

79. Algunas cifras

80. ¿Qué información nos da?

81. ¿Qué información nos da?

82. Detalle Categoría y Autores más citados

85. ● BASES DE DATOS ● PERIODICIDAD ● EVALUADORES EXTERNOS ● APERTURA DEL CONSEJO EDITORIAL ● APERTURA EXTERIOR DE LOS AUTORES ● ÍNDICE DE VALORACIÓN A+B ● ÍNDICE DE IMPACTO MEDIO (sin actualizar) ● CRITERIOS LATINDEX Actualmente RESH en proceso de integración con IN-RECS Metodología de evaluación en RESH y DICE

86. Detalle de categoría en RESH

88. Sistema Regional de Información en Línea para Revistas Científicas de América Latina, el Caribe España y Portugal OJO tiene dos productos - DIRECTORIO: 16,963 revistas. Información básica normalizada - CATÁLOGO: 3,381 revistas. Selección de revistas clasificadas según el cumplimiento de unos criterios de calidad ! ! El catálogo LATINDEX

89. ● CARACTERÍSTICAS BÁSICAS : mención de cuerpo editorial, antigüedad, mención del director, lugar de edición, entidad editora, etc.. ● PRESENTACIÓN : páginas de presentación, tabla de contenidos, miembros del consejo editorial, afiliación de los autores, etc.. ● GESTIÓN Y POLÍTICA EDITORIAL: sistema de arbitraje, evaluadores externos, autores externos, apertura editorial, cumple la periodicidad, etc.. ● CARACTERÍSTICAS DE LOS CONTENIDOS: contenido original, resumen, palabras clave, intrucciones autores, etc… Metodología de Latindex basada en el cumplimiento de 33 criterios repartidos en 4 bloques Metodología de evaluación

91. Selección y exportación de resultados