Successfully reported this slideshow.
We use your LinkedIn profile and activity data to personalize ads and to show you more relevant ads. You can change your ad preferences anytime.

Métricas 2.0, Bibliotecas y Bibliotecarios

2,858 views

Published on

Charla de Isidro Aguillo en SocialBiblio el pasado 16 de noviembre de 2016.

Published in: Education
  • Be the first to comment

  • Be the first to like this

Métricas 2.0, Bibliotecas y Bibliotecarios

  1. 1. 16 Noviembre 2016 Métricas 2.0, Bibliotecas y Bibliotecarios Isidro F. Aguillo Cybermetrics Lab. IPP-CSIC isidro.aguillo@csic.es @isidro.aguillo Webinar patrocinado por Luthiers de Webs
  2. 2. 16 Noviembre 2016 Métricas 2.0, Bibliotecas y Bibliotecarios Isidro F. Aguillo Cybermetrics Lab. IPP-CSIC isidro.aguillo@csic.es @isidro.aguillo
  3. 3. PROGRAMA Ciencia 2.0 Ciencia abierta: Qué es y por qué es importante Más y mejor evaluación es necesaria Métricas 2.0 Más fuentes, nuevas fuentes, indicadores y datos abiertos Los nuevos bibliómetras: DORA, Manifiesto de Leiden Bibliotecas Bibliotecarios Una advertencia: abandonar el voluntarismo y la improvisación Servicios y productos: Propuestas prácticas
  4. 4. CIENCIA 2.0 Evaluación Métricas 2.0 Nuevos actores Ciencia ciudadana Nativos digitales Difuminando las fronteras entre la comunicación formal e Informal Integrando todo el ciclo de la investigación y sus actores Interconectando datos, técnicas, resultados en abierto Big Data Linked Data Open Data Reproducibilidad Acceso Abierto Transparencia
  5. 5. MÉTRICAS 2.0 • Licencias flexibles • Integradas: CRIS o similar Abiertas • Bibliométricas • No bibliométricas Nuevas fuentes • De las JLM a las ALM • Perfiles Cambio de paradigma • “Size independent” • La nueva autoría Más indicadores
  6. 6. CAMBIO DE PARADIGMA • Factor de Impacto • SJR/SNIP JLM MÉTRICAS DE REVISTAS • Citas • Alt-metrias • Uso ALM MÉTRICAS DE ARTÍCULOS • Autores • Instituciones PERFILES
  7. 7. CAMBIO DE PANORAMA: NUEVAS FUENTES, OTRAS FUENTES Visitantes Ranking Web of Universities
  8. 8. NUEVOS INDICADORES (I) http://www.biblioteconomia-documentacion-española.infoec3.es/layout.php?id=autores
  9. 9. NUEVOS INDICADORES (II) http://www.scholar-mirrors.infoec3.es/layout.php?id=authors
  10. 10. SUPERANDO EL “PUBLICA O PERECE” Excelencia Más calidad, menos cantidad Incrementar la visibilidad para aumentar el impacto Publicar en abierto Discriminación positiva También datos, herramientas, “peer review”, información adicional Supremacía de la cita entre pares Incluso órdenes de magnitud respecto a otros indicadores Por que hay que cuestionar algunas Altmétricas (no todas)
  11. 11. RECONOCIENDO NUEVOS TIPOS DE AUTORÍA Autor Líder y liderazgo Otros roles: co-autoría, recolector y/o analista de datos, técnico, … Contribuciones “informales”: Divulgador, desarrollador de software, … Otros Autores Evaluador (sensu lato, no solo revisor de trabajos) Editor de productos y servicios métricos (bibliómetra, …) Gestor (proyectos, redes, editor, repositorios, tutor, …) Otras Actividades Fuera de la academia (impacto social, cultural, político, económico, medioambiental,…)
  12. 12. UN AUTOR ES UN AUTOR, UNA CITA ES UNA CITA INFORME LIBRO PRE-PRINT INFORME CITAS
  13. 13. EL BIBLIOTECARIO Y LAS MÉTRICAS
  14. 14. DORA y MANIFIESTO DE LEIDEN http://www.ascb.org/dora/ http://www.leidenmanifesto.org/
  15. 15. PRODUCTO COMO SERVICIO Abandonar improvisación Conocer demandas específicas de usuarios (“bottom-up”). Ejemplos: - Edad académica (solicitada por investigadores junior) - Género (necesario para estimar y paliar brechas) Necesidades de evaluación (“top-down”). Ejemplos: - Normalización (identificadores “forzados”) - Impacto, visibilidad, excelencia (más y mejores indicadores) Diseñar un proceso Esfuerzo colectivo (incluyendo cooperación exterior: redes) Abierto al exterior Abierto a distintos niveles de edición - Super-usuarios y usuarios finales
  16. 16. ADVERTENCIAS CONTRA … Voluntarismo Servicios individualizados, muy exigentes en recursos Criterios cambiantes, errores sistémicos Indicadores compuestos Conocimiento experto para designar componentes y pesos Terceras partes sesgadas y opacas Soluciones “in-house” Estabilidad dificulta evolución Software propio (lento desarrollo) vs externo (inflexible, caro)
  17. 17. INTEGRACIÓN Servicios propios Control de fuentes, variables y productos/servicios finales Control de calendarios Fuentes propias Acceso a información privilegiada Control de calidad por usuario final Proveedores externos Negociar licencias personalizadas Disponibilidad de APIs
  18. 18. MENDELEY (& SCOPUS) API
  19. 19. BUENAS PRACTICAS CRIS Servicio en abierto permanentemente actualizado, ..que recoja toda la actividad ..y su impacto Perfiles Autores: Portafolio 2.0 abierto al interesado Grupos Métricas Varias fuentes, múltiples indicadores Indicadores relativos (niveles local, disciplinar, geográfico)
  20. 20. EL FUTURO ES CRIS …
  21. 21. UN MODELO BÁSICO Aspectos personales Identificador Edad académica Disciplina Género Perfil de actividad Liderazgo Índice de co- autoría % cooperación internacional Resultados Excelencia (top 10, 5 o 1%) Primer Cuartil Índice h (y/o familia) Otros patentes, … Impacto Total de citas % Autocitas Altmétricas
  22. 22. VISUALIZACIONES Datos Histogramas, Diagramas de lineas Radar Mapas Perfiles Redes de coautorías Redes de citaciones, menciones, enlaces Temas Mapas conceptuales Nubes de tags
  23. 23. CRIS VISUAL http://repo.bg.pw.edu.pl/index.php/en/
  24. 24. VISUALIZACIONES RADAR https://www.elsevier.com/__data/assets/pdf_file/0016/53026/Elsevier_BIS_2013_web_Dec2013-2.pdf
  25. 25. INDICADORES RELATIVOS Isidro F. Aguillo 56 432 7.71 2 (h>=38) Autor/Disciplina-País 2.2% 3.8% 105% 5.3%
  26. 26. PERFILES: IMPACTSTORY
  27. 27. ALTMETRIC≠ALTMETRÍA
  28. 28. MÁS INDICADORES: PLUM
  29. 29. DECISIONES CUESTIONABLES (O NO)
  30. 30. SUGERENCIAS Controversia Mantener CRIS y Repositorios conectados, pero independientes Promover anonimización de perfiles en informes de evaluación Estándares Aceptables: Identificadores (ORCID) Necesarios: DOI Innecesarios: Handle Privacidad Compromiso institucional e individual
  31. 31. RESUMIENDO Productos y Servicios Métricos deben ser PÚBLICOS y ABIERTOS El bibliotecario debe abandonar labores oportunistas, individualistas y voluntaristas en favor de sistemas integrados, exhaustivos, actualizados, rigurosos, interactivos, como los CRIS FUENTES e INDICADORES Abandonar monopolios de fuentes incompletas y/o sesgadas Construir perfiles con descripciones tanto cualitativas como cuantitativas Redefinir y ampliar autoría e impacto Introducir indicadores relativos CIENCIA 2.0 necesita MÉTRICAS 2.0 Bibliotecarios académicos son ya la comunidad (biblio)métrica más numerosa e importante Deben asumir roles más importantes en los procesos de evaluación
  32. 32. http://socialbiblio.com info@socialbiblio.com SaCSbeoAAAAJ 124106 isidro-f-aguillo A-7280-2008 0000-0001-8927-4873 IsidroAguillo 3481717 @isidroaguillo 6507380175 ¡MUCHAS GRACIAS!

×