ALTMETRICS    ¿Alternativa a la evaluación de la          actividad científica?             Daniel Torres-Salinas       Gr...
Índice● Introducción: situación de las nuevasmétricas en el contexto actual● Ejemplos de Altmetrics● Significado e interpr...
Introducción
La evaluación de la actividad científica             REVISIÓN POR           BIBLIOMETRÍA             EXPERTOS-   Desde los...
Nuevo contexto y nuevas herramientasAl mismo tiempo el contextotecnológico e internet han evolucionadoenormemente en los ú...
Nuevo contexto y nuevas herramientasSurgen múltiples herramientas de gestión,almacenamiento o networking en ciencia   Medi...
Nuevas herramientas, nuevos indicadoresQué generan estadísticas de la actividad de laactividad e interacciones entre sus u...
La evaluación de la actividad científicaPodemos añadir dos nuevos bloques en nuestra     matriz de evaluación de la cienci...
El modelo Article Level Metrics   Por ejemplo el modelo ALMs de PLoS                         Article Level Metrics        ...
El modelos Article Level MetricsPor ejemplo el modelo ALMs de PLoS        Article Level Metrics     Indicadores empleados ...
Altmetrics ¿Cómo peer review?     Hay vida después     de la publicación!Algunos autores hablan de la función deestas herr...
Métricas para todoLas nuevas métricas afectan a todo tipode materiales científicos y académicos● Las plataformas dan cabid...
Ejemplos
Mendeley: el indicador de lectores
Mendeley: el indicador de lectores           Rankings
Ejemplo de indicadores y cálculo  Ejemplo de indicadores obtenidos con  ImpactStory para una conferencia
Ejemplo de indicadores y cálculo Desglose de la estadística de twitter
Article Level Metrics en PLoS one
¿Significado?
¿Qué significan éstos nuevos indicadores?• Como hemos visto podrían complementar las evaluaciones tradicionales con otros ...
ALTMETRICS: una etiqueta para todo  Una cuestión interesante es ¿qué estamos  mezclando bajo la etiqueta de Altmetrics?•Fu...
Fuentes e indicadores diferentesPor ejemplo aquívemos como existenartículos científicosque apenas tienenimpacto endetermin...
¿Entonces qué significa todo esto? … intuimos que las altmetrics se relacionan directamente con la utilidad y el interés q...
Relación con el impacto tradicional           Al menos sabemos que se miden cosas          diferentes que los indicadores ...
Problemas
EvanescenciaEl problema de la evanescencia (I)● El tipo de fuentes de las cuales se obtienen losdatos e indicadores tienen...
Evanescencia: un problema cibermétrico   • Inhabilitación de los comandos de     consulta de enlaces de Yahoo Search   • D...
EvanescenciaEl problema de la evanescencia (II)● Muchos de los indicadores que se generan tienenuna vida muy corta es deci...
Evanescencia: el impacto inmediato            La mayor de las herramientas miden        solo el impacto inmediato (Trendin...
Consideraciones    finales
Consejos muy básicosSi queremos de verdad que estas métricasfuncionen con nuestros trabajos y aportacionesacadémicas debem...
Su utilidad en determinados contextosAunque agencias como CNEAI y ANECA no van ahacer ni caso de éstas ni otras métricas w...
Conclusiones finalesConclusiones:● Tenemos que dar la bienvenida a todos losindicadores que complenten a los bibliométrico...
ALTMETRICS¿Alternativa a la evaluación de la      actividad científica?     Daniel Torres-Salinas Grupo EC3, Universidad d...
Upcoming SlideShare
Loading in...5
×

Altmetrics ¿Alternativa a la Evaluación de la Actividad Científica?

2,304

Published on

Published in: Education
3 Comments
12 Likes
Statistics
Notes
  • Пожалуйста Это деловое предложение, пишите на мой ID обратно, если интересно.
    ------------------------------------

    Счастливые обильные новые ноябре месяце,

    Здравствуйте.
    a
    Как вы сегодня?
    Я надеюсь, у тебя все хорошо и все будет хорошо с вами? Благодарю God.My зовут Дженифер Петерсон. (я ищу хорошие отношения, а также иметь бизнес-предложение с вами), если хотите. Пожалуйста, напишите мне сообщение на мой почтовый ящик
    СПАСИБО,>

    jeniferpeterson1 в / YH / DT / диплом

    ---------------------

    PLEASE THIS BUSINESS PROPOSAL, WRITE ON MY ID BACK IF INTERESTED.
    ------------------------------------

    Happy abundant new month of November,

    Hello.

    how are you today?
    I hope you are fine and all is well with you ? thank God.My name is JENIFER PETERSON .(i am looking for a good relationship and also to have business proposal with you )if you want. please write me message to my email box
    THANKS,>

    jeniferpeterson1 at / yh / dt / cum
       Reply 
    Are you sure you want to  Yes  No
    Your message goes here
  • Dear Sir/Madam,

    We write to inform you that we are interested in your products which we saw in this trade site and we sincerely hope to establish a long-term business relation with your esteemed company. Please kindly send me your catalog. Also, inform me about the MOQ, Delivery time, and payment terms warranty.

    Please Contacts us on: sadricinfo@yahoo.com


    Your early reply is highly appreciated. Thank You!


    Best Regards,

    **********************************
    Mr. Alexzander McAnthony
    (Purchasing Manager)
    322 Harrow Road, Middlesex,
    HA9 6LL,London,
    United Kingdom.
    TEL.: +44-752 872 2864
       Reply 
    Are you sure you want to  Yes  No
    Your message goes here
  • Excelente trabajo
       Reply 
    Are you sure you want to  Yes  No
    Your message goes here
No Downloads
Views
Total Views
2,304
On Slideshare
0
From Embeds
0
Number of Embeds
8
Actions
Shares
0
Downloads
61
Comments
3
Likes
12
Embeds 0
No embeds

No notes for slide

Transcript of "Altmetrics ¿Alternativa a la Evaluación de la Actividad Científica?"

  1. 1. ALTMETRICS ¿Alternativa a la evaluación de la actividad científica? Daniel Torres-Salinas Grupo EC3, Universidad de NavarraConferencia impartida en:XVII SIMPOSIO SEHM Investigación y Enseñanza en Historia de la Medicina9 de Noviembre 2012, Santiago de Compostela
  2. 2. Índice● Introducción: situación de las nuevasmétricas en el contexto actual● Ejemplos de Altmetrics● Significado e interpretación de los nuevosindicadores● Problemas e inconsistencia de indicadoresy fuentes● Consideraciones finales
  3. 3. Introducción
  4. 4. La evaluación de la actividad científica REVISIÓN POR BIBLIOMETRÍA EXPERTOS- Desde los años ‘60 ‘70 basada en citación- Citación como reconocimiento (Merton)- Nacimiento índices de citas - SCI, SSCI y A&HCI- Popularización del Factor de Impacto (IF)- Herramienta esencial en políticas científicas (CNEAI / ANECA)- Existencia área críticas de evaluación: Humanidades- Última década gran cantidad de recursos: Scopus, IN-RECS..- En la actualidad consolidación en Humanidades
  5. 5. Nuevo contexto y nuevas herramientasAl mismo tiempo el contextotecnológico e internet han evolucionadoenormemente en los últimos añosHan surgido cientos de plataformas que permitencompartir libremente todo tipo de información y conectarnos a través de redes (web 2.0) También se ha visto reflejado en la actividad académica y científica: • Redes sociales académicas • Repositorios de acceso abierto • Gestores de referencias on-line • Data Sharing • etc…
  6. 6. Nuevo contexto y nuevas herramientasSurgen múltiples herramientas de gestión,almacenamiento o networking en ciencia Medios • Twitter, Facebook, youtube… Sociales Gestores de • Connotea, Mendeley, Zotero.. referencias Blogs • Researchblogging, etc.. Científicos Repositorios • Artículos (Arxiv), revistasacceso abierto (PLoS), datos (Dryad)..
  7. 7. Nuevas herramientas, nuevos indicadoresQué generan estadísticas de la actividad de laactividad e interacciones entre sus usuarios Medios • Retweet, Like, menciones Sociales conversaciones Gestores de • Lecturas, incorporación a referencias bibliografías de los usuarios Blogs • Comentarios, enlaces Científicos recibidos por la entrada, … • Consultas, vistas del artículo, Repositorios descargas
  8. 8. La evaluación de la actividad científicaPodemos añadir dos nuevos bloques en nuestra matriz de evaluación de la ciencia REVISIÓN POR BIBLIOMETRÍA EXPERTOS USO ALTMETRICS (descargas) (medios sociales)
  9. 9. El modelo Article Level Metrics Por ejemplo el modelo ALMs de PLoS Article Level Metrics Uso del Cita Cita no Artículo Científica Científica Cobertura en INPUT Cobertura Blogs comunidad noticias Ellos se encargan de hacer la recopilación y presentarla a sus lectores Artículos DiseminaciónFuente: Binfield
  10. 10. El modelos Article Level MetricsPor ejemplo el modelo ALMs de PLoS Article Level Metrics Indicadores empleados en su matriz de evaluación
  11. 11. Altmetrics ¿Cómo peer review? Hay vida después de la publicación!Algunos autores hablan de la función deestas herramientas como una forma derevisión por pares tras la publicación (Post-Publication Peer Review).Crotty, 2012
  12. 12. Métricas para todoLas nuevas métricas afectan a todo tipode materiales científicos y académicos● Las plataformas dan cabida a todo tipo demateriales como cursos, working papers,material docentes…● Nos dan evidencias de la posible ‘calidad’ o‘utilidad’ ‘de facetas académicas de las que antesnos era imposible conocer nada●Ésta será la gran aportación ya que a nivel deartículo y revistas tenemos muchas fuentes decitas (WoS, SCP, GS) pero no para el resto.
  13. 13. Ejemplos
  14. 14. Mendeley: el indicador de lectores
  15. 15. Mendeley: el indicador de lectores Rankings
  16. 16. Ejemplo de indicadores y cálculo Ejemplo de indicadores obtenidos con ImpactStory para una conferencia
  17. 17. Ejemplo de indicadores y cálculo Desglose de la estadística de twitter
  18. 18. Article Level Metrics en PLoS one
  19. 19. ¿Significado?
  20. 20. ¿Qué significan éstos nuevos indicadores?• Como hemos visto podrían complementar las evaluaciones tradicionales con otros indicios de calidad también objetivos y cuantitativosSin embargo no sabemos todavía el significado exacto de estas métricas o su valor real: The properties and validity of these data, however, are still unclear, and call for additional research. What is its scholarly value? (Priem et al.)
  21. 21. ALTMETRICS: una etiqueta para todo Una cuestión interesante es ¿qué estamos mezclando bajo la etiqueta de Altmetrics?•Fuentes de información y plataformas conobjetivos, comunidades de usuarios y utilidadesque pueden ser muy diferentes.• Indicadores que tienen un diverso origen,naturaleza e interpretación.•Difíciles de equiparar y jerarquizar entre símismos. (un Retweet o un comentario enFacebook ? un delicious o un connotea?)
  22. 22. Fuentes e indicadores diferentesPor ejemplo aquívemos como existenartículos científicosque apenas tienenimpacto endeterminadosmedios sociales.Sin embargo enotras fuentes(índices WoS yScopus, descargas,Readers enMendeley, …)ofrecen estadísticasmás sólidasFuente: Priem et al.
  23. 23. ¿Entonces qué significa todo esto? … intuimos que las altmetrics se relacionan directamente con la utilidad y el interés que despiertan nuestros materiales científicos ¿ Hablamos de Impacto Social?* Cuando nos citan desde una revista sabemos quenuestro impacto es 100% científico. Las estadísticasAltmetrics son de medios abiertos y es muy díficildeterminar con tanta clara como ocurre en las revistas enque tipo de comunidad ‘impactamos’ (profesional,científica, familiar)
  24. 24. Relación con el impacto tradicional Al menos sabemos que se miden cosas diferentes que los indicadores de impactoFuente: Cabezas Clavijo y Torres-Salinas
  25. 25. Problemas
  26. 26. EvanescenciaEl problema de la evanescencia (I)● El tipo de fuentes de las cuales se obtienen losdatos e indicadores tienen una tasa de natalidad ymortalidad bastante elevada. Asimismo el estatusde las fuentes/validez puede ir cambiando.● Por tanto el panorama de Altmetrics tanto en lasfuentes de información como en los indicadoresque se emplean puede ser muy variable● Es un problema similar al que le ha sucedido a lahermana mayor de la cibermetria que se quedaronde repente sin una de sus herramientas!
  27. 27. Evanescencia: un problema cibermétrico • Inhabilitación de los comandos de consulta de enlaces de Yahoo Search • Desaparición del servicio Yahoo Site Explorer Necesidad de plantear nuevos rumbos y horizontes metodológicos dentro de la disciplina de la cibermetríaAguillo, Isidro F (2012)
  28. 28. EvanescenciaEl problema de la evanescencia (II)● Muchos de los indicadores que se generan tienenuna vida muy corta es decir han de ser captadospoco tiempo después de producida la interacción.Pasado un tiempo muchos sistemas no permiten larecuperación (ejm. Twitter) o por ejemplo puedeocurrir que las cuentas de usuarios hayandesaparecido, etc. Se genera un problema de trabajar con información muy efímera y a veces los resultados no son reproducibles científicamente
  29. 29. Evanescencia: el impacto inmediato La mayor de las herramientas miden solo el impacto inmediato (Trending Topics)Fuente: Wright
  30. 30. Consideraciones finales
  31. 31. Consejos muy básicosSi queremos de verdad que estas métricasfuncionen con nuestros trabajos y aportacionesacadémicas debemos ser activos en la web:  IMPLICA PLUS DE TIEMPO QUE NOS SERÁ POCO RECONOCIDO • Tendremos por ejemplo que tener cuenta/pefil en lasredes sociales habituales (Twitter o Facebook)• Subir los trabajos a un repositorio en acceso abiertoprofesional o institucional.• Utilizar aquellas plataformas sobre las que seconstruyen las métricas (slideshare, mendeley, etc..)
  32. 32. Su utilidad en determinados contextosAunque agencias como CNEAI y ANECA no van ahacer ni caso de éstas ni otras métricas web, hayque tener claro que pueden ser útiles en:• Contextos evaluativos menos rígidos y proyectos conuna intencion de transmitir su mensaje a la sociedad• Disciplinas (Ingeniería) apegadas a una profesióndonde contribuciones pueden interesar profesionalmente• Disciplinas (Humanidades) donde la bibliometría nopuede ofrecer tantos ni tan buenos indicadores
  33. 33. Conclusiones finalesConclusiones:● Tenemos que dar la bienvenida a todos losindicadores que complenten a los bibliométricos● Nos hablan de algo diferente al impactocientífico y al reconocomiento de los pares● Probablemente hablemos de impacto social ouna es especie impacto mixto.● Son todavía técnicas incipientes, en faseexperimental. No utilizar en lugar de lastécnicas tradicionales
  34. 34. ALTMETRICS¿Alternativa a la evaluación de la actividad científica? Daniel Torres-Salinas Grupo EC3, Universidad de Navarra torressalinas@gmail.com
  1. A particular slide catching your eye?

    Clipping is a handy way to collect important slides you want to go back to later.

×