Successfully reported this slideshow.
We use your LinkedIn profile and activity data to personalize ads and to show you more relevant ads. You can change your ad preferences anytime.

INDICADORES DE PRODUCCION CIENTIFICA

594 views

Published on

INDICADORES DE PRODUCCION CIENTIFICA

Published in: Healthcare
  • Be the first to comment

INDICADORES DE PRODUCCION CIENTIFICA

  1. 1. • El valor y el resultado de la investigación • Usos de la Bibliometría •¿Para qué se mide la ciencia? • Indicadores Bibliometricos. • Evaluación del Factor de Impacto. • Conclusiones. Dr Juan Carlos Munévar Niño
  2. 2. ¡El reconocimiento obtenido por los esfuerzos en investigación es mínimo ! De otro modo, el proceso quedaría inacabado! EN CIENCIAS DE LA SALUD Y EN EL ÁREA BIOMÉDICA DEBEMOS ESTUDIAR, ANALIZAR CRÍTICAMENTE NUESTROS RESULTADOS, REFLEXIONAR ANTE NUESTROS FRACASOS Y GENERAR NUEVAS IDEAS. POR ESO DEBEMOS INVESTIGAR. EL PRODUCTO FINAL DEL PROCESO CIENTIFICO ES NECESARIAMENTE LA PUBLICACION EN UNA REVISTA BIOMEDICA. Dr Juan Carlos Munévar Niño
  3. 3. Dr Juan Carlos Munévar Niño
  4. 4. Dr Juan Carlos Munévar Niño
  5. 5. Dr Juan Carlos Munévar Niño
  6. 6. INDICADORES CIENTÍFICOS Y TRANSMISION DEL CONOCIMIENTO La ciencia, la tecnología y la innovación son factores determinantes en el desarrollo económico y social de las sociedades modernas. En los países con un grado efectivo de progreso se ha demostrado que la Ciencia, la Tecnología y la Innovación son palancas esenciales para sustentar y promover el desarrollo socioeconómico y la calidad de vida, mediante la creación, difusión y aplicación práctica del conocimiento
  7. 7. Dr Juan Carlos Munévar Niño
  8. 8. Dr Juan Carlos Munévar Niño
  9. 9. Dr Juan Carlos Munévar Niño
  10. 10. Dr. Juan Carlos Munévar Niño INDICE h (Jorge Hirsch) El índice h es un sistema propuesto por Jorge Hirsch, de la Universidad de California, para la medición de la calidad profesional de físicos y de otros científicos, en función de la cantidad de citas que han recibido sus artículos científicos. Tomado en línea Noviembre 2 de 2016. http://www.uchile.cl/portal/informacion-y-bibliotecas/ayudas-y-tutoriales/100617/indice-h ¿Dónde se obtiene? •Desde la base de datos: ISI - Web of Science, Scopus y SCImago Journal & Country Rank. •Para las publicaciones a través de Google Académico se puede utilizar Publish or Perish (PoP).
  11. 11. PUBLICACIONES Medición de la actividad científica. CITAS Influencia intelectual, impacto, visibilidad de la información. COAUTORES Colaboración Científica Co-Citas Relaciones de conocimiento Dr Juan Carlos Munévar Niño
  12. 12. Dr Juan Carlos Munévar Niño
  13. 13. MEDICION DE LA PRODUCCION CIENTÍFICA POR PAÍS Ranking Iberoamericano de Producción Científica en Iberoamérica
  14. 14. Los indicadores de este ranking son: i) La Producción Científica (PC) de una institución en particular, que nos muestra el número de publicaciones científicas. ii) La Colaboración Internacional (CI), que nos muestra el cociente entre el número de publicaciones realizadas entre científicos de una institución y de diferentes países. iii) Calidad Científica Promedio (CCP) que compara la ‘calidad’ de la investigación de instituciones de diferentes tamaños y con distintos perfiles de investigación. Por ejemplo, 0.8 significa que una institución es citada 20% menos que la media mundial, mientras que 1.2 significa que fue citada un 20% más que la media mundial iv) Porcentaje de Publicaciones en revistas del primer cuartil (1Q), es decir el porcentaje de publicaciones que aparecen en el 25% superior de las revistas más prestigiosas del mundo) Ranking de Producción Científica en Iberoamérica Scimago Institutions Rankings http://bit.ly/2esPWeo <--- presione acá
  15. 15. Scimagoir.com/ranking
  16. 16. Objetivo de la Evaluación 1. Asignación de Recursos 2. Mejorar el desempeño científico 3. Incrementar el compromiso regional 4. Estimular la colaboración internacional 5. Promover la contratación y el ascenso en escalafón 6. Aumentar la productividad 7. Impacto en la calidad de la organización (Universidad, Centro de Investigaciones, etc.) 8. Analizar la innovación y el beneficio social 9. Sostenibilidad y su magnitud. 10. La Infraestructura en investigación Dr Juan Carlos Munévar Niño
  17. 17. ¿A quién evaluar? 1. Profesional a nivel Individual 2. El Grupo de Investigación 3. El Departamento o Sección 4. La Institución 5. El área de Investigación
  18. 18. ¿Qué evaluar a nivel Individual? Dr Juan Carlos Munévar Niño
  19. 19. Dr Juan Carlos Munévar Niño
  20. 20. Dr Juan Carlos Munévar Niño
  21. 21. Dr Juan Carlos Munévar Niño
  22. 22. Por que no analizar los aportes originales de los artículos nacionales / regionales o comprobar el impacto que alcanzan en la comunidad científica? Estimular con medidas efectivas y palpables la investigación y la publicación entre los odontólogos que aspiren a una carrera académica En Colombia, se subvalora el mérito científico de publicar en revistas nacionales de prestigio. Con frecuencia los investigadores clínicos son cuestionados y menospreciados
  23. 23. El factor de impacto se creo en la investigación biomédica para medir el valor de una revista Pero es mal utilizada para juzgar la calidad de un investigador así como la calidad de su trabajo. Se desarrollo inicialmente para ayudar a los bibliotecólogos a decidir a cuales revistas de alta referenciación suscribirse Calculando el promedio de referencias por articulo en un periodo de tiempo. Journal Citation Reports (JCR) Science Citation Index (SCI) Se generan fuentes de error y defectos, lo que resulta en fuertes sesgos contra la cultura y el lenguaje medico y científico.
  24. 24. Citas que provienen de artículos cuyos autores son miembros de los propios comités editoriales • En 9 de las revistas (35%), al menos el 25% de citas que componen el factor de impacto provienen de artículos con algún autor miembro del comité editorial. • En 13 revistas el porcentaje es del 20% o más. • En 10 de las 13 revistas anteriores, el 40% o más de las citas de editores proceden de artículos publicados en la propia revista (autocitas de revista). • Citas a artículos cuyos autores son miembros de los comités editoriales (citados) • Espacio en una revista ocupado por artículos cuyos autores son miembros de los comités editoriales
  25. 25. http://science.thomsonreuters.co m/ Institute for Scientific Information (ISI) ISI Web of Knowledgesm es la plataforma integrada basada en la Web que ofrece a todos los profesionales de la investigación científica y académica la forma más sencilla de adquirir y administrar información sobre investigaciones en un único y práctico punto de acceso. Herramientas y tecnologías sofisticadas que permiten a los usuarios obtener, analizar, y administrar con eficacia la información de investigaciones El Instituto para la Informacion Cientifica (ISI) fue fundado por Eugene Garfield en 1960. Fue adquirido por Thomson Scientific & Healthcare en 1992, convirtiendose en Thomson ISI y ahora es parte del negocio de Thomson Reuters Corporation.
  26. 26. Contenido analítico: Los datos basados en las citas ayudan a los usuarios a analizar y evaluar la influencia científica y académica. El contenido multidisciplinario proviene de publicaciones, actas de conferencias, patentes, reacciones y compuestos químicos y sitios Web internacionales, incluidos documentos individuales de esos sitios Web. (Web of Science, Current Contents Connect, ISI Proceedings, Derwent Innovations Indexsm) ISI Web of Knowledge Contenido complementario: Recursos especializados de prestigio obtenidos de sociedades con otros proveedores de información complementan el contenido principal de Thomson Scientific y garantizan una cobertura completa, facilidad de uso y diversidad de fuentes en cada disciplina. Contenido externo: Consulta en recursos electrónicos de alta calidad disponibles de forma gratuita no incluidos en ISI Web of Knowledge pero importantes para los investigadores. Contenido Web —Los documentos de la Web provienen de sitios Web evaluados de manera crítica y divididos en tres categorías: prepublicaciones, información de financiamiento y actividades de investigación • Journal Citation Reports® on the Web • Essential Science Indicators® http://science.thomsonreuters.com/es/productos/wok/ • Biological Abstracts® • Zoological Record®
  27. 27. ISI Web of Knowledge Personalización: Los usuarios crean perfiles y contraseñas: • Acceder a una lista de todas las búsquedas y alertas guardadas en todos los recursos de ISI Web of Knowledge. • Crear una lista personal de publicaciones (Personal Journal List) que se exhibe en la página principal, junto a vínculos directos de la tabla de contenido de las publicaciones preferidas. Alertas Opcionales: Los correos electrónicos de alerta mantienen a los investigadores al tanto con los últimos resultados de investigaciones. Administración bibliográfica personal Los usuarios pueden exportar registros para crear un archivo personal de información. Este archivo es útil durante el proceso de escritura de artículos a través de la inclusión de bibliografías exactas y de formato perfecto en cientos de estilos. Entre las herramientas se incluyen EndNote®, ProCite®, Reference Manager®, y WriteNote®
  28. 28. Munévar J. Instituto Unidad de Investigación Básica Oral. U.I.B.O. Universidad El Bosque. 2011 La versión Web de las mejores bases de datos de citas del mundo; la cobertura de prestigiosas publicaciones la realizan Science Citation Index Expandedtm, Social Science Citation Index®, Arts & Humanities Citation Index®, y dos bases de datos adicionales que permiten a los usuarios combinar búsquedas de química con búsquedas generales: Current Chemical Reactions®e Index Chemicus®. Búsqueda por referencias citadas: Para asegurar una búsqueda verdaderamente comprensiva. Herramienta de análisis (analyze tool): Permite a los usuarios acotar las búsquedas al extraer datos de los resultados. Un siglo completo de cobertura: Las investigaciones científicas del siglo XX de mayor influencia a nivel mundial ya están disponibles en la edición de Science Citation Index Expanded de Web of Science.
  29. 29. “Science Citation Index” (SCI) es una base de datos documental donde se recogen todas las contribuciones (artículos, editoriales, cartas, revisiones, discusiones, etc.) que se puedan publicar a las revistas de ciencia y tecnología indizadas por Thomson Reuters. A este índice de citación también se le conoce como ISI ya que en un principio la institución que producía en índice era el Instituto para la Información Científica, Institute for Scientific Information (ISI) Science Citation Index (SCI) Publicar en una revista indexada por el ISI es valorado de manera muy positiva en las políticas de evaluación científica.
  30. 30. ¿Qué es Journal Citation Reports? Journal Citation Reports (JCR) es una base de datos que ofrece una manera objetiva y sistemática para evaluar críticamente las revistas más importantes del mundo, con información cuantificable y estadísticas basadas en datos de citas. Disponibles las ediciones de Ciencias y Ciencias Sociales. Al recopilar las referencias citadas de los artículos, JCR web ayuda a medir la influencia y el impacto de la investigación en la revista y en su categoría y muestra la relación entre las citas y las revistas citadas.
  31. 31. ¿Qué contiene JCR? JCR Science Edition contiene datos de unas 5.900 revistas de ciencia y tecnología JCR Social Sciences Edition contiene datos de unas 1.700 revistas de ciencias sociales.  Los bibliotecarios pueden evaluar y documentar el valor de las inversiones en investigación de la biblioteca.  Los editores pueden determinar la influencia de las revistas en el mercado, para revisar las políticas editoriales y la dirección estratégica, supervisar a la competencia e identificar nuevas oportunidades.  Los autores y editores pueden identificar las revistas más apropiadas e influyentes en las que publicar  Los investigadores pueden descubrir dónde encontrar las novedades en sus respectivos campos.  Los analistas de la información pueden seguir tendencias y patrones de citas.
  32. 32. ¿Por qué Journal Citation Reports?  Ordena los datos de la revista por campos claramente definidos: factor de impacto, índice de inmediatez, citas totales, artículos totales, vida media de las citas o título de la revista.  Ordena los datos de materia por campos claramente definidos: citas totales, factor de impacto medio, factor de impacto agregado, índice de inmediatez agregado, vida media de las citas agregadas, número de revistas por categoría, número de artículos por categoría  Muestra el factor de impacto de la revista con el gráfico de la tendencia de los últimos 5 años y por categorías.  Muestra como inciden las auto-citas de una revista en su factor de impacto.
  33. 33. Uso de Journal Citation Reports  Los datos de citaciones no deberían ser el único factor a tener en cuenta en las evaluaciones de revistas. Hay que prestar atención a numerosos factores que pueden influir en el número de citas: idioma, historia y formato de la revista, calendario de publicación y especialidad.  El número de artículos listado en JCR incluye principalmente artículos de investigación y revisiones de artículos. Editoriales, cartas, resúmenes de congresos, etc. no se incluyen en los contadores de artículos ya que generalmente no se citan. Las revistas publicadas en otro idioma diferente del inglés o en alfabeto no romano pueden ser menos accesibles a los investigadores de otros países, lo que puede influir en los patrones de citas. Este factor debe tenerse en cuenta a la hora de hacer análisis comparativos de citas de revistas.
  34. 34. Búsquedas en JCR Para realizar una búsqueda en JCR debo seleccionar, en primer lugar, la edición y el año que quiero consultar. A continuación, una serie de opciones me permitirán adaptar la búsqueda y la visualización de resultados a mis necesidades específicas: 46
  35. 35. Búsquedas en JCR (2) Búsqueda por categoría: 47
  36. 36. Búsquedas en JCR (3) Búsqueda por categoría (datos de la revista): 48
  37. 37. Búsquedas en JCR (3) Búsqueda por categoría (datos de la categoría): 49 La información que me muestra corresponde a la categoría seleccionada.
  38. 38. Búsquedas en JCR (3) Búsqueda por revista: 50
  39. 39. Visualización de resultados (1) 51
  40. 40. Visualización de resultados (2) • Total de citas: se refiere al número total de veces que cada revista ha sido citada por el resto de revistas incluidas en la base de datos y dentro del año actual. • Factor de impacto: identifica la frecuencia con la que un artículo de una revista es citado en un año. • Factor de impacto de los últimos 5 años: es el número medio de veces que los artículos de la revista publicados en los últimos 5 años han sido citados, en el año JCR. Este indicador se puede utilizar para calibrar mejor el impacto de las revistas en los campos donde la influencias de las investigaciones publicadas se desarrolla durante un largo período de tiempo. • Índice de inmediatez: mide la frecuencia media con la que es citado un artículo de la revista el mismo año de su publicación. Útil para la evaluación de revistas que publican investigación de vanguardia. • Artículos: número de artículos publicados en el año • Vida media de las citas: da información de la edad de los artículos citados al mostrar el número de años a partir del año en curso que representan el 50% del total de citas a una revista en el año en curso. Este dato es útil en la gestión de la colección y en la toma de decisiones de archivo. 52 El listado de revistas aparece en este caso ordenado por títulos, vemos también información de ISSN y a continuación los datos analíticos:
  41. 41. Visualización de resultados (3) • Eigenfactor™ Metrics: basado en JCR considera no sólo el número de citas que recibe una revista sino también la estructura de la red de citas como una manera de medir la influencia de las citas en la literatura de investigación. Están disponibles para el año 2007 y posteriores. • Eigenfactor™ Score: la puntuación Eigenfactor se mide con las citas del año JCR actual a los artículos citables de los 5 años anteriores. Si bien el factor de impacto considera cada cita a una revista de la misma forma, la puntuación eigenfactor asigna un mayor peso a las citas procedentes de revistas influyentes. El nivel eigenfactor no tiene en cuenta las autocitas. La suma de las puntuaciones eigenfactor es 100, cada puntuación eigenfactor es un porcentaje de este total. • Article Influence™ Score: la puntuación Article Influence mide la importancia relativa de la revista en función de cada artículo. Se calcula dividiendo la puntuación Eigenfactor entre el número de artículos publicados por la revista. Esta fracción se normaliza de modo que la suma total de los artículos de todas las revistas sea 1. 53
  42. 42. Información de la revista (1) Presionando sobre el hipervínculo del título, el sistema me lleva a la pantalla de información de la revista: 54
  43. 43. Información de la revista (2) • Información de la revista: – Título completo – Título abreviado ISO – Título abreviado JCR – ISSN – Números por año – Idioma – País (Journal country or territory) – Editor – Dirección del editor – Materias. 55 Posición de la revista en la categoría
  44. 44. Información de la revista (3) 56 Percentil 75 Percentil 25 Mediana del Factor de impacto Valor medio Valor máximo, no atípico Valor mínimo, no atípico
  45. 45. Información de la revista (4) • Scope note: nos lleva a la descripción de la categoría asignada y su contenido. • View Journal Summary list: nos lleva al listado de revistas • View category data: datos de la categoría como: – Factor de impacto, índice de inmediatez, vida media de las citas, revistas, artículos – Gráfico de citas de la categoría – Frecuencia de publicación, etc… 57
  46. 46. Información de la revista (5) 58
  47. 47. Información de la revista (6) 59
  48. 48. Información de la revista (7) 60
  49. 49. Información de la revista (8) 61
  50. 50. Información de la revista (9) 62
  51. 51. Información de la revista (10) 63
  52. 52. Revistas seleccionadas La posibilidad de marcar las revistas seleccionadas es útil si desea guardar los datos de la revista en un fichero o si desea imprimirlos. 1)Marque la casilla de la revista que desea seleccionar 2)Clique actualizar lista de revistas seleccionadas para enviar la selección a la página “Lista de revistas seleccionadas”. Puede seleccionar hasta 500 revistas. 64
  53. 53. Lista de revistas seleccionadas
  54. 54. El Indice h El índice h es un sistema propuesto por Jorge Hirsch, PhD, de la Universidad de California, para la medición de la calidad profesional de físicos y de otros científicos, en función de la cantidad de citas que han recibido sus artículos científicos. Comparar el índice h de científicos que hayan vivido en épocas diferentes no tiene ningún sentido. Un científico tiene índice h si ha publicado h trabajos con al menos h Sistema de la medición de la productividad de un científico. Hirsch nos informa en Physics Today (Marzo 2011) que según el Institute for Scientific Information (ISI) el índice h de Albert Einstein es 50. Mucho más bajo que el 125 de Edward Witten, pero hay que recordar que Einstein publicó entre 1901 y 1955, y Witten publica desde 1976. Eran otros tiempos y se publicaba mucho menos que ahora. Por ejemplo, en los seis primeros meses de Physical Review en 1948 se publicaron 1.476 páginas, mientras que en los primeros 6 meses de 1998, Physical Review A-E tienen 39.141 páginas (muchos más artículos implica muchas más referencias).
  55. 55. El Índice ScientiCol mide el grado de desarrollo alcanzado por un grupo de investigadores, en términos de los resultados alcanzados en el periodo de tiempo especificado para la medición. El Índice ScientiCol se mide de la siguiente forma: Producción de Nuevo Conocimiento: corresponde a las actividades de investigación de los grupos, las cuales presentan resultados novedosos en Ciencia y Tecnología. Producción de Alto Nivel: es el índice correspondiente a la producción de mayor relevancia en los campos científico o tecnológico. Formación de Nuevos Investigadores: es el índice que captura la actividad de formación de Recursos Humanos para la investigación, mediante tesis de maestría o doctorado y la participación del grupo en programas de maestría o doctorado. Divulgación de Resultados: es el índice de divulgación y socialización de resultados, a través de diversos medios tales como: eventos académicos, medios de comunicación; entre otros.
  56. 56. El escalafón de grupos colombianos de investigación en ciencia, tecnología e innovación consta de cinco categorías: A1, A, B, C y D . Se accede a cada categoría cumpliendo con los siguientes requisitos: • Categoría A1: Tener un índice ScientiCol mayor o igual a 9.0 y al menos 5 años de existencia. • Categoría A: Tener un índice ScientiCol mayor o igual a 7.0 y al menos 5 años de existencia. • Categoría B: Tener un índice ScientiCol mayor o igual a 4.0 y al menos 3 años de existencia. • Categoría C: Tener un índice ScientiCol mayor o igual a 2.0 y al menos 2 años de existencia. • Categoría D: Tener un índice ScientiCol mayor a 0.0 y al menos 1 año de existencia. Ventana de Observación: Se define como el intervalo de tiempo en que se contara la producción del grupo; la observación estará limitada a las actividades actuales o recientes del grupo, entendiéndose por reciente el período de los últimos 5 años, contados hacia atrás, a partir de 31 de diciembre del año anterior con respecto al año en que se realiza la convocatoria de medición de grupos. CATEGORIAS DEL ESCALAFON SCIENTICOL
  57. 57. El factor de impacto de las revistas científicas es uno de los indicadores bibliométricos más utilizados. Este indicador es una de las variables que más influye en la generación de nuevo conocimiento y en el desarrollo de la investigación científica. Los factores de impacto de las revistas determinan, directa o indirectamente: La asignación de millones de dólares en proyectos de investigación, Promociones académicas, Complementos salariales, etc.
  58. 58. Factor de Impacto Evaluación de la producción científica, revistas, áreas e instituciones Importancia para la promoción académica y asignación de fondos El factor de impacto de una revista determinada se calcula cada año (por ejemplo, 2011) mediante un cociente: FI(2011)= Citasen2011adocumentospublicadosendicharevistaen2009y2010 Nºtotaldeartículospublicadosenesamismarevistaen2009y2010 http://www2.uah.es/jmc/
  59. 59. http://www.sciencegateway.org/rank/index.html
  60. 60. Para evaluar su compromiso en la investigación De acuerdo a la producción de publicaciones. Uso y mal uso del Factor de Impacto Actualmente el IF es el principal indicador dentro de la comunidad científica para evaluar las revistas científicas así como a los científicos Los ministerios de Ciencia en Corea del Sur, China y Pakistán remuneran económicamente sus científicos si son capaces de publicar en revistas con alto factor de impacto como: Nature, Science, Cell. En instituciones del mundo el FI acumulado de un profesor es el criterio mas importante para su promoción.
  61. 61. Como la idea original sobre el análisis de referencias se desarrollo para proteger contra la referenciación no crítica de información fraudulenta y/o controvertida Munévar J. Instituto Unidad de Investigación Básica Oral. U.I.B.O. Universidad El Bosque. 2011 La utilidad del FI es cuestionada ¡Representa popularidad en vez de prestigio!
  62. 62. Rey Rocha y col, Nature. 1999, demostraron discrepancias en el IF entre científicos o grupos de investigación de países que hablan y no hablan inglés. En la mayoría de países que no hablan inglés , la investigación no se publica en revistas de alto IF A veces es motivo de vergüenza para los científicos de esos países, pues sus revistas no aparecen indizados por el Science Citation Index (SCI) Las publicaciones científicas en revistas en español no están incluidas en SCI.
  63. 63. La comunidad científica persiste en emplear el IF para juzgar la calidad de un investigador. El factor de impacto no refleja la importancia de un artículo individual y además podría no definir y analizar la calidad de la contribución de un autor individual en dicho artículo El creador del IF, Eugene Garfield nunca predijo que este sería utilizado en la comunidad científica como un criterio para juzgar la calidad de un científico y determinar la adjudicación de recursos financieros a la investigación Su valor inicial fue para la administración de las colecciones de revistas en bibliotecas
  64. 64. • No existen parámetros específicamente diseñados para interpretar el IF El IF es a menudo usado equívocamente. Eugene Garfield. PhD. http://www.garfield.library.upenn.edu/ El factor de impacto es empleado para hacer comparaciones defectuosas entre las revistas académicas y científicas. Su valor inicial fue para la administración de las colecciones de revistas en bibliotecas. El mal uso de IF es un problema común en el área de la investigación, y los académicos se han quejado de esto desde hace tiempo.

×