Evaluacion y calidad de las revistas cientificas-Alonso

7,521 views

Published on

Taller Latindex. Ciudad de Panamá, 8 y 9 de septiembre de 2008

Evaluación y calidad de las revistas científicas. Octavio Alonso

Published in: Education, Technology, Business
2 Comments
10 Likes
Statistics
Notes
  • Excelente artículo que contribuye a todos los colegas inicien con pertinencia, calidad sus artículos científicos
    GRACIAS
       Reply 
    Are you sure you want to  Yes  No
    Your message goes here
  • Muy interesante el artículo.
       Reply 
    Are you sure you want to  Yes  No
    Your message goes here
No Downloads
Views
Total views
7,521
On SlideShare
0
From Embeds
0
Number of Embeds
395
Actions
Shares
0
Downloads
0
Comments
2
Likes
10
Embeds 0
No embeds

No notes for slide

Evaluacion y calidad de las revistas cientificas-Alonso

  1. 1. Seminario-Taller: Gestores y editores de revistas científicas en Panamá Evaluación y calidad de las revistas científicas José Octavio Alonso-Gamboa Dirección General de Bibliotecas, UNAM, México 9 de septiembre de 2008
  2. 2. Contenido <ul><li>Las revistas y sus funciones </li></ul><ul><li>Tipología de revistas según sus objetivos </li></ul><ul><li>Principales retos de la revista científica </li></ul><ul><li>Principales retos de la revista en América Latina </li></ul><ul><li>Indicadores de calidad para las revistas: </li></ul><ul><ul><li>Calidad intrínseca </li></ul></ul><ul><ul><li>Calidad formal </li></ul></ul><ul><li>Evaluación de revistas. Enfoques y usos </li></ul><ul><li>Revisión de diferentes esquemas </li></ul><ul><ul><li>Sistema Latindex </li></ul></ul><ul><ul><li>CONACYT, México </li></ul></ul><ul><ul><li>ISI Web of Science </li></ul></ul>
  3. 3. Las revistas y sus funciones <ul><li>Instrumento para el registro sistemático del conocimiento </li></ul><ul><li>Herramienta que otorga reconocimiento social a autores, editores, revisores y a las instituciones. </li></ul><ul><li>Canal de comunicación formal y público para difundir información </li></ul><ul><li>Valida la calidad de la información </li></ul><ul><li>Institución social que confiere prestigio y recompensas </li></ul><ul><li>Apoya a la construcción de comunidades científicas </li></ul><ul><li>Canal de comunicación preferido (y a menudo excluyente) para comunicar los avances del conocimiento </li></ul>
  4. 4. Tipología de revistas según sus objetivos <ul><li>Revistas de investigación científica : </li></ul><ul><li>Publican principalmente artículos originales, producto de la investigación científica o tecnológica. </li></ul><ul><li>Están dirigidas a un público altamente especializado. </li></ul><ul><li>Tienden a ser muy especializadas </li></ul><ul><li>Se publican en prácticamente todas las disciplinas científicas: ciencias exactas y naturales; tecnología; ciencias sociales y humanidades. </li></ul>
  5. 5. Tipología de revistas según sus objetivos <ul><li>Revistas técnicas y profesionales </li></ul><ul><li>Difunden artículos cuyo objetivo es dar a conocer avances tecnológicos, productos y servicios profesionales </li></ul><ul><li>Sirven de instrumento para la enseñanza. </li></ul><ul><li>Los artículos que publican son resultado de la investigación aplicada. </li></ul><ul><li>Tienen una comunidad de lectores más amplia toda vez que, además de ser del interés de investigadores y científicos, están dirigidas también a profesionales, técnicos y docentes. </li></ul>
  6. 6. Tipología de revistas según sus objetivos <ul><li>Revistas de difusión científica y cultural: </li></ul><ul><li>Son multidisciplinarias en su contenido. </li></ul><ul><li>Permiten llevar la ciencia a audiencias más amplias </li></ul><ul><li>Pone al alcance de no especialistas, información de naturaleza académica. </li></ul><ul><li>En los artículos publicados en este tipo de revistas se utiliza un lenguaje que es de acceso para un público universitario o con ese nivel escolar. </li></ul>
  7. 7. Tipología de revistas según sus objetivos Al conjunto de revistas científicas, técnicas y difusión se le suele identificar genéricamente como revistas académicas , es decir, aquellas que contienen de manera sistemática información de interés para investigadores, especialistas, profesionales, técnicos, estudiantes, y agentes de actividades productivas, educacionales y culturales. El término no incluye revistas que sean de interés para los integrantes de empresas o entidades específicas, ni las de carácter exclusivamente promocional de productos o servicios.
  8. 8. Principales retos de la revista científica <ul><li>Proliferación a causa de un aumento en las actividades de investigación y la importancia dada a la revista como un mecanismo de prestigio académico </li></ul><ul><li>Mayor número de personas que publican (síndrome del publish or perish ) </li></ul><ul><li>Creciente especialización y compartimentación de las disciplinas </li></ul><ul><li>Creciente industria de la información comercial </li></ul><ul><li>Vertiginoso desarrollo de la tecnología </li></ul><ul><li>El soporte electrónico no ha aumentado el acceso a la información a revistas editadas dentro del círculo comercial </li></ul>
  9. 9. Principales retos de la revista en América Latina <ul><li>Gestión editorial </li></ul><ul><li>Problemas de sustentabilidad, que se traducen en dificultad para cumplir con los plazos de aparición. </li></ul><ul><li>Periodicidad poco frecuente: revistas con frecuencias semestrales o anuales. </li></ul><ul><li>Dificultades para cumplir con la periodicidad </li></ul><ul><li>Observancia irregular de normas editoriales, por lo que a menudo no cumplen con criterios formales de presentación. </li></ul>
  10. 10. Principales retos de la revista en América Latina <ul><li>Difusión y visibilidad </li></ul><ul><li>Contenidos de carácter local o nacional que pueden no ser de interés para las bases de datos internacionales. </li></ul><ul><li>Prevalencia de contenidos en idiomas nacionales, con las mismas consecuencias del punto anterior. </li></ul><ul><li>Dificultades para identificar las revistas existentes, debido a problemas de distribución, escasa presencia en bibliotecas o en directorios de revistas. </li></ul>
  11. 11. Indicadores de calidad para las revistas Calidad intrínseca : I ndaga sobre la estructura y contenido de las contribuciones (artículos), así como los mecanismos que la revista tiene para asegurar la calidad de sus contenidos. Calidad formal : Observancia de normas y aspectos relacionados con la gestión editorial de una revista
  12. 12. Evaluación de revistas: enfoques y usos <ul><li>Bibliotecas : p ara seleccionar revistas a ser adquiridas para desarrollar una colección </li></ul><ul><li>Organismos de política científica : para identificar un núcleo de revistas a ser financiadas </li></ul><ul><li>Editores : para ayudarlos en la presentación formal de sus revistas </li></ul><ul><li>Bases de datos : para seleccionar revistas a ser difundidas en algún servicio de información </li></ul>
  13. 13. Revisión de diferentes esquemas <ul><li>Criterios de calidad formal </li></ul><ul><li> Sistema Latindex </li></ul><ul><li>2. Agencias financiadoras nacionales </li></ul><ul><li>Consejo Nacional de Ciencia y Tecnología de México </li></ul><ul><li>3. Bases de datos de cobertura mundial </li></ul><ul><li>ISI Web of Knowledge </li></ul>
  14. 14. Latindex <ul><li>Sistema regional de información para las revistas científicas de América Latina, el Caribe, España y Portugal. </li></ul><ul><li>Producto del trabajo cooperativo de 17 países. </li></ul><ul><li>Creado en 1997, disponible para consulta gratuita en http://www.latindex.org </li></ul><ul><li>Ofrece tres bases de datos: </li></ul><ul><li>Directorio . Registro amplio de revistas académicas, en papel y/o electrónicas, vigentes o cesadas. 16,800 revistas </li></ul><ul><li>Catálogo . Selección de revistas vigentes que cumplen criterios de calidad editorial. 3,215 revistas </li></ul><ul><li>Revistas electrónicas . Enlaza a revistas disponibles a texto </li></ul><ul><li>completo. 2,686 revistas </li></ul>
  15. 15. Catálogo Latindex <ul><li>Sistema de información sobre indicadores de calidad editorial de las revistas, basados en características de aplicación internacional. </li></ul><ul><li>Disponible para consulta desde finales de 2002 </li></ul><ul><li>Se califican las revistas previamente registradas en el Directorio </li></ul><ul><li>Cada país aplica la batería de criterios a sus respectivas revistas nacionales </li></ul><ul><li>Todavía se continua el proceso de aplicación de los criterios por lo que más revistas irán incorporándose al catálogo </li></ul><ul><li>El catálogo Latindex ha sido utilizado por otros servicios de información como un referente de calidad de las revistas. </li></ul>
  16. 16. Criterios para revistas impresas <ul><li>Características básicas </li></ul><ul><li>( obligatorias ) </li></ul><ul><li>1.- Mención del cuerpo Editorial </li></ul><ul><li>2.- Contenido (40% académico ) </li></ul><ul><li>3.- Antigüedad mínima 1 año </li></ul><ul><li>4.- Identificación de los autores </li></ul><ul><li>5.- Lugar de edición </li></ul><ul><li>6.- Entidad editora </li></ul><ul><li>7.- Mención del Director </li></ul><ul><li>8.- Mención de la Dirección </li></ul>Características de presentación de la revista (9) 9 .- Páginas de presentación 10.- Mención de periodicidad 11.- Tabla de contenidos (Índice) 12.- Membrete bibliográfico al inicio del artículo 13.- Membrete bibliográfico en cada página 14.- Miembros del consejo editorial 15.- Afiliación institucional de los miembros del consejo editorial 16.- Afiliación de los autores 17.- Recepción y aceptación de originales Revistas impresas
  17. 17. <ul><li>Características de gestión y política editorial (8) </li></ul><ul><li>18.- ISSN </li></ul><ul><li>19.-Definición de la revista </li></ul><ul><li>20.- Sistema de arbitraje </li></ul><ul><li>21.- Evaluadores externos </li></ul><ul><li>22.- Autores externos </li></ul><ul><li>23.- Apertura editorial </li></ul><ul><li>24.- Servicios de información </li></ul><ul><li>25.- Cumplimiento de periodicidad </li></ul><ul><li>Características de los contenidos (8) </li></ul><ul><li>26.- Contenido (40% original ) </li></ul><ul><li>27.- Instrucciones a los autores </li></ul><ul><li>28.- Elaboración de las referencias bibliográficas </li></ul><ul><li>29.- Exigencia de originalidad </li></ul><ul><li>30.- Resumen </li></ul><ul><li>31.- Resumen en dos idiomas </li></ul><ul><li>32.- Palabras clave </li></ul><ul><li>33.- Palabras clave en dos idiomas </li></ul>
  18. 18. <ul><li>Características básicas (obligatorias) </li></ul><ul><li>Mención del cuerpo editorial </li></ul><ul><li>Contenido científico </li></ul><ul><li>Generación continua de contenidos </li></ul><ul><li>Identificación de los autores </li></ul><ul><li>Entidad editora </li></ul><ul><li>Mención del editor </li></ul><ul><li>Mención del URL de la revista </li></ul><ul><li>Mención de la dirección </li></ul><ul><li>Características de presentación de la revista </li></ul><ul><li>Navegación y funcionalidad </li></ul><ul><li>Mención de periodicidad </li></ul><ul><li>Acceso a los contenidos </li></ul><ul><li>Acceso histórico al contenido </li></ul><ul><li>Membrete bibliográfico al inicio del artículo </li></ul><ul><li>Miembros del consejo editorial </li></ul><ul><li>Afiliación institucional de los miembros </li></ul><ul><li>Afiliación de los autores </li></ul><ul><li>Recepción y aceptación de originales </li></ul>Revistas electrónicas
  19. 19. <ul><li>Características de gestión y política editorial </li></ul><ul><li>ISSN </li></ul><ul><li>Definición de la revista </li></ul><ul><li>Sistema de arbitraje </li></ul><ul><li>Evaluadores externos </li></ul><ul><li>Autores externos </li></ul><ul><li>Apertura editorial </li></ul><ul><li>Servicios de información </li></ul><ul><li>Cumplimiento de periodicidad </li></ul><ul><li>Características de contenido </li></ul><ul><li>Contenido original </li></ul><ul><li>Instrucciones a los autores </li></ul><ul><li>Elaboración de referencias bibliográficas </li></ul><ul><li>Exigencia de originalidad </li></ul><ul><li>Resumen </li></ul><ul><li>Resumen en dos idiomas </li></ul><ul><li>Palabras clave </li></ul><ul><li>Palabras clave en dos idiomas </li></ul><ul><li>Metaetiquetas </li></ul><ul><li>Buscadores </li></ul><ul><li>Servicios de valor añadido </li></ul>Revistas electrónicas
  20. 20. Consejo Nacional de Ciencia y Tecnología (CONACYT), México Mantiene el Índice de Revistas Mexicanas de Investigación Científica y Tecnológica con base en un ejercicio de evaluación. Las revistas seleccionadas reciben financiamiento y estímulos durante un período de cinco años. Forman parte del Índice 99 revistas mexicanas como resultado de la Convocatoria 2006-2007 http :// www.conacyt.mx / Indice / Index_ListadoCompleto.html
  21. 21. CONACYT-Criterios generales de evaluación <ul><li>Contenido </li></ul><ul><li>Arbitraje </li></ul><ul><li>Edición y distribución </li></ul><ul><li>Aspectos formales (normatividad editorial) </li></ul><ul><li>http://www.conacyt.mx/Indice/Convocatorias/Criterios_Eval_Revistas_0607.pdf </li></ul>
  22. 22. 1. Contenido 1.1 Artículos y reseñas resultado de la investigación . Al menos un 75% de todos los documentos publicados en un año deben ser artículos o reseñas producto de la investigación, con resultados originales y sujetas a un estricto arbitraje. No deben incluirse en los números regulares materiales como memorias de congresos; en todo caso, éstas deberán publicarse en números especiales o suplementos. 1.2 Autores externos . Al menos el 60% de los documentos publicados durante un año deben provenir de autores cuya adscripción es diferente al de la institución editora de la revista.
  23. 23. 2. Arbitraje 2.1 Comité editorial . Debe estar formado por investigadores de calidad reconocida por la comunidad nacional o internacional. Es fundamental que su composición sea multinacional. Debe evitarse que el director de la institución editora sea ( ex oficio ) el director de la revista. 2.2 Cartera de árbitros . Debe contar con especialistas de todas las áreas (o subáreas) que cubre la revista y estar compuesta por líderes en su especialidad, adscritos a instituciones nacionales y extranjeras. Los artículos generados por la institución editora de la revista no deben ser evaluados por árbitros de la misma.
  24. 24. 2. Arbitraje 2.3 Calidad del arbitraje . El arbitraje debe estar documentado y ser riguroso, especializado y argumentado. Cada artículo publicado debe ser aprobado al menos por dos árbitros. El rigor debe ser apreciado en las respectivas actas de dictámenes . Se debe mencionar la originalidad y calidad del artículo, así como su contribución al campo de conocimiento. Se debe omitir el nombre del árbitro y en caso de emplear un formato, éste debe obligar al comentario in extenso . Se debe incluir el índice de rechazo de la revista.
  25. 25. 3. Edición y distribución 3.1 Antigüedad . Una trayectoria mínima de tres años de publicación ininterrumpida , para evaluar la trayectoria y evolución de la revista. En el caso de revistas electrónicas deberán estar disponibles en línea con la misma antigüedad. 3.2 Periodicidad y puntualidad . La periodicidad mínima debe ser semestral. La publicación debe ser ininterrumpida y sin retraso conforme la periodicidad establecida y la fecha de publicación debe estar especificada. No se acepta que un solo número cubra todos los correspondientes a un volumen o a un año. Para las revistas electrónicas se debe hacer explícita la periodicidad de la publicación en la página descriptiva y sus características de publicación.
  26. 26. 3. Edición y distribución 3.3 Distribución . La revista debe tener distribución nacional e internacional. Se debe anexar la estadística de distribución. La revista electrónica tiene que estar en Internet con un módulo de estadísticas que permita conocer el número de accesos; descargas de artículos por formato; número de visitantes y países de origen. Dicho módulo debe estar visible para el usuario.
  27. 27. 4. Aspectos formales 4.1 Estructura de los artículos . Cada artículos debe incluir: resumen; palabras clave; fechas de recepción y aceptación, así como la dirección institucional de los autores. 4.2 Normatividad editorial . Portada (título, fecha, ISSN, volumen y número). Contraportada (nombre de los editores; comité y/o consejo editorial) Tabla de contenido Colofón (fecha de impresión y tiraje) Instrucciones a los autores
  28. 28. 4. Aspectos formales 4.3 Visibilidad . La revista debe mostrar su visibilidad a través de su registro en servicios de índices y resúmenes internacionales, relevantes al área de especialidad de la revista. La lista de índices y resúmenes donde está registrada la revista debe ser visible, tanto en las versiones impresas como electrónicas.
  29. 29. Consideraciones sobre los ejercicios de evaluación de las agencias financiadoras <ul><li>Determina qué revistas deben ser financiadas en función de las características de la revista </li></ul><ul><li>Requiere (por parte de los editores) la conformación de un expediente voluminoso y detallado que permita validar algunas de los requerimientos de evaluación </li></ul><ul><li>Los editores solo ven enunciados generales de los criterios, no explicación a detalle </li></ul><ul><li>El perfil de evaluación no beneficia a las revistas de divulgación, aunque éstas cumplan con la rigurosidad demandada </li></ul><ul><li>Los parámetros se aplican por igual a revistas de diferentes disciplinas (el caso de los anuarios). </li></ul><ul><li>Parámetros controversiales : ¿Cómo medir la distribución adecuada de una revista? ¿Cómo medir la originalidad de una contribución? </li></ul>
  30. 30. ISI Web of Science <ul><li>Conjunto de tres bases de datos producidas por la compañía Thomson Scientific que provee acceso a artículos publicados en revistas académicas. </li></ul><ul><li>Los artículos están ligados entre sí por las referencias bibliográficas de cada artículo. </li></ul><ul><li>La compañía produce otras bases de datos (patentes, informes nacionales sobre citas, reacciones químicas, etc.) que en su conjunto constituyen el ISI Web of Knowledge </li></ul><ul><li>Se requiere pagar una suscripción anual para tener acceso </li></ul><ul><li>Herramienta que proporciona análisis estadísticos a partir de información bibliográfica compilada en una selección de revistas a nivel internacional </li></ul>
  31. 31. ISI Web of Science <ul><li>10,000 títulos de revistas (2007) </li></ul><ul><li>Cobertura retrospectiva hasta 1900 (Siglo de la Ciencia) </li></ul><ul><li>Cobertura multidisciplinaria </li></ul><ul><ul><li>Science Citation Index Expanded : 7,085 </li></ul></ul><ul><ul><li>Social Sciences Citation Index : 1,790 </li></ul></ul><ul><ul><li>Arts & Humanities Citation Index : 1,125 </li></ul></ul><ul><li>Registros bibliográficos con enlaces a textos completos </li></ul><ul><li>Cada año evalúan 4,000 títulos pero solamente aceptan el 10% </li></ul>
  32. 32. ISI Web of Science: criterios de selección <ul><li>Criterios básicos de publicación </li></ul><ul><li>- Puntualidad . Compromiso de publicar y distribuir a tiempo, el número de fascículos conforme a la periodicidad declarada. </li></ul><ul><li>- Normas editoriales . Los títulos tienen que ser informativos y proporcionar la dirección completa y normalizada de cada autor, incluyendo e-mail. Referencias completas. </li></ul><ul><li>- Información bibliográfica en inglés . Títulos, tablas de contenido, resúmenes y palabras clave. </li></ul><ul><li>- Revisión por pares . Verificación del método de revisión utilizado en cada revista. </li></ul>
  33. 33. ISI Web of Science: criterios de selección <ul><li>2. Contenido editorial </li></ul><ul><li>- Cobertura por tema . Si un tema está suficiente cubierto por el Web of Science , no se agregan nuevas revistas de ese tema. </li></ul>
  34. 34. ISI Web of Science: criterios de selección <ul><li>3. Diversidad internacional </li></ul><ul><li>- De autores y editores . ¿Los editores son miembros de algún consejo editorial fuera de su país? </li></ul><ul><li>- Enfoque global de los contenidos . ¿Los contenidos publicados reflejan el contexto global en que los investigadores se desempeñan actualmente? </li></ul><ul><li>- Uso internacional de la publicación . ¿La publicación está siendo utilizada en otros países? </li></ul><ul><li>- Publicaciones regionales relevantes . Son aceptadas, siempre que a juicio del ISI reflejen el “contexto global” en que se realiza la investigación. </li></ul>
  35. 35. ISI Web of Science: criterios de selección <ul><li>4. Análisis de citas </li></ul><ul><ul><li>Verifican las citas de la revista candidata, tanto en publicaciones ISI como no ISI </li></ul></ul><ul><ul><li>A partir del análisis verifican la influencia o aprovechamiento de la revista </li></ul></ul><ul><ul><li>Se valora si los autores y editores son miembros de algún consejo consultivo de relevancia nacional o internacional. </li></ul></ul>
  36. 36. Los indicadores de ISI <ul><li>Factor de impacto (FI) </li></ul><ul><li>Es un indicador calculado cada año por la empresa ISI Thomson solamente para las publicaciones que da seguimiento. El FI de cada revista es publicado en el Journal Citation Reports, que incluye unas 10,000 revistas. </li></ul><ul><li>Análisis de citas </li></ul><ul><li>Estudia las interrelaciones entre los documentos, con base en los patrones de citas y referencias que aparecen en cada artículo publicado. </li></ul>
  37. 37. El factor de impacto (FI) de ISI <ul><li>Es uno de los indicadores más referidos para valorar la calidad de una revista </li></ul><ul><li>El factor de impacto se usa a menudo como referente del reconocimiento que la comunidad científica otorga a cierta revista y con frecuencia se asocia también con la calidad de sus artículos </li></ul><ul><li>El FI se calcula con base en el número de veces en que los artículos publicados en un período de 2 años (2004-2005), han sido citados por las publicaciones a las que ISI da seguimiento a lo largo del siguiente año (2006). </li></ul>
  38. 38. 2006 2005 2004 Artículo fuente publicado en 2006 Referencias citadas en 2004 y 2005 Citas Todos los años previos 2003 2007 Factor de impacto = Cantidad de artículos publicados por una revista en los últimos dos años Número de citas recibidas en el mismo período Tiempo Factor de impacto 2006 Cálculo del Factor de impacto Fuente: Jim Testa, Thomson Corporation, 2006.
  39. 39. Algunas consideraciones sobre el factor de impacto de ISI <ul><li>Tiene una influencia enorme, pero controvertida, en cuanto a la manera como las revistas científicas son percibidas y evaluadas. </li></ul><ul><li>¿El número de citas mide calidad o cantidad? </li></ul><ul><li>Las citas no siempre son positivas </li></ul><ul><li>El factor de impacto no debe sustituir en ningún caso al análisis crítico del contenido de un artículo </li></ul><ul><li>Tendencia de los autores a citarse a sí mismos, por lo que el factor de impacto debe calcularse sin considerar las autocitas </li></ul><ul><li>Hay publicaciones cuyo tiempo de publicación y de citación requiere algo más de dos años </li></ul>
  40. 40. Algunas consideraciones sobre el factor de impacto de ISI <ul><li>Las agencias que financian la investigación utilizan el factor de impacto para valorar a las publicaciones y asignarles recursos y a los autores que publican en ellas, para otorgarles reconocimientos y estímulos. </li></ul><ul><li>El FI suele ser diferencial dependiendo de la naturaleza y especialidad de la revista. Por ejemplo, las revistas biomédicas tienden a tener un mayor factor de impacto que las de ciencias sociales o las de matemáticas. </li></ul><ul><li>Un buen factor de impacto aumenta la visibilidad de una revista ante su comunidad </li></ul><ul><li>Desventaja para las revistas de América Latina: pocas revistas indizadas y un bajo FI </li></ul>
  41. 41. Usos del FI <ul><li>Apoya en las decisiones para el desarrollo de colecciones de revistas especializadas </li></ul><ul><li>Herramienta de mercadotecnia para los editores al ubicar las revistas con mayor potencial </li></ul><ul><li>Resulta ser un mecanismo de evaluación del impacto de revistas específicas en cierta área del conocimiento </li></ul><ul><li>Mecanismo de evaluación de investigadores, líneas de investigación y ranking de instituciones. </li></ul>
  42. 42. ISI Web of Science: criterios de selección Para mayor información: Journal Selection Essay http://scientific.thomson.com/free/essays/selectionofmaterial/journalselection/
  43. 43. Muchas gracias José Octavio Alonso Gamboa [email_address]

×