MÓDULO 1.CURSO UPV/EHU. Criterios generales de evaluación. ANECA, CNEAI y UNIQUAL

  • 4,498 views
Uploaded on

Torres-Salinas, D; Jiménez-Contreras, E. Cómo utilizar los indicadores bibliométricos para la solicitud de sexenios y acreditaciones / Nola erabili adierazle bibliometrikoak seiurtekoak eta …

Torres-Salinas, D; Jiménez-Contreras, E. Cómo utilizar los indicadores bibliométricos para la solicitud de sexenios y acreditaciones / Nola erabili adierazle bibliometrikoak seiurtekoak eta egiaztapenak eskatzeko. Organizado por el Vicerrertorado de Investigación de la Universidad del País Vasco-Euskal Herriko Unibertsitateko. San Sebastián, Bilbao, Vitoria, 1-3 de Diciembre de 2009

Y éstos son los diferentes módulos para cada uno de ellos te adjunto un pdf, te los voy mandando uno a uno

- MÓDULO 1. Criterios generales de evaluación. ANECA, CNEAI y UNIQUAL
- MÓDULO 2. Criterios por Área para artículos de revista científica
- MÓDULO 3. Cómo localizar los indicios de calidad: fuentes de información
- MÓDULO 4.Consejos para mejorar la difusión y recuperación de los trabajos

  • Full Name Full Name Comment goes here.
    Are you sure you want to
    Your message goes here
    Be the first to comment
No Downloads

Views

Total Views
4,498
On Slideshare
0
From Embeds
0
Number of Embeds
1

Actions

Shares
Downloads
108
Comments
0
Likes
4

Embeds 0

No embeds

Report content

Flagged as inappropriate Flag as inappropriate
Flag as inappropriate

Select your reason for flagging this presentation as inappropriate.

Cancel
    No notes for slide

Transcript

  • 1. presentación http://ec3.ugr.es http://ec3noticias.blogspot.com Daniel Evaristo Jiménez Torres Contreras Salinas (director) (postdoc) postdoc)
  • 2. Contenido 1. Criterios generales de evaluación: ANECA, CNEAI y UNIQUAL. 2. Criterios específicos para revistas científicas por áreas. 3. Cómo localizar indicios de calidad. 4. Consejos para mejor la difusión y recuperación de nuestros trabajos.
  • 3. Cursus honorum
  • 4. Éxito en las acreditaciones
  • 5. Evaluación integral, dimensiones
  • 6. Finalidad ANECA
  • 7. Aspectos a tener en cuenta • Baremo muy detallado • Aplicación informática muy compartimentada y muy lenta de completar • Evaluación por dos expertos y por un comité (consenso / mayoría) • Retroalimentación • Plazos
  • 8. peso ANECA a las publicaciones (1)
  • 9. peso ANECA a las publicaciones (2)
  • 10. LA AUTORÍA. CNEAI-ANECA ¿Cuántas publicaciones?
  • 11. Fundamentos ANECA de Evaluación
  • 12. Fundamentos ANECA de Evaluación
  • 13. Fundamentos ANECA de Evaluación En los ámbitos científicos de orientación básica (Ciencias y Ciencias de la Salud) se consideran especialmente las publicaciones en revistas de reconocido prestigio En los ámbitos de Arte y Humanidades, Ciencias Sociales y Jurídicas se valoran especialmente las publicaciones en revistas y libros de prestigio, así como creaciones artísticas y profesionales innovadoras En ámbitos mas aplicados como Ciencias Aplicadas, Ingenierías y Arquitectura se consideran de especial relevancia el desarrollo de patentes y actividades de transferencia de tecnología
  • 14. Fundamentos ANECA de Evaluación ¿Que significa publicaciones de prestigio? Es un indicador formal. ANECA, siguiendo a CNEAI considera que en los distintos ámbitos del conocimiento existen índices internacionales que ordenan por relevancia las publicaciones de reconocido prestigio Se inventa el concepto de Publicaciones en Revistas Indexadas con INDICE DE CALIDAD RELATIVO si bien, acto seguido las equipara a Publicaciones en Revistas recogidas en los Journal Citation Reports (JCR o equivalentes de cada especialidad JCR)
  • 15. LA AUTORÍA. CNEAI-ANECA Publicaciones en revistas Pueden considerarse también artículos en revistas sin ICR y en revistas no incluidas en las mencionadas base de datos, siempre que cumplan las siguientes características: •bibliográficos de su especialidad • Acepta y publica trabajos en mas de una lengua • Publica fundamentalmente trabajos de investigación Declara periodicidad y la cumple • Antigüedad superior a tres años • Publica un % elevado de trabajos de autores externos a la revista (Consejo de Redacción e institución editora) • Cuenta con Comité Científico de nivel internacional
  • 16. Publicaciones Indexadas Vs No indexadas ANECA clasifica en dos bloques: Revistas Revistas no Indexadas o con Indexadas o sin Índice de Índice de Calidad Relativo Calidad Relativo
  • 17. Congresos Como Publicaciones Científicas en Revistas Ingeniería y Arquitectura: Excepcionalmente. Incluidos en Actas Excepcionalmente. de Congresos Internacionales de prestigio cuando tales congresos son medio de difusión comparable a revistas JCR y selección por Peer Review. Como Libros o Capítulos de Libro En todas las áreas de conocimiento. Congresos organizados por conocimiento. asociaciones internacionales o nacionales de periodicidad fija, que publican actas del congreso con contribuciones completas seleccionadas previamente mediante evaluación externa y con ISBN. ISBN. Como Congresos, Seminarios, .. (1.A.5 / 1.A.6) En todas las áreas de conocimiento, se valoran los de carácter internacional o nacional de especial relevancia en su ámbito, que incluyan revisión por pares y con la antigüedad suficiente para ser referentes en su ámbito
  • 18. Los libros • Libros y capítulos de libro de carácter científico e investigación, publicados en editoriales de prestigio nacional o internacional •Ediciones o traducciones anotadas • Reseñas bibliográficas; Prólogos • Ediciones de las tesis se valoran como libros monográficos solo si han sido publicadas en editoriales de prestigio • Preferentemente: libros con ISBN publicados en editoriales especializadas de reconocido prestigio que garanticen un riguroso proceso de selección y evaluación • Excluidos (aunque esta exclusión se cita solo en Ciencias Sociales y Jurídicas: libros de texto y manuales (Publicaciones docentes)
  • 19. Los libros Criterios ANECA Número de citas generadas (cantidad y calidad) Prestigio de la editorial, los editores, la colección en la que se publica la obra Reseñas en las revistas científicas especializadas Acreditar riguroso proceso de selección y evaluación de originales Que no estén publicados por la misma institución en la que trabaja el investigador, salvo que ésta satisfaga los criterios especificados en el Apéndice 1 Traducciones de la propia obra a otras lenguas Inclusión en bibliografías independientes del autor y su entorno Presencia en bases de datos, repertorios bibliográficos especializados y catálogos de bibliotecas universitarias Acreditar un proceso de selección riguroso mediante evaluadores externos a las Universidades de la Comunidad Autónoma (Derecho) Poseer ISBN (imprescindible)
  • 20. Creaciones artísticas • En áreas de A&H caracterizadas por actividades de creación artística, estos méritos son especialmente valorados, y pueden suplir carencias en publicaciones en revistas, pero siempre en función del reconocimiento de las obras artísticas, que podrán ser: • creaciones profesionales o artísticas, obras artísticas por encargo, presentadas en exposiciones y/o ferias, museos, informes científicos y técnicos, trabajos presentados a premios y concursos, participación en exposiciones, fotografías científicas, aportaciones vinculadas a la valoración, incremento y disfrute del patrimonio histórico y artístico (Arqueología, arte..) Indicios de calidad obras artísticas o profesionales • Participación en exposiciones como autor o comisario con publicación de catálogo con impacto en los medios especializados • Premios, distinciones o menciones de calidad obtenidas • Reconocimiento profesional y público • Impacto obtenido en la crítica especializada
  • 21. Proyectos y Contratos • Participación como IP o como investigador en Proyectos de programas competitivos de la UE u otros organismos internacionales, Planes Nacionales, Autonómicos y de otros organismos públicos y privados. Requisitos: obtenidos en convocatorias competitivas, sometidos a evaluación externa por agencias nacionales o internacionales como la ANEP o similar • Participación como IP o como investigador en Contratos de investigación con la Administración Pública, instituciones o empresas, siempre que generen conocimiento (si no a 1.C.2 transferencia al sector productivo) • Otros méritos asociados a los proyectos y contratos: pertenencia a redes internacionales, publicaciones especializadas derivadas y autoría en informes técnicos asociados a contratos. La participación como IP en Proyectos de relevancia se valora adicionalmente también como mérito de gestión en 4.C (TU) 3.C (CU
  • 22. Transferencia • Patentes y productos con RPI Especialmente valorada en ámbitos tecnológicos en los que esta actividad es significativa • Patentes nacionales o internacionales en explotación o con contrato de cesión o licencia • Patentes solicitadas que hayan superado alguna fase de valoración • Productos con RPI (obras artísticas, técnicas, programas informáticos Transferencia de conocimiento al sector productivo • Actividades innovadoras de transferencia de conocimiento, informes, desarrollo de sofware en explotación, colaboración con empresas • Actividades ligadas al mantenimiento e incremento del patrimonio cultural, artístico, museístico • Cursos y seminarios impartidos en empresas y organismos públicos asociados a transferencia de resultados o a formación de personal cualificado
  • 23. Otros méritos Movilidad • Estancias media/larga (superiores a 1 mes) en centros de investigación de prestigio • Becas y ayudas o contratos obtenidos en convocatorias competitivas para realizar estancias Otros meritos Actividad Investigadora • Evaluador (Peer) de artículos para revistas JCR o equivalentes • Evaluador de proyectos (ANEP o similares) • Pertenencia a comisiones de selección de solicitudes de movilidad OJO. Pertenencia a Consejos editoriales revista JCR o equivalentes en méritos de gestión 3.C (CU), 4.C (TU)
  • 24. Aplicación informática ANECA
  • 25. Aplicación informática ANECA
  • 26. Aplicación informática ANECA
  • 27. Aplicación informática ANECA * * Este campo también aparece en el apartado de revistas indexadas
  • 28. Criterios 2009 Ojo Ayer se publicaron los criterios para la convocatoria 2009. Hasta donde hemos podido comprobar los criterios se mantienen prácticamente igual. Cambio significativo, se tendrán en cuenta “o aquellas revistas acreditadas por la FECYT”, si cumplen apéndice 1
  • 29. ÍNDICE S DE LA UPV/EHU ÍNDICE S = NSO/NSP NSO/NSP: NSO=número total de sexenios obtenidos por el colectivo NSP=número total de sexenios posibles para dicho colectivo.
  • 30. ÍNDICE S DE LA UPV/EHU
  • 31. ÍNDICE S DE LA UPV/EHU
  • 32. ÍNDICE S DE LA UPV/EHU
  • 33. ÍNDICE S DE LA UPV/EHU
  • 34. ÍNDICE S DE LA UPV/EHU
  • 35. LA AUTORÍA. CNEAI-ANECA CNEAI. Filosofía general -Introducir un régimen retributivo para incentivar, mediante evaluaciones, la actividad investigadora de calidad entre el profesorado de las Universidades y el CSIC- -Es aspiración de la CNEAI fomentar que los investigadores orienten sus trabajos a lograr resultados de amplia repercusión (internacional) científica y social -Se han constatado dos hechos desde la puesta en marcha del sistema: 1. la ciencia española ha experimentado un importante crecimiento tanto en calidad como en cantidad. 2. La CNEAI ha desarrollado una amplia experiencia evaluadora -Tanto es así que la CNEAI ha sido y es referente para otras agencias en tareas evaluadoras y políticas de evaluación de personas e instituciones -Tras la larga experiencia acumulada, la Resolución de 2005 consideró objetivo fundamental el precisar la objetivación de los criterios de evaluación a fin de poder determinar que investigación tiene suficiente repercusión científica y socioeconómica en base a la utilización de indicadores aceptados internacionalmente
  • 36. Fundamentos CNEAI de Evaluación Cinco aportaciones ordinarias Libros; capítulos de libro; prólogos (estudios preliminares de investigación con aportación valiosa), introducciones y anotaciones de textos; artículos en revistas; patentes o modelos de utilidad. En determinadas áreas de conocimiento, son también aportaciones ordinarias los desarrollos tecnológicos, proyectos arquitectónicos singulares, creaciones artísticas, actas de congresos de relevancia Excepcionalmente aportaciones extraordinarias: Informes, estudios, dictámenes; trabajos técnicos, artísticos; participación en exposiciones, excavaciones; dirección de tesis; comunicaciones a congresos
  • 37. Fundamentos CNEAI de Evaluación CNEAI precisa que exige a las aportaciones Contribución progreso del conocimiento, innovación o creatividad Participación relevante en los trabajos: argumentar participación y orden de firma Relevancia científica del medio de difusión en que se publica la aportación : Impacto (revistas), Editorial (Libros) Premios y distinciones recibidas: para creaciones artísticas Referencia que otros autores hacen y que sean indicativos de relevancia: se refiere a las citas Apreciaciones del propio interesado sobre las aportaciones de su trabajo al progreso del conocimiento. En publicaciones colectivas mencionar la contribución del solicitante Reseñas en revistas especializadas En patentes: datos de explotación económica
  • 38. LA AUTORÍA. CNEAI-ANECA CNEAI. El apéndice 1 - Resolución de 2005: incluye el Apéndice 1 con una lista de criterios mínimos de carácter formal, de calidad editorial y de difusión que debe cumplir un medio de difusión de la investigación (revista, libro o congreso) para que pueda ser reconocido a priori como de suficiente garantía - No obstante, se deja abierta la posibilidad para que los autores comuniquen a la Comisión las citas, valores y reconocimientos independientes que han tenido las publicaciones elegidas para su curriculum -Los requerimientos mínimos que se exponen para obtener una evaluación positiva tratan de reglar lo más posible el proceso evaluador y su aplicación no tiene carácter absoluto
  • 39. LA AUTORÍA. CNEAI-ANECA CNEAI. El apéndice 1 6. Anonimato en la revisión de los Apéndice 1 manuscritos. Criterios que hacen referencia a la 7. Comunicación motivada de la decisión calidad informativa 8. Existencia de un consejo asesor, formado por profesionales e 1. Identificación de los miembros de los investigadores de reconocida solvencia, comités editoriales y científicos. sin vinculación 2. Instrucciones detalladas a los autores. 3. Información sobre el proceso de Criterios sobre la calidad científica evaluación y selección de manuscritos o de las revistas jueces. 4. Traducción del sumario, títulos de los 9. Porcentaje de artículos de investigación; artículos, palabras clave y resúmenes al más del 75% de los artículos. inglés, en caso de revistas y actas de Congresos. 10. Autoría: grado de endogamia editorial, más del 75% de los autores serán externos Criterios sobre la calidad del proceso al comité editorial y ajenos a la organización editorial de la revista. editorial 11. Indexación de las revistas en las bases 5. Periodicidad de datos internacionales especializadas
  • 40. Hoja de evaluación CNEAI
  • 41. UNIQUAL peso investigación
  • 42. peso UNIQUAL a las publicaciones
  • 43. UNIQUAL = Imprecisión -No Indica criterios de calidad de las revistas ni de los libros ¿Cómo deben ser? - No da referencia sobre bases de datos - No hace distinciones entre disciplinas - Parece más una guía basada en ANECA que unos criterios Por ejemplo: Publicaciones Científicas Indexadas en revistas de nivel medio/alto de su área [¿?] Publicaciones Científicas en revistas con consejos de redacción o revisores nacionales [¿?] Consejo: en general las agencias autonómicas adoptan los criterios nacionales sin demasiado criterio, por tanto mejor seguir ANECA para interpretar los criterios UNIQUAL
  • 44. LA AUTORÍA. CNEAI-ANECA ¿Qué dicen las agencias de la autoría? CNEAI El número de autores no será evaluable como tal, pero si deberá estar justificado por el tema, complejidad y extensión del mismo: Campos 1,2,3,4,5,6: Física, Matemáticas, Biología Celular y Molecular, Ciencias Biomédicas, Ciencias de la Naturaleza, Ingenierías y Arquitectura Salvo que estuviera plenamente justificado por la complejidad del tema y/o la extensión del trabajo, un elevado número de autores puede reducir la calificación asignada a una aportación. Campos 7,8,10,11: Sociología, Política, Educación, Economía, Geografía, Psicología, Historia y expresión artística, Filosofía, Filología, Lingüística El número de autores de una aportación deberá estar justificado por el tema, complejidad y extensión del mismo. Para que una aportación sea considera, el solicitante deberá haber participado activamente haciendo constar su concreta autoría en la investigación publicada mediante referencia a páginas, capítulos o apartados. Sólo se valorará la labor investigadora personal individualizada del solicitante. Campos 9: Derecho ANECA Se tiene en cuenta la posición y el número de autores, reduciendo el valor de la publicación cuando este número sea superior a la media en la especialidad. Todas las áreas de conocimiento
  • 45. LA AUTORÍA. CNEAI-ANECA ¿Qué quieren evitar?
  • 46. LA AUTORÍA. CNEAI-ANECA ¿Cual debe ser el número de autores? (1) Número de autores (aprox.) en trabajos en revistas Web of Science (Principalmente internacionales y anglosajonas) Categoría Categoría Agricultura 4 Matemáticas 2 Ciencias de la Alimentación 4 Ing. Mecánica, naval, … 3 Ingeniería Civil y Arquitectura 3 Medicina 5 Ciencias Computación / Informática 3 Bioquímica y Biología Molecular 5 Ciencias Sociales 2/3 Psicología 3 Derecho 2 Química 4 Economía 2 Comunicaciones 3 Ing. Eléctrica y Electrónica 4 Farmacia y Farmacología 5 Filosofía, Filología 1 Ganadería y Pesca 5 Historia 1 Ciencias materiales 5
  • 47. LA AUTORÍA. CNEAI-ANECA ¿Cual debe ser el número de autores? (2) Número de autores (aprox.) en trabajos en revistas In-Recs/In-Recj In-Recs/In- (revistas nacionales) Categoría Antropología 1 Documentación 1/2 Ciencia Política 1 Comunicación 1 Economía 1/2 Educación 1/2 Geografía 2 Psicología 2 Sociología 1/2