Portfolio, la evaluación                   como herramienta para el                          aprendizaje                  ...
• Marco                        • Cambio cultural                        • Porqué Portfolio?                        • Ejemp...
Modelo de gestión                       del conocimiento               • Proyecto Semfyc               • Las sociedades ci...
MODELO DE GESTION DEL CONOCIMIENTO                                           SAMFYC 2012-2014                             ...
GLOBO DE CONOCIMIENTO 1                                                             SOCIO                                 ...
GLOBO DE CONOCIMIENTO                                         HERRAMIENTAS INDEPENDIENTES:                                ...
GLOBO DE CONOCIMIENTO 3                             PUBLICACIONES:                      Medicina de Familia Andalucía,    ...
GLOBO DE CONOCIMIENTO 4                                              HERRAMIENTAS DPP                                     ...
MODELO DE GESTION DEL CONOCIMIENTO                                           SAMFYC 2012-2014                             ...
Cambio cultural               • ¿Nos formamos para pasar las                 evaluaciones o nos evaluamos para            ...
Cambio cultural               • ¿Nos formamos para pasar las                 evaluaciones o nos evaluamos para            ...
CAMBIO CULTURAL:                  ENSEÑANZA: FORMAR PARA EVALUAR                  APRENDIZAJE: EVALUAR PARA FORMARdomingo ...
Pero para que                                  evaluarnos...                      SI QUEREMOS MEJORAR.......NECESIDAD DE  ...
Cómo las herramientas?               • CON OBJETIVOS CLAROS (QUE MIDE?)               • ORIENTADAS AL APRENDIZAJE. IMPACTO...
UTILIDAD: INSTRUMENTO IDEAL             100%                         HACE           PESO                      MUESTRA     ...
Cambio cultural               • ¿Nos formamos para pasar las                 evaluaciones o nos evaluamos para            ...
LO REAL                                       HACE                                     MUESTRA       SIMULACIÓN           ...
NO EXISTE EL                INSTRUMENTO PERFECTO!!!domingo 18 de noviembre de 2012
UTILIDAD COMO INSTRUMENTO                               INDIVIDUAL            100%       PESO                        0    ...
UTILIDAD PARA UN PROGRAMA DE                          FORMACIÓN              100%         PESO                          0 ...
UTILIDAD PARA LA SELECCIÓN                100%         PESO                            0                                  ...
UTILIDAD PARA LA FORMACIÓN DE                          RESIDENTES              100%           PESO                        ...
Circuitos de                                  evaluación                         SON AQUELLOS INSTRUMENTOS DE             ...
Cambio cultural               • ¿Nos formamos para pasar las evaluaciones                 o nos evaluamos para aprender?  ...
Qué es un Portfolio                            ES UNA COLECCIÓN DE                            EVIDENCIAS QUE              ...
Qué es un Portfolio            UN PORTFOLIO ES UNA HERRAMIENTA SIEMPRE              FORMATIVA (Y A VECES EVALUATIVA), EN L...
Tipos de Portfolio                SEGÚN SU OBJETIVO                     PORTFOLIO FORMATIVO (EVALUACIÓN                   ...
Qué no es un                                    Portfolio                  LO QUE PRIMA LA EVALUACIÓN                  FRE...
Ejemplos de                                  Documentos               REGISTROS CLÍNICOS        AUDIO Y VÍDEO             ...
Ejemplos de                                  Documentos                  INDICADORES DE LA      PUBLICACIONES (ARTÍCULOS, ...
Autorreflexión                                  “retrospectiva”domingo 18 de noviembre de 2012
UTILIDAD                   100%         PESO                              0                         U = (F   X   V   X   I...
Ventajas                        ENFOCADO AL AUTOAPRENDIZAJE                        (GENERA FUNDAMENTALMENTE               ...
Ventajas                        MAS BARATO SEGÚN Nº EVALUADOS Y                        ESTRUCTURA                        A...
Ventajas                          ESTIMULA LA FLEXIBILIDAD Y                          CREATIVIDAD                         ...
Ventajas                        ALTO ALFA CRONBACH 0.9 (RIQUELME                        2011, GALE 2010)                  ...
Desventajas                                   Portfolio               COMPLEJO DISEÑO               NO ES ÚTIL PARA VALORA...
Desventajas                           Portfolio 2004 DAVIS                 MENOR FIABILIDAD MELVILLE                 2005 ...
Revisiones sistemáticas                        Portfolio               OVEREEM 2007. POTENCIAL IMPORTANTE EN ANALISIS     ...
Ejemplos                PORTFOLIO INICIAL CAMFIC - 4 TAREAS 2002                PORTFOLIO DPI INTEGRAL DEL MF             ...
ACSA             SAS: 84768 PROF EN             29 HOSP Y MAS DE             1500 CS. 7106 ESP             HOSP Y 6484 ESP...
domingo 18 de noviembre de 2012
Portfolio docente del                        GCYS                  16 COMPETENCIAS: 3 DE CONOCIMIENTO, 7 DE               ...
Portfolio docente. Tareas                  T01.- EVALUACIÓN DE LOS DISCENTES AL                  PROFESOR DE ENTREVISTA CL...
Portfolio docente. Tareas                  T06.- PARTICIPACIÓN EN ACTIVIDADES DOCENTES Y                  DE INVESTIGACIÓN...
Nuestra experiencia                 TERMINAN: 41.25 % DEL INTEGRAL. 46,34 % DEL DOCENTE (MILLER                 2010 88 %)...
Nuestra experiencia                 ESTIMULA Y CREA AUTORREFLEXIÓN CON                 MÉTODO                 SE OBJETIVA ...
Nuestra experiencia                  NECESIDAD DE BENEFICIOS                  INSTITUCIONALES. CLARIFICAR                 ...
Proyecto Ara        Plan estratégico para la implantación por las instituciones           pública de procesos de Certificac...
Proyecto ARA (Acreditación-ReAcreditación)                                       Asociación Española de Biopatología Médic...
Recertificación ¿para qué?     • Aseguramiento de la propia calidad:                    Para confirmar que un médico cumple...
Recertificación ¿para qué?        • Como información a terceros:                      Para demostrar que se cumplen estánd...
Objetivo               Estimular a las administraciones públicas para generar              circuitos de evaluación de comp...
El complejo mundo de las                                  definiciones...               Certificación / Acreditación        ...
Metodología        • Evaluación Formativa, es decir primando el impacto          educativo, aunque pueda tener funciones s...
Metodología        • Desarrollo de herramientas formativas articuladas con los          procesos evaluativos        • Cada...
Organización        • Comité coordinador        • Comité Asesor del Proyecto ARA:                      Constituido por rep...
actividades realizadas               Consenso Documento ARA               Incorporación nuevas SSCC. Invitación FACME     ...
actividades realizadas               Plan de comunicación: Difusión mediática.               Difusión interna             ...
Si quiere contactar conmigo:                 CORREO. GOOGLE +:                 JOSEANTONIO.PRADOS@GMAIL.COM               ...
Graciasdomingo 18 de noviembre de 2012
FORMACION: PIRÁMIDE DE KIRKPATRICKdomingo 18 de noviembre de 2012
PARA TENER IMPACTO EDUCATIVO...                    ESTAR CENTRADO EN EL QUE APRENDE                     ESTAR BASADO EN LA...
ECOE                 = OSCE O EXAMEN MULTIESTACIÓN                 ES UN CONJUNTO DE ESTACIONES POR LAS QUE EL PROFESIONAL...
ECOE                    VENTAJAS: ACEPTABLE POR EL PROFESIONAL, FIABLE, VALIDEZ                    DE CONSTRUCTO, MEDICIÓN...
ASSESSMENT                    CIRCUITO DE EVALUACIÓN PROVENIENTE DEL MUNDO                    EMPRESARIAL QUE VALORA COMPE...
ASSESSMENT                    VENTAJAS: UTILIZA TÉCNICAS PARA EVALUAR COMPETENCIAS                    NO VALORADAS HABITUA...
REGISTRO CLÍNICO                   HISTORIA, INFORMES DE INTERCONSULTA O DERIVACIÓN,                   INFORMES CLÍNICOS, ...
INFORME DE AUTORREFLEXIÓN                    EL PROFESIONAL REFLEXIONA SOBRE DETERMINADOS                    ASPECTOS DE S...
AUDIO-VIDEOGRABACIONES                    LA GRABACIÓN DE SITUACIONES REALES ES LA TÉCNICA MAS                    ACEPTADA...
INCIDENTES CRÍTICOS                    ES UNA DE LAS MEJORES TÉCNICAS DE EVALUACIÓN POR LO QUE                    APORTA D...
INDICADORES DE LA PRÁCTICA                    PERFIL FARMACOLÓGICO, RESULTADOS CLÍNICOS…                    ESTOS INDICADO...
EVALUACIONES EXTERNAS                    PACIENTES, COLEGAS…                    LOS INFORMES DE COMPAÑEROS, PACIENTES, JEF...
HEFOR                    COMPETENCIA 1: ACTITUD DE APRENDIZAJE Y MEJORA                    CONTINUA                    COM...
QUE PIENSAN DEL PORTFOLIO?domingo 18 de noviembre de 2012
PORTFOLIO RESIDENTES CNE MF                    QUE APORTA:                        BASADO EN COMPETENCIAS Y EN EL PNE      ...
Organización        • Comité Coordinador del Proyecto ARA 2010:                      Jose Antonio Prados (Semfyc), Pilar d...
Upcoming SlideShare
Loading in …5
×

Portfolio uruguay 2012 red

801 views

Published on

Charla sobre aplicaciones del portfolio en Montevideo Nov 2012

Published in: Health & Medicine
0 Comments
1 Like
Statistics
Notes
  • Be the first to comment

No Downloads
Views
Total views
801
On SlideShare
0
From Embeds
0
Number of Embeds
2
Actions
Shares
0
Downloads
20
Comments
0
Likes
1
Embeds 0
No embeds

No notes for slide

Portfolio uruguay 2012 red

  1. 1. Portfolio, la evaluación como herramienta para el aprendizaje 11 Seminario Taller en DPMC Escuela de Graduados 7-9 Nov 2012 José Antonio Prados Castillejo Doctor en Medicina Especialista en Medicina Familiar y Comunitaria Vicepresidente de SAMFYC CS Lucano. Córdoba. Españadomingo 18 de noviembre de 2012
  2. 2. • Marco • Cambio cultural • Porqué Portfolio? • Ejemplos • Proyecto ARAdomingo 18 de noviembre de 2012
  3. 3. Modelo de gestión del conocimiento • Proyecto Semfyc • Las sociedades científicas y la gestión del conocimiento, un paso más allá del desarrollo profesional continuo. Prados Castillejo, José Antonio. Aten Primaria. 2010; 42:338-41. - vol.42 núm 06domingo 18 de noviembre de 2012
  4. 4. MODELO DE GESTION DEL CONOCIMIENTO SAMFYC 2012-2014 GENERACIÓN/CAPTACIÓN DEL CONOCIMIENTO HERRAMIENTAS IDENTIFICACIÓN HERRAMIENTAS NECESIDADES SOCIO DIFUSIÓN DEL INDIVIDUALES o CONOCIMIENTO COLECTIVAS HERRAMIENTAS DPP/DPI DESARROLLO PROFESIONAL PERSONALIZADO O INDIVIDUALIZADOdomingo 18 de noviembre de 2012
  5. 5. GLOBO DE CONOCIMIENTO 1 SOCIO GdT UUDD GdT Semfyc, Networks REd UUDD, CNE, Tutores, internacionales, Residentes... comunidades Especialmente Formación y de conocimiento... Aprendizaje Otras GENERACIÓN/CAPTACIÓN Universidad SSFF DEL CONOCIMIENTO MBE, Necesidades (Cartera de Servicios…) Otras Internet SSCC Pacientes Industria OTROS: Bancos de Talentos, Industria GdT.- Grupos de Trabajo SSFF.- Sociedades Federadas UUDD.- Unidades Docentes INVESTIGACIÓN SSCC.- Sociedades Científicasdomingo 18 de noviembre de 2012
  6. 6. GLOBO DE CONOCIMIENTO HERRAMIENTAS INDEPENDIENTES: Autoevaluación, Incidentes Críticos, Informe de Autorreflexión, PUNs and DENs, Autocheck list, Autoauditorias, peer-review, Imágenes clínicas, Simulaciones informáticas, Pacientes virtuales, Video/audiograbaciones, script, … HERRAMIENTAS ACSA PORTFOLIO IDENTIFICACIÓN NECESIDADES INDIVIDUALES/COLECTIVAS MBE, Necesidades (Cartera de Servicios…) SEIC ECOE HERRAMIENTAS GRUPALES: PBI, Foros, …PBI.- Técn. grupal análisis entrevistaSEIC.- Sistema Evaluación Integrada deCompetencias.Proyecto ARAMBE.- Med. Basada en la EvidenciaPUNS and DENS.- Autoevaluacióndomingo 18 de noviembre de 2012
  7. 7. GLOBO DE CONOCIMIENTO 3 PUBLICACIONES: Medicina de Familia Andalucía, CONGRESOS Y JORNADAS: Monografías, GPC y Consensos, Congreso Autonómico Micropildoras de GdT y Jornadas GdT, tutores Programas... y residentes HERRAMIENTAS CURSOS: WEB: Presenciales, Semipresenciales, Página Web, Publicaciones online, DIFUSIÓN DEL Online (Plataforma Moddle, Entornos inmersivos SL o similares) Blogs, Facebook, Twitter... CONOCIMIENTO Filosofía: Sostenibilidad, Acreditación, fuera papel, software libre... Recursos Semfyc: Otros: AMF, Publicaciones, Revistas, APP, Coaching/Mentoring, Multimedia, Cursos... Rotaciones, estancias extranjero,… @pontealdiaAPAMF.- Revista y JornadasSL.- Second LifeGPC.- Guías de Práctica clínicadomingo 18 de noviembre de 2012
  8. 8. GLOBO DE CONOCIMIENTO 4 HERRAMIENTAS DPP DESARROLLO PROFESIONAL PERSONALIZADO ¿Acuerdo ACSA? DOCENCIA/ WEB PERSONALIZADA TUTORIZACIÓN Mapa de Competencias URGENCIAS Perfil Competencial subjetivo/objetivo Herramientas evaluativas PPA GESTIÓN Acreditación ACSA MUTUAS LABOR OTRAS: Evaluación. Estructura INVESTIGACIÓN profesional Samfyc, … INTEGRAL RECERTIFICACIÓN Consejería, ACSA, ARA?ARA.- Proyecto Recertificación SSCCPPA.- Plan Personal de Aprendizaje MEDICO DE FAMILIAdomingo 18 de noviembre de 2012
  9. 9. MODELO DE GESTION DEL CONOCIMIENTO SAMFYC 2012-2014 GENERACIÓN/CAPTACIÓN DEL CONOCIMIENTO HERRAMIENTAS IDENTIFICACIÓN HERRAMIENTAS NECESIDADES SOCIO DIFUSIÓN DEL INDIVIDUALES o CONOCIMIENTO COLECTIVAS HERRAMIENTAS DPP/DPI DESARROLLO PROFESIONAL PERSONALIZADO O INDIVIDUALIZADOdomingo 18 de noviembre de 2012
  10. 10. Cambio cultural • ¿Nos formamos para pasar las evaluaciones o nos evaluamos para aprender? • Es mejor el feedback sobre lo que soy capaz de hacer o sobre lo que hago? • ¿Podemos encontrar pruebas en nuestra/ su práctica clínica diaria de lo que hacemos bien y de lo que es mejorable?domingo 18 de noviembre de 2012
  11. 11. Cambio cultural • ¿Nos formamos para pasar las evaluaciones o nos evaluamos para aprender? • Es mejor el feedback sobre lo que soy capaz de hacer o sobre lo que hago? • ¿Podemos encontrar pruebas en nuestra/ su práctica clínica diaria de lo que hacemos bien y de lo que es mejorable?domingo 18 de noviembre de 2012
  12. 12. CAMBIO CULTURAL: ENSEÑANZA: FORMAR PARA EVALUAR APRENDIZAJE: EVALUAR PARA FORMARdomingo 18 de noviembre de 2012
  13. 13. Pero para que evaluarnos... SI QUEREMOS MEJORAR.......NECESIDAD DE HERRAMIENTAS QUE HAGAN EXPLÍCITAS NUESTRAS: COMPETENCIAS CONSCIENTES COMPETENCIAS INCONSCIENTES INCOMPETENCIAS CONSCIENTES INCOMPETENCIAS INCONSCIENTESdomingo 18 de noviembre de 2012
  14. 14. Cómo las herramientas? • CON OBJETIVOS CLAROS (QUE MIDE?) • ORIENTADAS AL APRENDIZAJE. IMPACTO EDUCATIVO • VÁLIDAS, FIABLES, FACTIBLES, ACEPTABLES, BAJO COSTE • ACEPTADO POR COMUNIDAD CIENTÍFICA. DISEÑADAS/ SUPERVISADAS POR LOS PROPIOS PROFESIONALES • BASADO EN LA MEDIDA EN EL CUARTO ESCALÓN DE MILLER • SENCILLA Y BARATAdomingo 18 de noviembre de 2012
  15. 15. UTILIDAD: INSTRUMENTO IDEAL 100% HACE PESO MUESTRA CÓMO HACER SABE CÓMO HACER 0 U = (F X V X IE X A) / C SABE QUÉ HACER U = UTILIDAD !! F = FIABILIDAD ! V = VALIDEZ IE = IMPACTO EDUCATIVO ! A = ACEPTABILIDAD! C = COSTE MODIFICADO DE BRAILOVSKIdomingo 18 de noviembre de 2012
  16. 16. Cambio cultural • ¿Nos formamos para pasar las evaluaciones o nos evaluamos para aprender? • Es mejor el feedback sobre lo que soy capaz de hacer o sobre lo que hago? • ¿Podemos encontrar pruebas en nuestra/ su práctica clínica diaria de lo que hacemos bien y de lo que es mejorable?domingo 18 de noviembre de 2012
  17. 17. LO REAL HACE MUESTRA SIMULACIÓN CÓMO HACER SABE CÓMO EXPLICA LA ACCIÓN HACER CONOCE SABE QUÉ HACERdomingo 18 de noviembre de 2012
  18. 18. NO EXISTE EL INSTRUMENTO PERFECTO!!!domingo 18 de noviembre de 2012
  19. 19. UTILIDAD COMO INSTRUMENTO INDIVIDUAL 100% PESO 0 F V IE A Cdomingo 18 de noviembre de 2012
  20. 20. UTILIDAD PARA UN PROGRAMA DE FORMACIÓN 100% PESO 0 F V IE A Cdomingo 18 de noviembre de 2012
  21. 21. UTILIDAD PARA LA SELECCIÓN 100% PESO 0 F V IE A Cdomingo 18 de noviembre de 2012
  22. 22. UTILIDAD PARA LA FORMACIÓN DE RESIDENTES 100% PESO 0 F V IE A Cdomingo 18 de noviembre de 2012
  23. 23. Circuitos de evaluación SON AQUELLOS INSTRUMENTOS DE EVALUACIÓN DE COMPETENCIAS QUE PERMITEN COMBINAR DIFERENTES TÉCNICAS DE EVALUACIÓN DE TAL MANERA QUE SE PUEDA REALIZAR UNA VALORACIÓN MAS GLOBAL DE UN PROFESIONAL DETERMINADO LOS MAS CONOCIDOS: ECOE, ASSESSMENT, PORTFOLIO, SEICdomingo 18 de noviembre de 2012
  24. 24. Cambio cultural • ¿Nos formamos para pasar las evaluaciones o nos evaluamos para aprender? • Es mejor el feedback sobre lo que soy capaz de hacer o sobre lo que hago? • ¿Podemos encontrar pruebas en nuestra/ su práctica clínica diaria de lo que hacemos bien y de lo que es mejorable?domingo 18 de noviembre de 2012
  25. 25. Qué es un Portfolio ES UNA COLECCIÓN DE EVIDENCIAS QUE DEMUESTRAN QUE EL APRENDIZAJE PERSONAL NECESARIO HA SIDO COMPLETADO (RCGP, 1993)domingo 18 de noviembre de 2012
  26. 26. Qué es un Portfolio UN PORTFOLIO ES UNA HERRAMIENTA SIEMPRE FORMATIVA (Y A VECES EVALUATIVA), EN LA QUE UN PROFESIONAL RECOGE DE FORMA INTELIGENTE DOCUMENTOS O REGISTROS, “PRODUCTO” DE SU TRABAJO SOBRE LOS QUE INICIA, EL PROPIO PROFESIONAL (O A VECES TAMBIÉN UN OBSERVADOR EXTERNO), UN PROCESO REFLEXIVO (AUTOEVALUACIÓN) QUE LE AYUDE A IDENTIFICAR QUE COMPETENCIAS TIENE Y CUALES NECESITA MEJORAR, GENERANDO POR SI MISMO APRENDIZAJE (PORTFOLIO SEMFYC, 2007)domingo 18 de noviembre de 2012
  27. 27. Tipos de Portfolio SEGÚN SU OBJETIVO PORTFOLIO FORMATIVO (EVALUACIÓN FORMATIVA). PORTFOLIO EVALUATIVO (EVALUACIÓN SUMATIVA). SEGÚN SU ESTRUCTURA PORTFOLIO LIBRE. PORTFOLIO ESTRUCTURADO (O ESTANDARIZADO). PORTFOLIO SEMIESTRUCTURADO.domingo 18 de noviembre de 2012
  28. 28. Qué no es un Portfolio LO QUE PRIMA LA EVALUACIÓN FRENTE A LA FORMACIÓN (AUSENCIA PROCESO REFLEXIVO) EL CURRÍCULO O EL LIBRO CLÁSICO DEL RESIDENTEdomingo 18 de noviembre de 2012
  29. 29. Ejemplos de Documentos REGISTROS CLÍNICOS AUDIO Y VÍDEO (HISTORIA, INFORMES DE GRABACIONES DERIVACIÓN…) DATOS CURRICULARES TUTORÍAS Y PLANES DOCENTES INCIDENTES CRÍTICOS PLAN DE APRENDIZAJE DIARIO DE REFLEXIÓN (EVIDENCIAS DE (EMOCIONES Y APRENDIZAJE EN PROCESO SENTIMIENTOS O FINALIZADO) GENERADOS POR EL APRENDIZAJE) AUDITORÍA, AUTOAUDITORÍASdomingo 18 de noviembre de 2012
  30. 30. Ejemplos de Documentos INDICADORES DE LA PUBLICACIONES (ARTÍCULOS, PRÁCTICA (PERFIL LIBROS,…) FARMACOLÓGICO, RESULTADOS PROYECTOS DE CLÍNICOS…) INVESTIGACIÓN EVALUACIONES PROYECTOS COMUNITARIOS EXTERNAS (PACIENTES, PREMIOS Y LOGROS COLEGAS…) PERSONALES O RESULTADOS PROFESIONALES EXÁMENES CREATIVIDAD, IMAGINACIÓN… CASOS CLÍNICOSdomingo 18 de noviembre de 2012
  31. 31. Autorreflexión “retrospectiva”domingo 18 de noviembre de 2012
  32. 32. UTILIDAD 100% PESO 0 U = (F X V X IE X A) / Cdomingo 18 de noviembre de 2012
  33. 33. Ventajas ENFOCADO AL AUTOAPRENDIZAJE (GENERA FUNDAMENTALMENTE AUTORREFLEXIÓN WEBB 2012 OSULLIVAN 2012) ANÁLISIS DEL APRENDIZAJE NO DE FORMACIÓN (BROOMHEAD 2010) IMPORTANTE IMPACTO EDUCATIVO ÚNICO CIRCUITO ORIENTADO AL 4º ESCALÓN DE MILLERdomingo 18 de noviembre de 2012
  34. 34. Ventajas MAS BARATO SEGÚN Nº EVALUADOS Y ESTRUCTURA ACEPTABILIDAD PROFESIONAL (AUTORRESPONSABILIDAD, GESTIONA EL RITMO, ENFOQUE A SU REALIDAD, EN SITIO DE TRABAJO CON GRAN DISPERSIÓN, NO SENSACIÓN DE “EXAMEN”…) CENTRADO EN EL QUE APRENDEdomingo 18 de noviembre de 2012
  35. 35. Ventajas ESTIMULA LA FLEXIBILIDAD Y CREATIVIDAD PERMITE COMBINACIÓN DE MUCHAS TÉCNICAS CONCORDANCIA INTEROBSERVADOR >90 % CD DEFINE UN UMBRAL DE CALIDAD ALTA VALIDEZ DE CARA Y CONSTRUCTO (DAVIS 2005)domingo 18 de noviembre de 2012
  36. 36. Ventajas ALTO ALFA CRONBACH 0.9 (RIQUELME 2011, GALE 2010) POTENCIA LA COLABORACIÓN ENTRE COLEGAS (TUTOR DEL PORTFOLIO) PUEDE EVALUARSE A MUCHOS PROFESIONALES SIMULTÁNEAMENTE NO ES “FOTO” SINO “VÍDEO” TIEMPO DE EVALUACIÓN 1.5 HORAS EN P.domingo 18 de noviembre de 2012
  37. 37. Desventajas Portfolio COMPLEJO DISEÑO NO ES ÚTIL PARA VALORACIÓN DE ASPECTOS CONCRETOS SINO PARA LA GLOBALIDAD DIFICULTAD PARA EVALUACIÓN DE HABILIDADES POCA PREVALENCIA MUCHA BUROCRACIA DIFICULTADES PARA QUIEN NO ESCRIBA BIENdomingo 18 de noviembre de 2012
  38. 38. Desventajas Portfolio 2004 DAVIS MENOR FIABILIDAD MELVILLE 2005 WEBB 2012 <0.6 (PERO ALTA CONCORDANCIA SIMPLE Y OTROS AUTORES COMO MILLER 2010 0,7, GALE 2010 0.62 TO 0.77, KEAR 2008 0.8) POCOS DATOS DE VALIDEZ PREDICTIVA (DAVIS 2005) AUMENTA EL ESFUERZO DEL TUTOR O PROFESORES PROBLEMAS DE LOGÍSTICA EN PORTFOLIO EVALUATIVO (MUCHO PAPEL, MUCHAdomingo 18 de noviembre de 2012
  39. 39. Revisiones sistemáticas Portfolio OVEREEM 2007. POTENCIAL IMPORTANTE EN ANALISIS DEL PERFORMANCE. PSICOMETRIA Y EFECTIVIDAD POBREMENTE ESTUDIADA DRIESSEN 2007. EFECTIVO PARA DESARROLLO Y EVALUACION DEL APRENDIZAJE. INTEGRACION EN CURRICULUM Y SOPORTE TUTOR ESENCIALES. EN EVALUACIÓN SUMATIVA VULNERABLE A OTRAS HERRAMIENTAS TOCHEL 2009 POTENCIA AUTORREFLEXIÓN, LIMITADA EVIDENCIA FACT QUE INFLUYEN, VARIABILIDAD EN FIABILIDAD Y VALIDEZ, BENEFICIOS FORMATO ELECTRÓNICOdomingo 18 de noviembre de 2012
  40. 40. Ejemplos PORTFOLIO INICIAL CAMFIC - 4 TAREAS 2002 PORTFOLIO DPI INTEGRAL DEL MF PORTFOLIO DEL RESIDENTE CNE MF PORTFOLIO SEMI PORTFOLIO DPI DOCENTE ACSA HEFOR / HEFOTdomingo 18 de noviembre de 2012
  41. 41. ACSA SAS: 84768 PROF EN 29 HOSP Y MAS DE 1500 CS. 7106 ESP HOSP Y 6484 ESP MF CARRERA PROF. REPERC ECONÓMICA 7473 ACREDT (8603 FINALIZADOS), 5071 AUTOEVALUACION, ACSA. Datos 1 oct 2012 http://www.juntadeandalucia.es/agenciadecalidadsanitariadomingo 18 de noviembre de 2012
  42. 42. domingo 18 de noviembre de 2012
  43. 43. Portfolio docente del GCYS 16 COMPETENCIAS: 3 DE CONOCIMIENTO, 7 DE HABILIDAD Y 6 DE ACTITUD 48 INDICADORES GLOBALES 9 TAREAS DOCENTES 12 INDICADORES OPERATIVOS DE MEDIA POR TAREAdomingo 18 de noviembre de 2012
  44. 44. Portfolio docente. Tareas T01.- EVALUACIÓN DE LOS DISCENTES AL PROFESOR DE ENTREVISTA CLÍNICA! T02.- OBSERVACIÓN EXTERNA POR EXPERTOS! T03.- PEER-REVIEW. REVISIÓN POR PARES! T04.- INCIDENTES CRÍTICOS EN DOCENCIA DE COMUNICACIÓN ASISTENCIAL! T05.- VIDEOGRABACIÓN DE LA ACTIVIDAD DOCENTE!domingo 18 de noviembre de 2012
  45. 45. Portfolio docente. Tareas T06.- PARTICIPACIÓN EN ACTIVIDADES DOCENTES Y DE INVESTIGACIÓN, FOROS DE EXPERTOS… PUBLICACIONES! T07.- VIDEOGRABACIÓN ENTREVISTAS CLÍNICAS CON PACIENTES REALES! T08.- DISEÑO DE UNA GUÍA DOCENTE! T09.- INFORME DE AUTORREFLEXIÓN SOBRE TAREAS ANTERIORES. PLAN DE APRENDIZAJEdomingo 18 de noviembre de 2012
  46. 46. Nuestra experiencia TERMINAN: 41.25 % DEL INTEGRAL. 46,34 % DEL DOCENTE (MILLER 2010 88 %) UN NÚMERO IMPORTANTE DE TAREAS. ABRUMAN. COMPLEJIDAD FEED-BACK.- ÁREAS DE MEJORA IMPORTANCIA DE LA TUTORIZACIÓN NIVEL DE IMPLICACIÓN “TIEMPO*** CARGA ASISTENCIAL CUESTA TRABAJO REFLEXIONAR (FALTA DE CULTURA?) MALA APLICACIÓN. INTERACC INFORMÁTICA DIFÍCIL ¿QUÉ GANO YO?domingo 18 de noviembre de 2012
  47. 47. Nuestra experiencia ESTIMULA Y CREA AUTORREFLEXIÓN CON MÉTODO SE OBJETIVA ESCRIBIENDO. SE HACE CONSCIENTE ESTIMULA EL APRENDIZAJE CREA RUTINAS DE BUENA PRAXIS LO RECOMENDARÍAN A COMPAÑEROS LES GUSTA Y APRENDEN. (70-88 % QUERÍANdomingo 18 de noviembre de 2012
  48. 48. Nuestra experiencia NECESIDAD DE BENEFICIOS INSTITUCIONALES. CLARIFICAR BENEFICIOS PRIMAR TAREAS PROSPECTIVAS (IMPACTO EDUCATIVO) EMPEZAR EN PREGRADO? PORTFOLIOS FORMATIVOS? SIMPLICIDADdomingo 18 de noviembre de 2012
  49. 49. Proyecto Ara Plan estratégico para la implantación por las instituciones pública de procesos de Certificación/Recertificacióndomingo 18 de noviembre de 2012
  50. 50. Proyecto ARA (Acreditación-ReAcreditación) Asociación Española de Biopatología Médica (AEBM) Sociedad Española de Alergologia e Inmonología clínica (SEAIC) Sociedad Española de Angiología y Cirugía Vascular (SEACV) Sociedad Española de Cirujanos (AEC) Sociedad Española de Cirugía y Ortopedia Traumatológica (SECOT) Sociedad Española de Geriatría y Gerontología (SEGG) Sociedad Española de Medicina Familiar y Comunitaria (Semfyc) Sociedad Española de Medicina General (SEMG) Sociedad Española de Medicina Intensiva Crítica y unidades Coronarias (SEMICYUC) Sociedad Española de Medicina Interna (SEMI) Sociedad Española de Nefrología (SEN) Sociedad Española de Neumología y Cirugía Torácica (SEPAR) Sociedad Española de Neurología (SEN) Sociedad Española de Oncocología Médica (SEOM) Sociedad Española de Oncología Radioterápica (SEOR) Sociedad Española de ORL (SEORL) Sociedad Española de Radiología Médica (SERAM) Sociedad Española de Reumatología (SER)domingo 18 de noviembre de 2012
  51. 51. Recertificación ¿para qué? • Aseguramiento de la propia calidad: Para confirmar que un médico cumple con los estándares de la profesión y, en su defecto, cuáles son los requisitos que les faltan para alcanzarlo. Excelente herramienta para profesionales interesados en procesos de mejora continua. • Como marca de prestigio: Para reivindicar la propia pericia, de cara a la promoción laboral, o para la propia satisfacción personal. RAZONES PERSONALESdomingo 18 de noviembre de 2012
  52. 52. Recertificación ¿para qué? • Como información a terceros: Para demostrar que se cumplen estándares de calidad a ofrecer servicios a proveedores de servicios sanitarios. Importante en un contexto de descentralización y también en la asistencia privada sanitaria. • Como información para el público: Derecho a conocer si su médico tiene una calidad suficiente (Ley de Autonomía del Paciente). Conocer dónde puede recibir una atención de calidad, basándose en criterios objetivos. RAZONES SOCIALESdomingo 18 de noviembre de 2012
  53. 53. Objetivo Estimular a las administraciones públicas para generar circuitos de evaluación de competencias válidos, fiables y flexibles, basados fundamentalmente en evaluación formativa (buscando un impacto educativo), para el desarrollo de procesos de certificación de posgrado (liderados por las CNE) y recertificación de especialistas (liderados por las SSCC junto con las instituciones públicas universidades...). PROYECTO ARAdomingo 18 de noviembre de 2012
  54. 54. El complejo mundo de las definiciones... Certificación / Acreditación Recertificación / Reacreditación Homologación Recolegiación Revalidacióndomingo 18 de noviembre de 2012
  55. 55. Metodología • Evaluación Formativa, es decir primando el impacto educativo, aunque pueda tener funciones sumativas. • Procesos inicialmente voluntarios, primando el cambio cultural y la aceptabilidad por los profesionales. • Procesos tutorizados, para aumentar el impacto educativo • Procesos flexibles, adaptados a cada especialidad. Se sugieren metodologías ECOE o Portfolio (SEIC opcional) PROYECTO ARAdomingo 18 de noviembre de 2012
  56. 56. Metodología • Desarrollo de herramientas formativas articuladas con los procesos evaluativos • Cada 4-8 años según la especialidad • Búsqueda de reconocimiento institucional. Garante de la calidad de los procesos • Colaboración entre Sociedades Científicas PROYECTO ARAdomingo 18 de noviembre de 2012
  57. 57. Organización • Comité coordinador • Comité Asesor del Proyecto ARA: Constituido por representantes de las SSCC Dirige las estrategias generales del proyecto • Comité ARA de cada Sociedad Científica: 4-5 personas por especialidad Aplican los consensos del ARA en su especialidaddomingo 18 de noviembre de 2012
  58. 58. actividades realizadas Consenso Documento ARA Incorporación nuevas SSCC. Invitación FACME Organización. Estructura. Reuniones periódicas Creación Grupos ARA en cada SSCCdomingo 18 de noviembre de 2012
  59. 59. actividades realizadas Plan de comunicación: Difusión mediática. Difusión interna Apoyo Ministerio y FACME Pendiente apoyo oficial OMC y CNE Documentos técnicos ARA nº 1 y nº 2 (SEIC)domingo 18 de noviembre de 2012
  60. 60. Si quiere contactar conmigo: CORREO. GOOGLE +: JOSEANTONIO.PRADOS@GMAIL.COM TWITTER: JAPRADOS PRESENTACIONES: WWW.SLIDESHARE.NET/JAPRADOS FACEBOOK: JOSÉ ANTONIO PRADOS CASTILLEJOdomingo 18 de noviembre de 2012
  61. 61. Graciasdomingo 18 de noviembre de 2012
  62. 62. FORMACION: PIRÁMIDE DE KIRKPATRICKdomingo 18 de noviembre de 2012
  63. 63. PARA TENER IMPACTO EDUCATIVO... ESTAR CENTRADO EN EL QUE APRENDE ESTAR BASADO EN LA AUTORREFLEXIÓN ESTAR BASADA EN LA PROPIA RESPONSABILIDADdomingo 18 de noviembre de 2012
  64. 64. ECOE = OSCE O EXAMEN MULTIESTACIÓN ES UN CONJUNTO DE ESTACIONES POR LAS QUE EL PROFESIONAL VA PASANDO PROGRESIVAMENTE SIENDO SOMETIDO A DIFERENTES PRUEBAS (EJEMPLO: EST 1ª EXAMEN TIPO TEST, EST 2º PROFESIONAL SIMULADO CON UNA CONSULTA, EST 3ª CADENA DE DISTRIBUCIÓN FÁRMACOS, EST 4ª INTERACCIÓN FARMACOLÓGICA, EST 5ª REVISIÓN BIBLIOGRÁFICA, … DEBE TENER MAS DE 10-15 EST PARA BUENA FIABILIDAD (NORMAL 25) MUY UTILIZADO PARA HOMOLOGACIÓN, CERTIFICACIÓN, RE- CERTIFICACIÓN Y SELECCIÓN (MIR EN CANADÁ)domingo 18 de noviembre de 2012
  65. 65. ECOE VENTAJAS: ACEPTABLE POR EL PROFESIONAL, FIABLE, VALIDEZ DE CONSTRUCTO, MEDICIÓN GLOBAL, 3ER ESCALÓN MILLER (BASADO PRINCIPALMENTE EN PACIENTES SIMULADOS), PERMITE COMBINACIÓN DE MÚLTIPLES TÉCNICAS, PUEDE REALIZARSE EN VARIOS SITIOS SIMULTÁNEAMENTE DESVENTAJAS: COMPLEJO LOGÍSTICAMENTE Y DE DISEÑO, CARO? BARATO? (350 " CON 10 ESTACIONES), NO MIDE PRÁCTICA REAL TENDENCIA A SACAR LAS ESTACIONES DE SILLA (TEST, PICTORIALES, PREGUNTAS ABIERTAS DE RESPUESTA CORTA…) PARA ABARATAR PROCESOdomingo 18 de noviembre de 2012
  66. 66. ASSESSMENT CIRCUITO DE EVALUACIÓN PROVENIENTE DEL MUNDO EMPRESARIAL QUE VALORA COMPETENCIAS POTENCIALES PRINCIPALMENTE (EL POTENCIAL DEL INDIVIDUO) Y GENÉRICAS (LIDERAZGO, HABILIDADES RELACIONALES, CAPACIDAD DE ANÁLISIS…) COMBINA TÉCNICAS DE ENTREVISTA CON PSICÓLOGOS (ENTREVISTAS ESTRUCTURADAS FOCALIZADAS), OBSERVACIÓN DE DINÁMICA DE GRUPO, BANDEJA DE ENTRADA (O BANDEJA IN TRAY), CUESTIONARIOS Y SIMULACIONES UTILIZADO HABITUALMENTE EN SELECCIÓN DE PERSONAL UTILIZACIÓN ESCASA EN PROFESIONES SANITARIOS (FALTAN DATOS PSICOMÉTRICOS POR TANTO)domingo 18 de noviembre de 2012
  67. 67. ASSESSMENT VENTAJAS: UTILIZA TÉCNICAS PARA EVALUAR COMPETENCIAS NO VALORADAS HABITUALMENTE EN OTROS CIRCUITOS, ES LA MEJOR TÉCNICA EN SELECCIÓN PARA DEFINIR ENTRE VARIOS PROFESIONALES QUE YA HAN DEMOSTRADO SUS COMPETENCIAS DESVENTAJAS: COMPLEJO LOGÍSTICAMENTE Y EL DISEÑO, CARO (HASTA 500-600 " POR PROFESIONAL), POCOS DATOS O NEGATIVOS SOBRE FIABILIDAD Y VALIDEZ PREDICTIVA, NO EXPERIENCIA EN PROFESIONES SANITARIAS, POCA ACEPTABILIDAD PROFESIONAL PROBABLE EN COLECTIVO SANITARIOdomingo 18 de noviembre de 2012
  68. 68. REGISTRO CLÍNICO HISTORIA, INFORMES DE INTERCONSULTA O DERIVACIÓN, INFORMES CLÍNICOS, ESTUDIO DE CASOS… FRECUENTE. ÚTIL PARA: CONOCIMIENTOS BIOMÉDICOS O PSICOSOCIALES OBTENCIÓN DE DATOS PERTINENTES (ANAMNESIS O EXPLORACIÓN) DIAGNÓSTICO DIFERENCIAL Y MANEJO DIAGNÓSTICO MANEJO TERAPÉUTICO DIFICULTADES EN “RETROSPECTIVA” POR MALA CALIDAD DE LOS REGISTROS SISTEMA INFORMÁTICOdomingo 18 de noviembre de 2012
  69. 69. INFORME DE AUTORREFLEXIÓN EL PROFESIONAL REFLEXIONA SOBRE DETERMINADOS ASPECTOS DE SU PRÁCTICA RELACIONADOS CON UNA DETERMINADA COMPETENCIA O GRUPO DE COMPETENCIAS. ESTANDARIZAR. ESFUERZO DE SÍNTESIS. UN INFORME EN EL QUE EL PROPIO PROFESIONAL DEFINA SU PLAN DE APRENDIZAJE PUEDE APORTAR EVIDENCIAS SOBRE LA CAPACIDAD DE AUTOAPRENDIZAJE, SI ÉSTE ESTÁ AJUSTADO A LAS NECESIDADES DE MEJORA… COMBINARLO POSTERIORMENTE (NO EN EL MISMO PORTFOLIO NECESARIAMENTE) CON OTRA TAREA CLÍNICA EN LA QUE SE ENCUENTREN EVIDENCIAS DE QUE EL PLAN HA SIDO REALIZADO Y SU RESULTADO. TODO PORTFOLIO DEBERÍA ACABAR CON UN INFORME DE REFLEXIÓN SOBRE EL PROPIO PORTFOLIO Y UN PLAN DE APRENDIZAJEdomingo 18 de noviembre de 2012
  70. 70. AUDIO-VIDEOGRABACIONES LA GRABACIÓN DE SITUACIONES REALES ES LA TÉCNICA MAS ACEPTADA A NIVEL INTERNACIONAL PARA EVALUAR EN LA PRÁCTICA DIARIA ELEMENTOS COMO LA COMUNICACIÓN MÉDICO- PACIENTE, HABILIDADES MANUALES (CIRUGÍA!), PROCEDIMIENTOS DIAGNÓSTICO-TERAPÉUTICOS,... CUIDADO SONIDO Y CALIDAD GRABACIÓN INCONVENIENTE: REQUIERE MATERIAL DE GRABACIÓN ESPECIAL ES NECESARIO TAMBIÉN APORTAR PERMISO DEL PACIENTE (PUEDE SER UNA BUENA OPCIÓN PEDIRLO EN LA MISMA GRABACIÓN) CUIDADO CON EL MATERIAL. CONFIDENCIALIDAD. SUELE FORMAR PARTE DE LA MAYORÍA DE LOS PORTFOLIOS CONSULTADOS A NIVEL INTERNACIONAL.domingo 18 de noviembre de 2012
  71. 71. INCIDENTES CRÍTICOS ES UNA DE LAS MEJORES TÉCNICAS DE EVALUACIÓN POR LO QUE APORTA DE FLEXIBILIDAD, CREATIVIDAD Y AUTORREFLEXIÓN, Y PROBABLEMENTE DEBA ESTAR INCLUIDA EN CUALQUIER PORTFOLIO. SE TRATA DE REFLEXIONAR SOBRE ALGÚN ELEMENTO QUE EN LA PRÁCTICA DIARIA NOS HA APORTADO ALGÚN CONOCIMIENTO (O SU FALTA). PARTES: SE DESCRIBE LA SITUACIÓN SE REFLEXIONA SOBRE LAS DIFICULTADES O ERRORES Y SUS REPERCUSIONES ASPECTOS POSITIVOS O ÉXITOS OBJETIVOS DE MEJORA PLAN DE APRENDIZAJE PARA CONSEGUIRLOS.domingo 18 de noviembre de 2012
  72. 72. INDICADORES DE LA PRÁCTICA PERFIL FARMACOLÓGICO, RESULTADOS CLÍNICOS… ESTOS INDICADORES APORTAN EVIDENCIAS DE RESULTADOS. ANALIZAN GLOBALMENTE DETERMINADAS CAPACIDADES. NO APORTA DATOS PROCESO. SE SUELEN UTILIZAR LOS ESTABLECIDOS POR LA ADMINISTRACIÓN PÚBLICA O SON FÁCILMENTE APORTADOS POR LA APLICACIÓN INFORMÁTICA QUE SE UTILICE. NO DISCRIMINA LA ACTUACIÓN DE OTROS PROFESIONALES. CAUTO EN LAS EVIDENCIAS QUE SE PRETENDEN DEMOSTRAR.domingo 18 de noviembre de 2012
  73. 73. EVALUACIONES EXTERNAS PACIENTES, COLEGAS… LOS INFORMES DE COMPAÑEROS, PACIENTES, JEFES… SON MUY UTILIZADOS EN EL MUNDO ANGLOSAJÓN Y PROBABLEMENTE DEBERÍAMOS EMPEZAR A CONFIAR MAS EN LA OPINIÓN DE LOS DEMÁS COMO FUENTE DE FEED-BACK “BIENINTENCIONADO” PUEDE SER ÚTIL, INCLUSO EL MEJOR MEDIO, PARA VALORAR DETERMINADAS COMPETENCIAS (P.E. TRABAJO EN EQUIPO). EN NUESTRO ENTORNO CULTURAL DEBERÍA UTILIZARSE EN EVALUACIÓN FORMATIVA PARA FAVORECER SU ACEPTABILIDAD.domingo 18 de noviembre de 2012
  74. 74. HEFOR COMPETENCIA 1: ACTITUD DE APRENDIZAJE Y MEJORA CONTINUA COMPETENCIA 2: CALIDAD DE PROMOVER Y ADAPTARSE AL CAMBIO, FLEXIBILIDAD / ADAPTACIÓN. COMPETENCIA 3: TRABAJO EN EQUIPO COMPETENCIA 4: ORIENTACIÓN AL CIUDADANO. RESPETO POR SUS DERECHOS COMPETENCIA 5: CAPACIDAD PARA LA TOMA DE DECISIONES CLÍNICAS, DIAGNÓSTICAS Y TERAPÉUTICAS. COMPETENCIA 6: GESTIÓN DEL TIEMPO COMPETENCIA 7: COMUNICACIÓN Y/O HABILIDADES RELACIONALES (ENTREVISTA CLÍNICA)domingo 18 de noviembre de 2012
  75. 75. QUE PIENSAN DEL PORTFOLIO?domingo 18 de noviembre de 2012
  76. 76. PORTFOLIO RESIDENTES CNE MF QUE APORTA: BASADO EN COMPETENCIAS Y EN EL PNE EVALUACIÓN FORMATIVA BUENA METODOLOGÍA MUY BASADO EN RELACIÓN RESIDENTE-TUTOR LIMITACIONES: NÚMERO DE TAREAS EXCESIVAS. DOCUMENTO EXTENSO Y COMPLEJO 4 AÑOS DE DESARROLLO COMPLEJIDAD DE ALGUNA TAREA IMPLANTACIÓN IRREGULAR SIN CULTURA TUTORES NO PREPARADOSdomingo 18 de noviembre de 2012
  77. 77. Organización • Comité Coordinador del Proyecto ARA 2010: Jose Antonio Prados (Semfyc), Pilar de Lucas (Separ), Jose Luis del Cura (Seram) y Avelino Ferrero (FACME) Coordinación del trabajo de las distintas Sociedades Representación a nivel mediático y de Autoridades Distribución de la información Planificación de las reuniones del Comité Asesor.domingo 18 de noviembre de 2012

×