evaluacion competencias y portfolio residentes farmacia andorra 2011

JORNADA SOBRE DOCENCIA EN FARMACIA

HOSPITALARIAANDORRA 4 JUNIO 2011

MÉTODOS DE EVALUACIÓN DE RESIDENTES

JOSE ANTONIO PRADOS CASTILLEJO

MÉDICO DE FAMILIA. C.S. LUCANO. CÓRDOBA

domingo 5 de junio de 2011

CONTENIDO

GENERALIDADES EVALUACIÓN. ALGUNAS TÉCNICAS

PORTFOLIO. QUÉ ES? VENTAJAS/DESVENTAJAS

QUÉ INCLUYE?

QUÉ PIENSAN DEL PORTFOLIO?. ÚTIL PARA RESIDENTES? POR QUÉ?

NO CAER ERRORES DE OTROS: COMPLEJIDAD

COMO SE HACE


COMPETENCIA PROFESIONAL

! GRADO EN QUE UN SUJETO PUEDE UTILIZAR SUS CONOCIMIENTOS, APTITUDES, ACTITUDES Y BUEN JUICIO ASOCIADOS A SU PROFESIÓN, PARA PODER DESEMPEÑARLA DE MANERA EFICAZ EN TODAS LAS SITUACIONES QUE CORRESPONDEN AL CAMPO DE SU PRÁCTICA. ! ! !

! ! ! ! ! ! (KANE, 1992)


COMPETENCIA PROFESIONAL

USO HABITUAL Y JUICIOSO DE LA COMUNICACIÓN, EL CONOCIMIENTO, LAS HABILIDADES TÉCNICAS, LA TOMA DE DECISIONES BASADAS EN LA EVIDENCIA, LAS EMOCIONES, LOS VALORES Y LA REFLEXIÓN EN LA PRÁCTICA DIARIA PARA BENEFICIO INDIVIDUAL Y DE LA SOCIEDAD.


¿NOS FORMAMOS PARA PASAR LAS EVALUACIONES O NOS EVALUAMOS PARA

FORMARNOS?


CAMBIO CULTURAL: ENSEÑANZA: FORMAR PARA EVALUAR APRENDIZAJE: EVALUAR PARA FORMAR


PARA QUE EVALUARNOS...

SI QUEREMOS MEJORAR.......NECESIDAD DE HERRAMIENTAS QUE HAGAN EXPLÍCITAS NUESTRAS:

COMPETENCIAS CONSCIENTES

COMPETENCIAS INCONSCIENTES

INCOMPETENCIAS CONSCIENTES

INCOMPETENCIAS INCONSCIENTES


EVALUACIÓN: PIRÁMIDE DE MILLER

HACE

MUESTRA CÓMO HACER

SABE CÓMO HACER

SABE QUÉ HACER

LO REAL

SIMULACIÓN

EXPLICA LA ACCIÓN

CONOCETEORÍA

PRÁCTICA


FORMACION: PIRÁMIDE DE KIRKPATRICK


CÓMO TIENEN QUE SER LAS HERRAMIENTAS?

CON OBJETIVOS DE MEDICIÓN CLAROS (QUE MIDE?)

ORIENTADAS AL APRENDIZAJE. IMPACTO EDUCATIVO. VINCULADAS A LA FORMACIÓN

VÁLIDAS, FIABLES, FACTIBLES, ACEPTABLES Y A BAJO COSTE

ACEPTADO POR COMUNIDAD CIENTÍFICA. DISEÑADAS/SUPERVISADAS POR LOS PROPIOS PROFESIONALES

BASADO EN LA MEDIDA DE LO POSIBLE EN EL CUARTO ESCALÓN DE MILLER

SENCILLA Y BARATA


PARA TENER IMPACTO EDUCATIVO...

ESTAR CENTRADO EN EL QUE APRENDE

ESTAR BASADO EN LA AUTORREFLEXIÓN

ESTAR BASADA EN LA PROPIA RESPONSABILIDAD


UTILIDAD: INSTRUMENTO IDEAL

PESO

U = UTILIDAD !! F = FIABILIDAD ! V = VALIDEZ

IE = IMPACTO EDUCATIVO ! A = ACEPTABILIDAD! C = COSTE MODIFICADO DE BRAILOVSKI

U = (F X V X IE X A) / C

100%

0


NO EXISTE EL INSTRUMENTO PERFECTO!!!


UTILIDAD COMO INSTRUMENTO INDIVIDUAL

F V IE A C

PESO

! F = FIABILIDAD ! ! V = VALIDEZ ! IE = IMPACTO EDUCATIVO

! A = ACEPTABILIDAD!! C = COSTE

100%

0


UTILIDAD PARA UN PROGRAMA DE FORMACIÓN

F V IE A C

PESO



100%

0


UTILIDAD PARA LA SELECCIÓN

F V IE A C

PESO



100%

0


UTILIDAD PARA LA FORMACIÓN DE RESIDENTES

F V IE A C

PESO



100%

0


Técnicas de Evaluación de Competencias

▶ Preguntas elección múltiple......

▶ Examen oral............................

▶ Preguntas abiertas...................

▶ Imágenes clínicas....................▶ Pacientes estandarizados..........

▶ Maniquíes...............................

▶ Eficiente. Fiable. Muchos evaluados. Solo conocimientos

▶ Integración conoc. y toma decisiones. Fiable si estructurado. No factible

▶ Similar a PEM. Mayor sensibilidad en toma de decisiones y resolución problemas

▶ Complemento simulaciones clínicas. Fiable▶ Evaluar anamnesis, exploración, habilidades

técnicas y comunicación. Complementado permite simulaciones completas de la práctica. Fiable

▶ Solo habilidades técnicas. Fiable

Tomado de Martínez-Carretero y


▶ Simulaciones informáticas..........▶ Audits......................................

▶ Observaciones práctica real.......

▶ Peer-review..............................

▶ Indicadores práct. Enc. satisf.....

▶ OSCE o ECOE…........................▶ Assesment……………………....▶ Portfolio…………………………..

▶ Manejo clínico y eficiencia de la práctica▶ Visión parcial de la práctica. Baja fiabilidad y

validez▶ Alta validez. Baja fiabilidad. Problemas

factibilidad y muestreo de situaciones▶ Alta fiabilidad. Permite evaluaciones globales

sin pormenorizar perfil competencial▶ Similar a observación de la práctica

▶ Circuito que permite combinación▶ Circuito que permite combinación▶ Circuito que permite combinación

Técnicas de Evaluación de Competencias



Otras técnicas de Evaluación de competencias

▶ Script▶ Audio-videograbaciones▶ Bandeja de entrada▶ Entrevista de Incidentes

críticos, focalizada▶ Análisis Curricular▶ Informes de autoreflexión▶ Dinámicas de Grupo▶ Autoauditorías, auditorías


Instrumentos para evaluación de componentes competenciales

▶ Anamnesis........................▶ Exploración física............▶ Habilidades

comunicacionales............▶ Relaciones

interprofesionales............▶ Ética................................▶ Aspectos legales.............▶ Conocimientos

biomédicos.......................▶ Interpretación datos

clínicos.............................

PE, OBS*PE, OBS*

PE, OBS*

PE, OBSPE, PEM, EO, PAPE, PEM, EO, PA

PEM, PA

* Componentes primaria



Instrumentos para evaluación de componentes competenciales

▶ Manejo diagnóstico.........▶ Manejo terapéutico..........▶ Documentación

clínica..............................▶ Práctica comunitaria.......▶ Práctica preventiva.........▶ Habilidades técnicas.......▶ Investigación....................▶ Docencia..........................

PEM, EO, PA*PEM, EO, PA*

PEINF, PEM, EO, PAPE, PEM, EO, PA*PE, MA*PEM, EO, PA

* Componentes primaria



CIRCUITOS DE EVALUACION

SON AQUELLOS INSTRUMENTOS DE EVALUACIÓN DE COMPETENCIAS QUE PERMITEN COMBINAR DIFERENTES TÉCNICAS DE EVALUACIÓN DE TAL MANERA QUE SE PUEDA REALIZAR UNA VALORACIÓN MAS GLOBAL DE UN PROFESIONAL DETERMINADO

LOS MAS CONOCIDOS:

ECOE, ASSESSMENT, PORTFOLIO


ECOE

= OSCE O EXAMEN MULTIESTACIÓN

ES UN CONJUNTO DE ESTACIONES POR LAS QUE EL PROFESIONAL VA PASANDO PROGRESIVAMENTE SIENDO SOMETIDO A DIFERENTES PRUEBAS (EJEMPLO: EST 1ª EXAMEN TIPO TEST, EST 2º PROFESIONAL SIMULADO CON UNA CONSULTA, EST 3ª FORMULACIÓN MAGISTRAL, EST 4ª INTERACCIÓN FARMACOLÓGICA, EST 5ª REVISIÓN BIBLIOGRÁFICA, …

DEBE TENER MAS DE 10-15 EST PARA BUENA FIABILIDAD (NORMAL 25)

MUY UTILIZADO PARA HOMOLOGACIÓN, CERTIFICACIÓN, RE-CERTIFICACIÓN Y SELECCIÓN (MIR EN CANADÁ)


ECOE

VENTAJAS: ACEPTABLE POR EL PROFESIONAL, FIABLE, VALIDEZ DE CONSTRUCTO, MEDICIÓN GLOBAL, 3ER ESCALÓN MILLER (BASADO PRINCIPALMENTE EN PACIENTES SIMULADOS), PERMITE COMBINACIÓN DE MÚLTIPLES TÉCNICAS, PUEDE REALIZARSE EN VARIOS SITIOS SIMULTÁNEAMENTE

DESVENTAJAS: COMPLEJO LOGÍSTICAMENTE Y DE DISEÑO, CARO? BARATO? (350 € CON 10 ESTACIONES), NO MIDE PRÁCTICA REAL

TENDENCIA A SACAR LAS ESTACIONES DE SILLA (TEST, PICTORIALES, PREGUNTAS ABIERTAS DE RESPUESTA CORTA…) PARA ABARATAR PROCESO


ASSESSMENT

CIRCUITO DE EVALUACIÓN PROVENIENTE DEL MUNDO EMPRESARIAL QUE VALORA COMPETENCIAS POTENCIALES PRINCIPALMENTE (EL POTENCIAL DEL INDIVIDUO) Y GENÉRICAS (LIDERAZGO, HABILIDADES RELACIONALES, CAPACIDAD DE ANÁLISIS…)

COMBINA TÉCNICAS DE ENTREVISTA CON PSICÓLOGOS (ENTREVISTAS ESTRUCTURADAS FOCALIZADAS), OBSERVACIÓN DE DINÁMICA DE GRUPO, BANDEJA DE ENTRADA (O BANDEJA IN TRAY), CUESTIONARIOS Y SIMULACIONES

UTILIZADO HABITUALMENTE EN SELECCIÓN DE PERSONAL

UTILIZACIÓN ESCASA EN PROFESIONES SANITARIOS (FALTAN DATOS PSICOMÉTRICOS POR TANTO)


ASSESSMENT

VENTAJAS: UTILIZA TÉCNICAS PARA EVALUAR COMPETENCIAS NO VALORADAS HABITUALMENTE EN OTROS CIRCUITOS, ES LA MEJOR TÉCNICA EN SELECCIÓN PARA DEFINIR ENTRE VARIOS PROFESIONALES QUE YA HAN DEMOSTRADO SUS COMPETENCIAS

DESVENTAJAS: COMPLEJO LOGÍSTICAMENTE Y EL DISEÑO, CARO (HASTA 500-600 € POR PROFESIONAL), POCOS DATOS O NEGATIVOS SOBRE FIABILIDAD Y VALIDEZ PREDICTIVA, NO EXPERIENCIA EN PROFESIONES SANITARIAS, POCA ACEPTABILIDAD PROFESIONAL PROBABLE EN COLECTIVO SANITARIO


PERO...

SOMOS ADULTOS...

NO SOMOS ADMINISTRACIÓN...

LO QUE NOS IMPORTA DE VERDAD ES QUE NUESTROS RESIDENTES APRENDAN...

TENEMOS LOS RECURSOS QUE TENEMOS...

Y EN ESTA LÍNEA...


¿ES MEJOR QUE NOS DEN FEED-BACK SOBRE LO QUE SOMOS CAPACES DE HACER O SOBRE LO QUE HACEMOS?

¿ES MEJOR QUE DAR FEED-BACK SOBRE LO QUE SON CAPACES DE HACER O SOBRE LO

QUE HACEN?


¿PODEMOS ENCONTRAR PRUEBAS EN NUESTRA/SU PRÁCTICA CLÍNICA DIARIA DE

LO QUE HACEMOS BIEN Y DE LO QUE ES MEJORABLE?


ES UNA COLECCIÓN DE EVIDENCIAS QUE DEMUESTRAN QUE EL APRENDIZAJE PERSONAL

NECESARIO HA SIDO COMPLETADO (RCGP, 1993)

¿QUÉ ES UN PORTFOLIO?


UN PORTFOLIO ES UNA HERRAMIENTA SIEMPRE FORMATIVA (Y A VECES EVALUATIVA), EN LA QUE

UN PROFESIONAL RECOGE DE FORMA INTELIGENTE DOCUMENTOS O REGISTROS, “PRODUCTO” DE SU

TRABAJO SOBRE LOS QUE INICIA, EL PROPIO PROFESIONAL (O A VECES TAMBIÉN UN

OBSERVADOR EXTERNO), UN PROCESO REFLEXIVO (AUTOEVALUACIÓN) QUE LE AYUDE A IDENTIFICAR

QUE COMPETENCIAS TIENE Y CUALES NECESITA MEJORAR, GENERANDO POR SI MISMO APRENDIZAJE

(PORTFOLIO SEMFYC, 2007)

¿QUÉ ES UN PORTFOLIO?


TIPOS PORTFOLIO

SEGÚN SU OBJETIVO

PORTFOLIO FORMATIVO (EVALUACIÓN FORMATIVA).

PORTFOLIO EVALUATIVO (EVALUACIÓN SUMATIVA).

SEGÚN SU ESTRUCTURA

PORTFOLIO LIBRE.

PORTFOLIO ESTRUCTURADO (O ESTANDARIZADO).

PORTFOLIO SEMIESTRUCTURADO.


QUE NO ES UN PORTFOLIO

LO QUE PRIMA LA EVALUACIÓN FRENTE A LA FORMACIÓN (AUSENCIA PROCESO REFLEXIVO)

EL CURRÍCULO O EL LIBRO CLÁSICO DEL RESIDENTE


VENTAJAS

ENFOCADO AL AUTOAPRENDIZAJE (GENERA FUNDAMENTALMENTE AUTORREFLEXIÓN)

IMPORTANTE IMPACTO EDUCATIVO

ÚNICO CIRCUITO ORIENTADO AL 4º ESCALÓN DE MILLER

MAS BARATO SEGÚN Nº EVALUADOS Y ESTRUCTURA

ACEPTABILIDAD PROFESIONAL (AUTORRESPONSABILIDAD, GESTIONA EL RITMO, ENFOQUE A SU REALIDAD, EN SITIO DE TRABAJO CON GRAN DISPERSIÓN, NO SENSACIÓN DE “EXAMEN”…)

CENTRADO EN EL QUE APRENDE


ESTIMULA LA FLEXIBILIDAD Y CREATIVIDAD

PERMITE COMBINACIÓN DE MUCHAS TÉCNICAS

CONCORDANCIA INTEROBSERVADOR >90 % CD DEFINE UN UMBRAL DE CALIDAD

POTENCIA LA COLABORACIÓN ENTRE COLEGAS (TUTOR DEL PORTFOLIO)

PUEDE EVALUARSE A MUCHOS PROFESIONALES SIMULTÁNEAMENTE

NO ES “FOTO” SINO “VÍDEO”

TIEMPO DE EVALUACIÓN 1.5 HORAS EN P. EVALUATIVO

VENTAJAS


DESVENTAJAS PORTFOLIO

COMPLEJO DISEÑO

NO ES ÚTIL PARA VALORACIÓN DE ASPECTOS CONCRETOS SINO PARA LA GLOBALIDAD

DIFICULTAD PARA EVALUACIÓN DE HABILIDADES POCA PREVALENCIA


DESVENTAJAS PORTFOLIO

MENOR FIABILIDAD (ALTA CONCORDANCIA SIMPLE)

AUMENTA EL ESFUERZO DEL TUTOR O PROFESORES

PROBLEMAS DE LOGÍSTICA EN PORTFOLIO EVALUATIVO (MUCHO PAPEL, MUCHA DOCUMENTACIÓN, ORGANIZACIÓN…).


EJEMPLOS DE DOCUMENTOS APORTADOS

REGISTROS CLÍNICOS (HISTORIA, INFORMES DE DERIVACIÓN…)

TUTORÍAS Y PLANES DOCENTES

PLAN DE APRENDIZAJE (EVIDENCIAS DE APRENDIZAJE EN PROCESO O FINALIZADO)

AUDITORÍA, AUTOAUDITORÍAS

AUDIO Y VÍDEO GRABACIONES

DATOS CURRICULARES

INCIDENTES CRÍTICOS

DIARIO DE REFLEXIÓN (EMOCIONES Y SENTIMIENTOS GENERADOS POR EL APRENDIZAJE)


EJEMPLOS DE DOCUMENTOS APORTADOS

INDICADORES DE LA PRÁCTICA (PERFIL FARMACOLÓGICO, RESULTADOS CLÍNICOS…)

EVALUACIONES EXTERNAS (PACIENTES, COLEGAS…)

RESULTADOS EXÁMENES

CASOS CLÍNICOS

PUBLICACIONES (ARTÍCULOS, LIBROS,…)

PROYECTOS DE INVESTIGACIÓN

PROYECTOS COMUNITARIOS

PREMIOS Y LOGROS PERSONALES O PROFESIONALES

CREATIVIDAD, IMAGINACIÓN…


AUTORREFLEXIÓN “RETROSPECTIVA” VS

“PROSPECTIVA”


REGISTRO CLÍNICO

HISTORIA, INFORMES DE INTERCONSULTA O DERIVACIÓN, INFORMES CLÍNICOS, ESTUDIO DE CASOS…

FRECUENTE. ÚTIL PARA:

CONOCIMIENTOS BIOMÉDICOS O PSICOSOCIALES

OBTENCIÓN DE DATOS PERTINENTES (ANAMNESIS O EXPLORACIÓN)

DIAGNÓSTICO DIFERENCIAL Y MANEJO DIAGNÓSTICO

MANEJO TERAPÉUTICO

DIFICULTADES

EN “RETROSPECTIVA” POR MALA CALIDAD DE LOS REGISTROS

SISTEMA INFORMÁTICO


INFORME DE AUTORREFLEXIÓN

EL PROFESIONAL REFLEXIONA SOBRE DETERMINADOS ASPECTOS DE SU PRÁCTICA RELACIONADOS CON UNA DETERMINADA COMPETENCIA O GRUPO DE COMPETENCIAS.

ESTANDARIZAR. ESFUERZO DE SÍNTESIS.

UN INFORME EN EL QUE EL PROPIO PROFESIONAL DEFINA SU PLAN DE APRENDIZAJE PUEDE APORTAR EVIDENCIAS SOBRE LA CAPACIDAD DE AUTOAPRENDIZAJE, SI ÉSTE ESTÁ AJUSTADO A LAS NECESIDADES DE MEJORA…

COMBINARLO POSTERIORMENTE (NO EN EL MISMO PORTFOLIO NECESARIAMENTE) CON OTRA TAREA CLÍNICA EN LA QUE SE ENCUENTREN EVIDENCIAS DE QUE EL PLAN HA SIDO REALIZADO Y SU RESULTADO.

TODO PORTFOLIO DEBERÍA ACABAR CON UN INFORME DE REFLEXIÓN SOBRE EL PROPIO PORTFOLIO Y UN PLAN DE APRENDIZAJE


AUDIO-VIDEOGRABACIONES

LA GRABACIÓN DE SITUACIONES REALES ES LA TÉCNICA MAS ACEPTADA A NIVEL INTERNACIONAL PARA EVALUAR EN LA PRÁCTICA DIARIA ELEMENTOS COMO LA COMUNICACIÓN MÉDICO-PACIENTE, HABILIDADES MANUALES (CIRUGÍA!), PROCEDIMIENTOS DIAGNÓSTICO-TERAPÉUTICOS,...

CUIDADO SONIDO Y CALIDAD GRABACIÓN

INCONVENIENTE: REQUIERE MATERIAL DE GRABACIÓN ESPECIAL

ES NECESARIO TAMBIÉN APORTAR PERMISO DEL PACIENTE (PUEDE SER UNA BUENA OPCIÓN PEDIRLO EN LA MISMA GRABACIÓN)

CUIDADO CON EL MATERIAL. CONFIDENCIALIDAD.

SUELE FORMAR PARTE DE LA MAYORÍA DE LOS PORTFOLIOS CONSULTADOS A NIVEL INTERNACIONAL.


INCIDENTES CRÍTICOS

ES UNA DE LAS MEJORES TÉCNICAS DE EVALUACIÓN POR LO QUE APORTA DE FLEXIBILIDAD, CREATIVIDAD Y AUTORREFLEXIÓN, Y PROBABLEMENTE DEBA ESTAR INCLUIDA EN CUALQUIER PORTFOLIO.

SE TRATA DE REFLEXIONAR SOBRE ALGÚN ELEMENTO QUE EN LA PRÁCTICA DIARIA NOS HA APORTADO ALGÚN CONOCIMIENTO (O SU FALTA).

PARTES:

SE DESCRIBE LA SITUACIÓN

SE REFLEXIONA SOBRE LAS DIFICULTADES O ERRORES Y SUS REPERCUSIONES

ASPECTOS POSITIVOS O ÉXITOS

OBJETIVOS DE MEJORA

PLAN DE APRENDIZAJE PARA CONSEGUIRLOS.


INDICADORES DE LA PRÁCTICA

PERFIL FARMACOLÓGICO, RESULTADOS CLÍNICOS…

ESTOS INDICADORES APORTAN EVIDENCIAS DE RESULTADOS. ANALIZAN GLOBALMENTE DETERMINADAS CAPACIDADES. NO APORTA DATOS PROCESO.

SE SUELEN UTILIZAR LOS ESTABLECIDOS POR LA ADMINISTRACIÓN PÚBLICA O SON FÁCILMENTE APORTADOS POR LA APLICACIÓN INFORMÁTICA QUE SE UTILICE.

NO DISCRIMINA LA ACTUACIÓN DE OTROS PROFESIONALES.

CAUTO EN LAS EVIDENCIAS QUE SE PRETENDEN DEMOSTRAR.


EVALUACIONES EXTERNAS

PACIENTES, COLEGAS…

LOS INFORMES DE COMPAÑEROS, PACIENTES, JEFES… SON MUY UTILIZADOS EN EL MUNDO ANGLOSAJÓN Y PROBABLEMENTE DEBERÍAMOS EMPEZAR A CONFIAR MAS EN LA OPINIÓN DE LOS DEMÁS COMO FUENTE DE FEED-BACK “BIENINTENCIONADO”

PUEDE SER ÚTIL, INCLUSO EL MEJOR MEDIO, PARA VALORAR DETERMINADAS COMPETENCIAS (P.E. TRABAJO EN EQUIPO).

EN NUESTRO ENTORNO CULTURAL DEBERÍA UTILIZARSE EN EVALUACIÓN FORMATIVA PARA FAVORECER SU ACEPTABILIDAD.


UTILIDAD

U = UTILIDAD F = FIABILIDAD V = VALIDEZ

IE = IMPACTO EDUCATIVO A = ACEPTABILIDAD

C = COSTE

U = (F X V X IE X A) / C

100%

0

PESO


PORTFOLIOS

PORTFOLIO INICIAL CAMFIC - 4 TAREAS 2002

PORTFOLIO DPI INTEGRAL DEL MF

PORTFOLIO DEL RESIDENTE CNE MF

PORTFOLIO SEMI

PORTFOLIO DPI DOCENTE

ACSA - JUNIO 2011: 15535 ACABADOS: 4241

HEFOR / HEFOT


HEFOR

COMPETENCIA 1: ACTITUD DE APRENDIZAJE Y MEJORA CONTINUA

COMPETENCIA 2: CALIDAD DE PROMOVER Y ADAPTARSE AL CAMBIO, FLEXIBILIDAD / ADAPTACIÓN.

COMPETENCIA 3: TRABAJO EN EQUIPO

COMPETENCIA 4: ORIENTACIÓN AL CIUDADANO. RESPETO POR SUS DERECHOS

COMPETENCIA 5: CAPACIDAD PARA LA TOMA DE DECISIONES CLÍNICAS, DIAGNÓSTICAS Y TERAPÉUTICAS.

COMPETENCIA 6: GESTIÓN DEL TIEMPO

COMPETENCIA 7: COMUNICACIÓN Y/O HABILIDADES RELACIONALES (ENTREVISTA CLÍNICA)


PORTFOLIO DOCENTE DEL GCYS

16 COMPETENCIAS: 3 DE CONOCIMIENTO, 7 DE HABILIDAD Y 6 DE ACTITUD

48 INDICADORES GLOBALES

9 TAREAS DOCENTES

12 INDICADORES OPERATIVOS DE MEDIA POR TAREA


TAREAS PORTFOLIO DOCENTE GCYS

T01.- EVALUACIÓN DE LOS DISCENTES AL PROFESOR DE ENTREVISTA CLÍNICA!

T02.- OBSERVACIÓN EXTERNA POR EXPERTOS!

T03.- PEER-REVIEW. REVISIÓN POR PARES!

T04.- INCIDENTES CRÍTICOS EN DOCENCIA DE COMUNICACIÓN ASISTENCIAL!

T05.- VIDEOGRABACIÓN DE LA ACTIVIDAD DOCENTE!


T06.- PARTICIPACIÓN EN ACTIVIDADES DOCENTES Y DE INVESTIGACIÓN, FOROS DE EXPERTOS… PUBLICACIONES!

T07.- VIDEOGRABACIÓN ENTREVISTAS CLÍNICAS CON PACIENTES REALES!

T08.- DISEÑO DE UNA GUÍA DOCENTE!

T09.- INFORME DE AUTORREFLEXIÓN SOBRE TAREAS ANTERIORES. PLAN DE APRENDIZAJE!

TAREAS PORTFOLIO DOCENTE GCYS


QUE PIENSAN DEL PORTFOLIO?


PORTFOLIO RESIDENTES CNE MF

QUE APORTA:

BASADO EN COMPETENCIAS Y EN EL PNE

EVALUACIÓN FORMATIVA

BUENA METODOLOGÍA

MUY BASADO EN RELACIÓN RESIDENTE-TUTOR

LIMITACIONES:

NÚMERO DE TAREAS EXCESIVAS. DOCUMENTO EXTENSO Y COMPLEJO

4 AÑOS DE DESARROLLO

COMPLEJIDAD DE ALGUNA TAREA

IMPLANTACIÓN IRREGULAR SIN CULTURA

TUTORES NO PREPARADOS


CONCLUSIONES PORTFOLIO SEMFYC

PORTFOLIO INTEGRAL: 80 (2 EDIC) TERMINAN: 33 (41.25 %)

PORTFOLIO DOCENTE: 41 (2 EDIC) TERMINAN: 19 (46.34 %)

UN NÚMERO IMPORTANTE DE TAREAS

FEED-BACK.- ÁREAS DE MEJORA

IMPORTANCIA DE LA TUTORIZACIÓN

NIVEL DE IMPLICACIÓN

LES GUSTA Y APRENDEN. (70-88 % QUERÍAN ACABARLO)

NECESIDAD DE BENEFICIOS INSTITUCIONALES


QUE NOS DICEN

“ABRUMAN LAS TAREAS”

ESTIMULA Y CREA AUTORREFLEXIÓN CON MÉTODO

SE OBJETIVA ESCRIBIENDO. SE HACE CONSCIENTE

ESTIMULA EL APRENDIZAJE

CREA RUTINAS DE BUENA PRAXIS

LO RECOMENDARÍAN A COMPAÑEROS


OPINIONES COMO...

TIEMPO***

CARGA ASISTENCIAL

CUESTA TRABAJO REFLEXIONAR (FALTA DE CULTURA?)

COMPLEJIDAD

MALA APLICACIÓN. INTERACC INFORMÁTICA DIFÍCIL

¿QUÉ GANO YO?


ACSA


IMPORTANTE!!!!

SENCILLEZ!!!!!

LAS TAREAS EVALUACIÓN FORMATIVA

CLARIFICAR BENEFICIOS


TRABAJAR CON LA REALIDADUNA BUENA OPCIÓN:

“NO PEDIRLES A LOS RESIDENTES LO QUENO HARIAMOS NOSOTROS”


QUE PODEMOS APORTAR AL RESIDENTE CON EL PORTFOLIO?

SISTEMATIZACIÓN

AUTOMONITORIZACIÓN

IDENTIFICAR SU PERFIL COMPETENCIAL:

DISTINGUIR SUS HABILIDADES MÁS ÚTILES

IDENTIFICAR SUS ÁREAS DE MEJORA

MEJORARLO DURANTE EL PROPIO PROCESO

CAMBIO CULTURALENSEÑAMOS A APRENDER


HTTP://WWW.SLIDESHARE.NET/[email protected]

GRACIAS


http://www.slideshare.net/japrados




COMO SE HACE EL PORTFOLIO?


PASOS

DISEÑO BASES ESTRATÉGICAS

DISEÑO MAPA DE COMPETENCIAS

DEFINICIÓN INDICADORES E INDICADORES OPERATIVOS

DISEÑO DE TAREAS: IMPORTANTE MENOR NUMERO DE TAREAS

PLANIFICAR PUESTA EN MARCHA

EVALUACIÓN DEL PORTFOLIO


HEFOR









HEFOR


COMPETENCIAS ESPECÍFICAS/BUENAS PRÁCTICAS: JUICIO CRÍTICO, INCORPORA EVIDENCIAS CIENTÍFICAS, MEJORA CONTINUA

TAREAS: 2. UNA OBLIGATORIA (PRESENTACIÓN SESIÓN) Y OTRA OPTATIVA

INDICADORES OPERATIVOS/EVIDENCIA: 3


COMPETENCIAS ESPECÍFICAS/BUENAS PRÁCTICAS: ACTITUD POSITIVA ANTE CAMBIOS, BUSCA ALTERNATIVAS PARA UNA TAREA, AJUSTA A RECURSOS, REFLEXIONA SOBRE ACTUACIÓN

TAREAS: 3. INFORME AUTORREFLEXIÓN, INCIDENTE CRÍTICO, ESQUEMA SOLUCIÓN PROBLEMAS

INDICADORES OPERATIVOS/EVIDENCIAS: 4


HEFOR


COMPETENCIAS ESPECÍFICAS/BUENAS PRÁCTICA: 6 (IDENTIFICA SU TAREA EN EL EQUIPO, ACTITUD COLABORADORA, RESPETA Y VALORAR TRABAJO DEL RESTO, PRIORIZA INTERESES DEL EQUIPO, CONOCE FUNDAMENTOS TEÓRICOS TRABAJO EQUIPO, CONOCE NEGOCIACIÓN

TAREAS: 2, UNA OBLIGATORIA (ANÁLISIS SITUACIÓN DEL EQUIPO) Y OTRA OPTATIVA

INDICADORES OPERATIVOS/EVIDENCIA: 4


COMPETENCIAS ESPECÍFICAS/BUENAS PRÁCTICAS: 3 (DA INFORMACIÓN PARA TOMA DECISIONES, PROTEGE CONFIDENCIALIDAD, MEJORA LA ACCESIBILIDAD)

TAREAS: 1 INFORME DE REFLEXIÓN

INDICADORES OPERATIVOS/EVIDENCIAS: 4ISIONES CLÍNICAS, DIAGNÓSTICAS Y TERAPÉUTICAS.


HEFOR


COMPETENCIAS ESPECÍFICAS/BUENAS PRÁCTICAS: 2 (RAZONAMIENTO CLÍNICO, PLAN DE ACTUACIÓN ANTE PROBLEMAS DEL PACIENTE)

TAREAS: 2 (ANÁLISIS 3 PACIENTES, INCIDENTE CRÍTICO)



COMPETENCIAS ESPECÍFICAS/BUENAS PRÁCTICAS: 3 (AFRONTAMIENTO POSITIVO EMOCIONAL, PLANIFICA ADAPTADO A REALIDAD, CREA SU MÉTODO)

TAREAS: 1 INFORME DE AUTORREFLEXIÓN



HEFOR


COMPETENCIAS ESPECÍFICAS/BUENAS PRÁCTICAS: 4 (OBTENER Y DAR INFORMACIÓN, ACTITUDES COMUNICACIONALES BÁSICAS, NEGOCIAR, CCP)

PRUEBAS/ TAREAS: 4 (AUDIO-VÍDEOGRABACION, EVALUACIÓN EXTERNA, INFORME DE AUTORREFLEXIÓN, INCIDENTE CRÍTICO)


SI NO CONTACTO DIRECTO CON PACIENTE: COMUNICACIÓN INTERPROFESIONAL


TUTORES QUE PIENSAN EN PORTFOLIO SEMFYC...

CONTESTAN 9/11

8 PORTFOLIO POSIBLE EN 9 MESES

DIFICULTADES PERCIBIDAS: AL INICIO MOVERSE EN PLATAFORMA (4), FALTA COSTUMBRE NUEVAS TECNOLOGÍAS (3), TIEMPO (1), FALTA DE CONSTANCIA (1), NO CONOCER LA METODOLOGÍA (1)

NECESARIO: ALGÚN CONTACTO PRESENCIAL. 4, HACER PREVIAMENTE EL PORTFOLIO 1, PLAZOS PARA ENVÍO DE TAREAS 1, TIEMPO 3, HERRAMIENTAS DE CONEXIÓN MÁS AGILES CON LINKS Y HERRAMIENTAS DE CONEXIÓN 1



BASES ESTRATÉGICAS:

• QUE PRIORICE EL IMPACTO EDUCATIVO (EVALUACIÓN FORMATIVA)

• PORTFOLIO SEMIESTRUCTURADO

• QUE PRESENTE UNAS TAREAS RAZONABLES PARA SU DESARROLLO EN UN PERIODO DE TIEMPO NO SUPERIOR A NUEVE MESES.

• DISEÑADA PARA AUTOEVALUACIÓN CON FEED-BACK AUTOMÁTICO



MAS DE 60 PROFESORES DEL GCYS

3 AÑOS

PASOS: DEFINICIÓN DE BASES ESTRATÉGICAS, DEFINICIÓN COMPETENCIAS BÁSICAS E INDICADORES GLOBALES, DEFINICIÓN DE TAREAS E INDICADORES OPERATIVOS



QUE APORTA:

BASADO EN COMPETENCIAS Y EN PERFIL COMPETENCIAL DE UN DOCENTE

NUMERO DE TAREAS EXCELENTE (9). TIEMPO RAZONABLE

EVALUACIÓN FORMATIVA

BASADO EN FEED-BACK AUTOMÁTICO. APLICACIÓN MULTIPORTFOLIO

LIMITACIONES:

MUY BASADO EN TUTOR EXPERTO



16 COMPETENCIAS: 3 DE CONOCIMIENTO, 7 DE HABILIDAD Y 6 DE ACTITUD

48 INDICADORES GLOBALES

9 TAREAS DOCENTES

12 INDICADORES OPERATIVOS DE MEDIA POR TAREA


TAREAS PORTFOLIO DOCENTE

• T01.- EVALUACIÓN DE LOS DISCENTES AL PROFESOR DE ENTREVISTA CLÍNICA

• T02.- OBSERVACIÓN EXTERNA POR EXPERTOS

• T03.- PEER-REVIEW. REVISIÓN POR PARES

• T04.- INCIDENTES CRÍTICOS EN DOCENCIA DE COMUNICACIÓN ASISTENCIAL

• T05.- VIDEOGRABACIÓN DE LA ACTIVIDAD DOCENTE


TAREAS PORTFOLIO DOCENTE

• T06.- PARTICIPACIÓN EN ACTIVIDADES DOCENTES Y DE INVESTIGACIÓN, FOROS DE EXPERTOS… PUBLICACIONES

• T07.- VIDEOGRABACIÓN ENTREVISTAS CLÍNICAS CON PACIENTES REALES

• T08.- DISEÑO DE UNA GUÍA DOCENTE

• T09.- INFORME DE AUTORREFLEXIÓN SOBRE TAREAS ANTERIORES. PLAN DE APRENDIZAJE


MEJORAS REALIZADAS

DOCUMENTOS DE AYUDA

ENLACES DE AYUDA

MAYOR PAPEL OPCIONAL DEL TUTOR

SISTEMA DE FEED-BACK. MI CARPETA

MENSAJES AUTOMATIZADOS

SIMPLIFICACIÓN DE TAREAS

ACTIVIDADES FORMATIVAS LIGADAS A COMPETENCIAS

CUADRO DE TUTORES. PERFIL


QUE ES GESTIÓN POR COMPETENCIAS

PERFILCOMPETENCIAL

PUESTO

PERFILCOMPETENCIAL

TRABAJADOR

SELECCION

DESARROLLO PROF

PLANES FORMACION

FORMACION

RECONOCIMIENTO

PROMOCION

REMUNERACION

PRODUCTIVIDAD EVALUACIO


ECOE


Definiciones

▶Paciente Simulado (signos reproducibles)▶Paciente Estandarizado (Ventajas y Desventajas

frente al Real)▶Pacientes reales estandarizados▶Paciente Monitor


Justificación Estadística

▶Precisión del PS hasta de un 93.4 %▶No son identificables entre los pacientes

normales▶Reproducible▶No influencia del sexo, número de orden, ...▶Aceptabilidad


Justificación Estadística

▶Correlación adecuada con observadores ext.▶Fiabilidad interobservador adecuada▶Consistencia interna (alfa > 0.80). Primeras

ECOEs Catalanas 0.83 y 0.65 *▶Coef. De correlación intraclase > 0.90▶Fiables en valoración de anamnesis, exploración,

técnicas comunicacionales y habilidades técnicas

*Ruiz y cols,


Pasos del proceso evaluador

▶Fijando objetivos: ¿A quien? ¿Con que finalidad? ¿Nivel de exigencia? ¿Hay

un mapa competencial de referencia?▶Diseño Tabla Especificaciones

Determinar componentesPeso de cada componenteMuestras situaciones clínicasElección de instrumentos idóneosDiseño estructura evaluadora

Martinez-Carretero y Blay,


Pasos del proceso evaluador

▶Desarrollo del proyectoDiseño de los casosPlan logísticoPlan psicométricoPlan informáticoPlan de provisión de resultadosEstablecimiento del punto de cortePlan de validación de la prueba

Martinez-Carretero y Blay,


Posibles Aplicaciones

▶ Certificación-recertificación▶ Homologación del Título▶ Título de Excelencia en el MIR▶ Acreditación docente▶ Carrera Profesional▶ Selección de personal


Comité de prueba

▶Núcleo del diseño de un proyecto. ▶Formado por 8 a 12 profesionales 6-9 Sociedad-Institución evaluadora2-3 Técnicos en evaluación de

competencias

Martínez-Carretero y Blay, 2000


Características de Selección▶Miembros de la Sociedad-Institución evaluadoraVinculadas directamente al ámbito que se evalúa y

preferentemente que ejerzan en el mismo (asistencial)Representativos de las diferentes realidades evaluadasReconocido prestigio y experienciaSin implicación moral o ética con los evaluadosTiempo y dedicación al proyectoConfidencialidad



Características de Selección

▶Miembros de la institución asesoraExperiencia en evaluación con o sin implicación en el ámbito

profesional evaluadoCapacidad de planificaciónCapacidad de liderazgo y de relación con la Sociedad-

Institución evaluadoraRoles: Coordinador del proyecto y asistente

Modificado deMartínez-Carretero y Blay,

2000


Normas de funcionamiento

▶Diferentes estructuras de funcionamiento consensuadas al inicio

▶ Igualdad entre los miembros. Decisiones por consenso

▶Planificación de reuniones según objetivos, desarrollo y tiempo

▶Equilibrio entre reuniones y trabajo individual (correo electrónico)



Normas de funcionamiento

▶Roles: Coordinador, Secretario (actas...), representante exterior

▶ Importante asistencia e implicación▶Si proyecto repetido: renovación parcial y

progresiva



Tareas del Comité de Prueba

▶Asumir la responsabilidad de la prueba▶Definir bases estratégicas del proyecto▶Construir tabla de especificaciones▶Desarrollo de casos y estaciones▶Coordinación logística▶Difusión y representatividad de la prueba



Bases estratégicas▶Buscar que sea justa y útil, válida, fiable,

factible, aceptable y con impacto educativo▶¿A quien? ▶¿Con que finalidad? ▶¿Nivel de exigencia? ▶¿Hay un mapa competencial de referencia?

SIEMPRE VOLVER A ESTAS BASES



Tabla de especificaciones

▶Tabla tridimensional que resume intencionalidad evaluativa del comité de prueba en relación a que evaluar y como evaluarlo.

▶3 componentes: situaciones clínicas, mapa de contextos y componentes competenciales


Pacientes Simulados


Generalidades

▶Historia▶Definición▶Utilidad (Formación y evaluación):ComunicaciónExploraciónToma de decisionesHabilidades técnicas concretas no

cruentasÉtica


Pacientes simulados vs realesPACIENTE ESTANDARIZADO PACIENTE REAL

Puede ser útil en cualquier momento o lugar

Es necesario su abordaje en centros hospitalarios o de A.P. y en el momento de la consulta o ingreso

Puede presentar el mismo problema para todos los estudiantes o profesionales

Un número limitado de profesionales o estudiantes pueden valorarlo

Evitas errores diagnósticos o terapéuticos cuando se utilizan con fines docentes

La corrección debe hacerse a tiempo real para evitar iatrogenia o mala orientación

Representa una aclimatación para el estudiante antes de pasar al paciente real

Puede ser muy brusco un contacto directo con el mismo


Pacientes simulados vs realesPACIENTE ESTANDARIZADO PACIENTE REALPermite al estudiante trabajar con situaciones de emergencia, problemáticas o de alto riesgo

Este tipo de situaciones en pacientes reales tienen un difícil abordaje formativo

Permite simular pacientes de muy baja prevalencia real

Es difícil encontrarlos en la realidad

Pueden ser manipulados o alterados con motivos docentes

Sus condiciones no son alterables

Pueden presentar la misma historia pese al paso del tiempo

Sus variaciones dependen del curso evolutivo espontáneo o tras tratamiento de su proceso


Pacientes simulados vs reales

PACIENTE ESTANDARIZADO PACIENTE REALPuedes presentar complicaciones o efectos secundarios en cualquier momento

Su presencia dependerá del azar

Puedes presentar pacientes en diferentes estadios evolutivos

Los distintos estadios evolutivos no siempre están disponibles

Permite repetir interacciones para mejorar pautas o conductas

No lo permite


Tipos de Pacientes Simulados

▶Paciente simulado▶Paciente real▶Paciente estandarizado▶Paciente con observador imprescindible

o recomendable▶Paciente Monitor


Desventajas PS

▶ Diseño laborioso (niveles de complejidad diferentes)▶ Metodología de selección y entrenamiento rigurosa (punto

fuerte también) 4-5 sesiones de 1.5-2 horas. Rentabilidad alta▶ Coste alto (mas barato a mas profesionales)▶ Imposibilidad de realizar algunas exploraciones cruentas

(aunque algunos actores "mejor pagados" son entrenados puntualmente para exploraciones rectales o ginecológicas) o técnicas de cirugía

▶ Reticencias a lo nuevo o diferente


Hallazgos clínicos reproducibles

▶ Abdomen agudo (en tabla)▶ Afasia▶ Asterixis▶ Blumberg▶ Calor articular▶ Coma▶ Confusión▶ Corea▶ Coxartrosis▶ Debilidad muscular▶ Disartria▶ Disminución o abolición del murmullo

vesicular▶ Distensión abdominal

▶ Enrojecimiento articular▶ EPOC▶ Espasmos musculares▶ Espasticidad▶ Estenosis arteria renal▶ Fotosensibilidad▶ Hematemesis▶ Hemiparesia▶ Hiperreflexia▶ Hipertensión/hipotensión▶ Hipoacusia▶ Hipomanía▶ Incoordinación▶ Limitaciones articulares


Hallazgos clínicos reproducibles

▶ Mareos, vértigo▶ Midriasis▶ Neumotórax▶ Obstrucción vía aérea▶ Parálisis facial▶ Parkinsonismos▶ Pérdida sensibilidad▶ Perdida visual central o periférica▶ Perspiración ▶ Ptosis palpebral▶ Respirac. Cheyne-Stokes▶ Respiración de Kussmaul▶ Rigidez

▶ Rigidez de nuca▶ Shock anafiláctico▶ Sibilancias▶ Signo "ojos de muñeca“▶ Signo de Babinski▶ Signo de Beevor▶ Signo de Brudzinski▶ Signo de Kernig▶ Signos de descerebración▶ Taquicardia▶ Tremor ▶ Ataxia▶ Vómitos


Metodología

▶Casting▶Selección (Programa)▶Diseño de casos▶Entrenamiento▶Camuflaje


evaluacion competencias y portfolio residentes farmacia andorra 2011

Health & Medicine