DESCRIPCIÓN DEL NIVEL DE FACILIDAD Y

PODER DE DISCRIMINACIÓN DEL EXAMEN

DE INFERENCIA ESTADÍSTICA EN MÉTODOS

ESTADISTICOS EN MEDICINA VETERINARIAESTADISTICOS EN MEDICINA VETERINARIA

Y ZOOTECNIA

MC Ma. Guadalupe Sánchez González1

Dra. Graciela Guadalupe Tapia Perez1

1Fac. de Medicina Veterinaria y Zootecnia.UNAM. Departamento de Genética yBioestadística.

Evaluación

� La evaluacióneducativa:

� La función principal deun instrumento deeducativa:

� La elaboración� La aplicación� El análisis de los

instrumentos demedición.

un instrumento demedición, es el ofrecerinformación para lacorrecta toma dedecisiones.

Características Psicométricas de los reactivos

� Indicadores:� Nivel de dificultad� Nivel de dificultad� Poder de discriminación� Funcionamiento de sus distractores

� El nivel de dificultad (la proporción de personasque responden correctamente un reactivo).

� El poder de discriminación (capacidad del ítem de� El poder de discriminación (capacidad del ítem dediscriminar entre aquellos que tuvieron buenascalificaciones y aquellos que obtuvieron bajascalificaciones)

Objetivo

� Evaluar los resultados de los indicadores� Evaluar los resultados de los indicadorespsicométricos (nivel de facilidad y poderde discriminación) de los reactivos delexamen de inferencia estadística(contrastación de hipótesis) en MétodosEstadísticos en Medicina Veterinaria yEstadísticos en Medicina Veterinaria yZootecnia.

Material y Métodos� Semestres:2007-2, 2008-1, 2009-1 y 2009-2� Exámenes: teóricos y prácticos, se realizaron en� Exámenes: teóricos y prácticos, se realizaron en

la plataforma Moodle.� El análisis de los reactivos fueron obtenidos en la

plataforma:� Nivel de facilidad (Índice de facilidad=IF)� Poder de discriminación:

� Índice de discriminación (ID)� Índice de discriminación (ID)� Coeficiente de discriminación (CD)

� Los reactivos se clasificaron según el manual deEXHCOBA (Examen de Habilidades yConocimientos Básicos).

Índice de facilidad (IF)� El índice de facilidad o índice de dificultad (IF),

EXCOBA (Proporción) Clasificación del reactivo

0.00-0.05 Difícil0.06-0.25 Medianamente difícil

0.26-0.75 Media0.76-0.95 Medianamente fácil

0.96-1.00 Fácil0.96-1.00 Fácil

Índice de discriminación (ID)� Indicador del desempeño de los individuos con

puntuaciones altas frente a sujetos con puntuaciones bajas.� El parámetro abarca (-1≤ID≤1).� Un índice es inferior a 0 (cero) significa que los estudiantes

del grupo bajo rindieron más en el ítem que los del grupoalto, tales ítems deberían eliminarse debido a su escasafiabilidad, reducen la precisión del cuestionario.

EXCOBA (Proporción)

Clasificación del reactivo

Recomendación

(-) Negativo Pésima Descartar(-) Negativo Pésima Descartar

0.00-0.19 Pobre Revisar a profundidad o descartar

0.20-0.29 Regular Revisar

0.30-0.39 Buena Posibilidad de mejorar

0.40-1.00 Excelente Conservar

Coeficiente de discriminación (CD)� El parámetro adopta valores entre (-1≤CD≤1).� Los valores positivos indican una buena discriminación.� Los valores positivos indican una buena discriminación.� Los valores negativos se dan cuando los ítems son

contestados mejor por los estudiantes con calificacionesmás bajas, o son contestados incorrectamente por losestudiantes mejores, dichos ítems deberán eliminarse.

EXCOBA (Proporción)

Clasificación del reactivo

Recomendación

(-) Negativo Pésima Descartar(-) Negativo Pésima Descartar

0.00-0.19 Pobre Revisar a profundidad o descartar

0.20-0.29 Regular Revisar

0.30-0.39 Buena Posibilidad de mejorar

0.40-1.00 Excelente Conservar

CD vs. ID

� La ventaja del CD frente al ID es que elprimero utiliza información proveniente deprimero utiliza información proveniente dela población total de estudiantes, no sólode los tercios superior e inferior.

� Este parámetro es más sensible paradetectar el comportamiento de los ítems.

ResultadosExamen Teórico

Promedio ± D.E. (n=63)

Examen PrácticoPromedio ± D.E.

(n=43)(n=63)

General 15.75 ±2.5Índice defacilidad

49.86±15.31Media

Índice dediscriminación

0.18±0.35Pobre

Coeficiente dediscriminación

0.31±0.11Bueno

(n=43)

General 10.75 ±3.4Índice defacilidad

57.47±15.68Media

Índice dediscriminación

0.58±0.19Excelente

Coeficiente dediscriminación

0.53±0.15Excelentediscriminación Bueno discriminación Excelente

n2007-2=433n2008-1=195

n2009-1=104n2009-2=481

Resultados IFEXHCOBA

(Proporción)Clasificación del reactivo Examen Teórico

MEMVZ-FMVZ (%)Examen Práctico MEMVZ-FMVZ (%)

0.00-0.05 Difícil 0.00 0.000.06-0.25 Medianamente difícil 4.75 5.000.06-0.25 Medianamente difícil 4.75 5.000.26-0.75 Media 87.30 81.000.76-0.95 Medianamente fácil 7.94 14.000.96-1.00 Fácil 0.00 0.00

Resultados del IDEXHCOBA

(Proporción)Clasificación del

reactivoExamen Teórico

MEMVZ-FMVZ (%)Examen Práctico MEMVZ-FMVZ (%)

(-) Negativo Pésima 39.68 0.000.00-0.19 Pobre 6.35 2.300.20-0.29 Regular 4.76 7.000.30-0.39 Buena 12.70 9.300.40-1.00 Excelente 36.51 81.40

Resultado del CDEXHCOBA

(Proporción)Clasificación del

reactivoExamen Teórico

MEMVZ-FMVZ (%)Examen Práctico MEMVZ-FMVZ (%)

(-) Negativo Pésima 0.00 0.000.00-0.19 Pobre 6.35 0.000.20-0.29 Regular 20.63 0.000.30-0.39 Buena 20.63 7.000.40-1.00 Excelente 36.51 93.00

Discusión y Conclusiones

� El IF muestra: � El IF muestra:

� 1) Un gran número de reactivos tienen unadificultad media a facilidad media.

� 2) Se carece de reactivos difíciles o fáciles.� 2) Se carece de reactivos difíciles o fáciles.

Discusión y Conclusiones

� 3) El ID y el CD para el examen teóricomostraron diferencia entre estimadoresmostraron diferencia entre estimadores(53.97%reactivos óptimos) y (93.65%)

� El ID no está discriminando entre los estudiantes delgrupo alto y los alumnos del grupo bajo

� La literatura indica una ventaja del CD (población� La literatura indica una ventaja del CD (poblacióntotal) frente al ID (tercios extremos). Porconsiguiente, el CD es más sensible para detectar elcomportamiento de los reactivos.

Discusión y Conclusiones

� 4) El porcentaje de reactivos óptimos en elexamen práctico fue similar 100% con elexamen práctico fue similar 100% con elCD y 97.7% con el ID.

� 5) El análisis de reactivos proporcionadopor la plataforma Moodle, permitedeterminar en forma sencilla y rápida sideterminar en forma sencilla y rápida silos reactivos son fáciles o difíciles y siestos están discriminando correctamente.

GraciasGracias