Procedimiento para Diseñar Procedimiento para Diseñar Pruebas ObjetivasPruebas ObjetivasCurso-Taller para ProfesoresCurso-Taller para Profesores

EST-118EST-118Verano 2011Verano 2011

Curso-Taller para ProfesoresCurso-Taller para ProfesoresEST-118EST-118

Verano 2011Verano 2011

1º. Decisión para elaborar un examen1º. Decisión para elaborar un examen

Acordar1.Qué materias y el orden en que pondrán en marcha un examen objetivo2.Nombrar un Coordinador para cada examen3.El Coordinador formará un comité académico

Acordar1.Qué materias y el orden en que pondrán en marcha un examen objetivo2.Nombrar un Coordinador para cada examen3.El Coordinador formará un comité académico

ProfesoresProfesoresDirectivosDirectivos

2º. Acciones del Coordinador para elaborar 2º. Acciones del Coordinador para elaborar un examenun examen

CoordinadorCoordinador Comité AcadémicoComité Académico

Tabla de EspecificacionesDefinir:• El propósito de la prueba• El Perfil Referencial o conjunto de habilidades y conocimientos

mínimos que debe evaluar la prueba.• Los temas del área de conocimiento y los niveles (taxonómicos)

en que se deberá explorar el conocimiento.• Los pesos o porcentajes de reactivos por temas para establecer

el adecuado muestreo del universo de contenidos por evaluar.

Tabla de EspecificacionesDefinir:• El propósito de la prueba• El Perfil Referencial o conjunto de habilidades y conocimientos

mínimos que debe evaluar la prueba.• Los temas del área de conocimiento y los niveles (taxonómicos)

en que se deberá explorar el conocimiento.• Los pesos o porcentajes de reactivos por temas para establecer

el adecuado muestreo del universo de contenidos por evaluar.

3º. Acciones de todos los participantes para 3º. Acciones de todos los participantes para elaborar un examenelaborar un examen

DirectivosDirectivos ProfesoresProfesores

CoordinadorCoordinador Comité AcadémicoComité Académico

• Revisar, discutir, modificar y en su caso aprobar la Tabla de Especificaciones del examen

• Revisar, discutir, modificar y en su caso aprobar la Tabla de Especificaciones del examen

4º. Acciones del Coordinador una vez 4º. Acciones del Coordinador una vez aprobada la Tabla de Especificacionesaprobada la Tabla de Especificaciones

CoordinadorCoordinador Profesores de la asignaturaProfesores de la asignatura

1. El Coordinador organiza un taller para los profesores de la asignatura (internos y externos) para la elaboración de reactivos, asesorados por el coordinador y por el comité académico (si es el necesario) cubriendo los diferentes temas y niveles taxonómicos.

2. Se codifican los reactivos para su fácil control (materia, tema y nivel) e identificación del autor.

3. Se transcriben las preguntas a un banco de reactivos

1. El Coordinador organiza un taller para los profesores de la asignatura (internos y externos) para la elaboración de reactivos, asesorados por el coordinador y por el comité académico (si es el necesario) cubriendo los diferentes temas y niveles taxonómicos.

2. Se codifican los reactivos para su fácil control (materia, tema y nivel) e identificación del autor.

3. Se transcriben las preguntas a un banco de reactivos

5º. Acciones de todos los participantes para 5º. Acciones de todos los participantes para elaborar un examenelaborar un examen

DirectivosDirectivos ProfesoresProfesores

CoordinadorCoordinador Comité AcadémicoComité Académico

Revisar en los reactivos el contenido y la redacción (Formato).• Contenido: correspondencia con la Tabla de Especificaciones.• Redacción clara y adecuada a la población objetivo de la base

y opciones de respuesta.

Revisar en los reactivos el contenido y la redacción (Formato).• Contenido: correspondencia con la Tabla de Especificaciones.• Redacción clara y adecuada a la población objetivo de la base

y opciones de respuesta.

6º. Acciones del Coordinador y Profesores6º. Acciones del Coordinador y Profesores

CoordinadorCoordinador Profesores de la asignaturaProfesores de la asignatura

1. Seleccionar a los grupos para probar todos los reactivos (piloteo) en varios exámenes• Para estimar tiempos de ejecución; y• Los primeros índices estadísticos para análisis de reactivos

1. Seleccionar a los grupos para probar todos los reactivos (piloteo) en varios exámenes• Para estimar tiempos de ejecución; y• Los primeros índices estadísticos para análisis de reactivos

7º. Acciones del Coordinador7º. Acciones del Coordinador1.1. Para cada reactivo calcular:Para cada reactivo calcular:

• Grado de dificultad (GD)Grado de dificultad (GD)GD=(Total de respuestas correctas/Total de GD=(Total de respuestas correctas/Total de

sustentantes con Resp. válidas) X 100%sustentantes con Resp. válidas) X 100%• Poder de discriminación (PD)Poder de discriminación (PD)PD=(Respuestas correctas del grupo superior-PD=(Respuestas correctas del grupo superior-

Respuestas correctas del grupo inferior)/Total de Respuestas correctas del grupo inferior)/Total de sustentantessustentantes

• Norma Discriminativa (ND)Norma Discriminativa (ND) ND= o.3XGD para 0≤GD≤76.92ND= o.3XGD para 0≤GD≤76.92

ND=100-GD para 76.92≤GD≤100ND=100-GD para 76.92≤GD≤100• Relación Discriminativa (RD)Relación Discriminativa (RD)

RD=PD/NDRD=PD/ND

7º. Acciones del Coordinador (cont.)7º. Acciones del Coordinador (cont.)2. Comparar los valores encontrados para cada reactivo 2. Comparar los valores encontrados para cada reactivo en el piloteo con las condiciones siguientes para en el piloteo con las condiciones siguientes para aceptar los reactivos:aceptar los reactivos:

20≤GD≤8020≤GD≤80

PD≥NDPD≥ND

RD≥1RD≥1

8º. Acciones de todos los participantes para 8º. Acciones de todos los participantes para elaborar un examenelaborar un examen

DirectivosDirectivos ProfesoresProfesores

CoordinadorCoordinador Comité AcadémicoComité Académico

Acordar tamaño del examen considerando:• El tiempo que se dispone para cada examen (se requiere de

3min/pregunta)• Porcentaje de error del instrumento

Acordar tamaño del examen considerando:• El tiempo que se dispone para cada examen (se requiere de

3min/pregunta)• Porcentaje de error del instrumento

8º. Acciones de todos los participantes para 8º. Acciones de todos los participantes para elaborar un examen (cont.)elaborar un examen (cont.)

% error 20 15 12 10 5No. de

reactivos12 19 27 39 131

Considerar que todo instrumento tiene un error y que el examen puede tener un error de medida de aproximadamente:

9º. Acciones del Coordinador 9º. Acciones del Coordinador 1.1. Con el acuerdo del pleno se generan los Con el acuerdo del pleno se generan los

exámenes y las versiones con un GD=50% .exámenes y las versiones con un GD=50% .2.2. Se aplican a los alumnosSe aplican a los alumnos3.3. Se comprueban los valores de GD, PD, ND y Se comprueban los valores de GD, PD, ND y

RD de los reactivosRD de los reactivos4.4. Se establece la escala de calificación donde:Se establece la escala de calificación donde:La media (GD)=6.0La media (GD)=6.0La media +1 Desv. Std.=7.3La media +1 Desv. Std.=7.3La media+2 Desv. Std.=8.6La media+2 Desv. Std.=8.6La media+3 Desv. Std.=10La media+3 Desv. Std.=105.5. Se califica a los alumnosSe califica a los alumnos

10º. Acciones del Coordinador 10º. Acciones del Coordinador

Se actualizan los valores de calibración de los Se actualizan los valores de calibración de los reactivos en el banco de reactivos, para tener un reactivos en el banco de reactivos, para tener un valor más real la próxima vez.valor más real la próxima vez.Si se requieren más reactivos volver al taller de Si se requieren más reactivos volver al taller de reactivos|reactivos|Si se cambian los programas, ajustar la Tabla de Si se cambian los programas, ajustar la Tabla de EspecificacionesEspecificaciones