emarking: corrección digital de pruebas en papel

eMarking: Corrección digital de pruebas en papel

Jorge VillalónSeptiembre 2012

Educación Terciaria

Estudiantes

CURRICULUM GRADO

El macro proceso es sumativo

Syllabus

ObjetivosCalendario

SistemasDe RegistroAcadémico

Nota finalEvaluaciones

Enseñanza/Aprendizaje

Problemas de la evaluación sumativa

• Se pierde información importante

• Solo sabemos que el estudiante A pasó el curso B con cierta nota, pero– ¿Qué objetivos logró?– ¿Cuáles son sus fortalezas y

debilidades?

• El conocimiento previo es clave para adquirir nuevos conceptos

Formativa en vez de sumativa

• Preguntas y respuestas no estructuradas– Usualmente texto libre, demostraciones

matemáticas, diagramas, etc.

• La retroalimentación es importante– Requiere información formativa

• Alto costo– Corregir y entregar retroalimentación

de calidad es una carga pesada

¿Por qué corregir en papel?

• Existen dos aspectos clave en la corrección– Juicio: De acuerdo a una rúbrica

o pauta– Objeto: La parte del trabajo que

se juzga

• Corregir en papel permite asociar (linkear) el objeto con el juicio

Evaluaciones en papel

ProfesorStaff Estudiantes

3

4 5

NotaFinal

1

2

eMarking

ProfesorStaff Estudiantes

4NotaFinal

1

23

CentroCopiado

eMarking 57

6

Ventajas de eMarking

• Información formativa– Podemos adaptar nuestras clases al

conocimiento previo– Evaluar cambios metodológicos o herramientas– Comparar: clases, campus, profesores

• Base de datos de evaluaciones– Como servicio a estudiantes– Análisis cualitativo de pruebas y correcciones

(pautas)

• Hacer procesos más eficientes– Corregir desde cualquier parte– Mejoras en seguridad

Desafío de la digitalización

CentroCopiado

eMarking

Profesor

Software/Hardware de OCR caro

Nuestra propuesta

• Una herramienta de eMarking que– Maneje respuestas escritas a mano– Cree links entre un juicio (a través

de una rúbrica) y un objeto (la prueba) visualmente

– Se integre en un LMS existente– Tenga bajo costo computacional– Utilice software “open source”

(evite costos de licencias)

Solución para la digitalización: QR

• Usamos códigos QR para personalización– Cada QR contiene el ID de estudiante en el LMS, el

ID del curso y de la evaluación

eMarking UAI

Profesor

Staff

Estudiantes

6

4 5

CentroCopiado

eMarking 7

81

CentroCopiado

2

3

Ejemplo

Evaluación - Eficiencia

Evaluación: Confiabilidad inter-correctores

Trabajo Futuro

• Corrección colaborativa– Como herramienta para mejorar

actividades colaborativas de revisión entre pares

– Como herramienta para construcción de conocimiento en dominios poco definidos

• ¿Podría una rúbrica construida colaborativamente ser más confiable que una construida por una sola persona?

¿Preguntas?

jorge.villalon@uai.cl