taller: presentación de ítems liberados de pruebas internacionales de evaluación. jornadas de...

@educainee INEE_MECD

Logroño, 7 y 8 de mayo de 2014

TALLER:Presentación de ítems liberados de pruebas internacionales de evaluación

¿Has visto que prueba han hecho?¿A quién se le habrá

ocurrido?

Mira este ítem.¡Qué barbaridad!

EVALUACIONES EDUCATIVAS

Currículo

Competencias y habilidades para la vida

Evaluación

LO DESEABLE DE UN SISTEMA EDUCATIVO

LO OBSERVADO CON UNA PRUEBA DE EVALUACIÓN

Currículo

Competencias yhabilidades para la vida

Evaluación

EVALUACIONES EDUCATIVAS

Niveles cognitivos (Niveles de complejidad en la resolución de la tarea) Ponderación

ProcesosDimensiones/Dominios Proceso I Proceso II Proceso III

Dominio 1 Descriptores Descriptores Descriptores %Dominio 2 Descriptores Descriptores Descriptores %Dominio 3 Descriptores Descriptores Descriptores %

Ponderación % % %

Descriptores: Formulaciones sintéticas de las

competencias/capacidades que medirán los ítems

Matriz de especificaciones

DESCRIPTOR

BLOQUES DE CONTENIDOS• Números• Álgebra• Geometría• Funciones y Gráficas• Estadística y Probabilidad• Contenidos comunes

Ejemplo: Contenidos y Procesos para Matemáticas 2º ESO

EJEMPLO DE

CONSTRUCCIÓN DE PRUEBAS

EJEMPLO DE

CONSTRUCCIÓN DE PRUEBAS

Estímulo

Ítem

Pilotaje

Aplicación principal

Explotación de datos

Tipo respuesta:• Elección múltiple• Cerrada• Abierta construida• Abierta

MATRIZ ESPECIFICACIONES

PROCESO DE CONSTRUCCIÓN DE PRUEBAS

CODIFICACIÓN

ELABORACIÓN

EJEMPLO TIMSS CIENCIAS

CLAVE

TRONCO

A, C y D DISTRACTORES

ESTÍMULO o CONTEXTO

Recomendaciones paraseleccionar estímulos

• Buscar estímulos en los que el alumno pueda tener interés.

• Seleccionar en función de las preguntas que se harán: Textos (continuos o discontinuos). Gráficos, imágenes, fotografías, dibujos, etc. Esquemas (sinópticos, eléctricos, planos, distribución, montaje). Comentarios, notas al pie, aportaciones laterales. Tiras cómicas. Mapas de metro, de autobús, de ciudad, de carreteras. Organigramas, tablas, listados, notas manuscritas, carteles, etc.

• Deben ser correctos y respetuosos desde el punto de vista de la igualdad de los sexos, creencias religiosas, etc.

C

http://pisa-sq.acer.edu.au/showQuestion.php?testId=2295&questionId=5http://www.youtube.com/watch?v=QHzpPflDiMY

PONGÁMONOS A PRUEBA

PONGÁMONOS A PRUEBA

PONGÁMONOS A PRUEBA

Presentación de ítems liberados de PISA, TIMSS y PIRLS: Marco teórico, elaboración y aprovechamiento didáctico

Presentación de ítems liberados de PISA, TIMSS y PIRLS: Marco teórico, elaboración y aprovechamiento didáctico

CRITERIOS DE CORRECCIÓN PREGUNTA A

Presentación de ítems liberados de PISA, TIMSS y PIRLS: Marco teórico, elaboración y aprovechamiento didáctico

Presentación de ítems liberados de PISA, TIMSS y PIRLS: Marco teórico, elaboración y aprovechamiento didáctico

CRITERIOS DE CORRECCIÓN PREGUNTA B

Presentación de ítems liberados de PISA, TIMSS y PIRLS: Marco teórico, elaboración y aprovechamiento didáctico

CRITERIOS DE CORRECCIÓN PREGUNTA C

Presentación de ítems liberados de PISA, TIMSS y PIRLS: Marco teórico, elaboración y aprovechamiento didáctico

CRITERIOS DE CORRECCIÓN PREGUNTA D

Recomendaciones paraelaborar preguntas (ítems)

• Si son de respuesta múltiple: Incluir un número par de respuestas. Se recomienda cuatro. Solo exista una respuesta inequívocamente correcta. Los distractores sean plausibles pero erróneos. Todas las opciones tengan una forma de redacción similar. Todas las opciones tengan una longitud similar. No emplear preguntas negativas o alternativas negativas.

Recomendaciones paraelaborar preguntas (ítems)

• Si son de respuesta elaborada: No incluir expresiones del tipo “cita al menos tres …”. Ser preciso

en lo que se pide ayuda a la codificación. Podríamos sustituir la expresión anterior por “Enumera tres …”.

Evitar preguntar cuestionas vinculadas con el idioma de manera directa: “sustituye la palabra por un sinónimo”.

Elaborada larga: plantearla para que la codificación sea posible => ejemplos de respuestas reales.

Codificación

• CUANDO ESTÁ “BIEN O MAL”

Puntuación máximaCódigo 1: … (cuando es abierta se acompaña con ejemplos de lo que se considera que está correcto)

Sin puntuaciónCódigo 0: otras respuestas …Código 9: sin respuesta

Codificación

• PUNTUACIÓN PARCIAL

Puntuación máximaCódigo 2: … (ejemplos de lo que se considera que está correcto)

Puntuación parcialCódigo 1: … (ejemplos de lo que se considera que está parcialmente correcto)

Sin puntuaciónCódigo 0: otras respuestas …Código 9: sin respuesta

Curso evaluaciones externas internacionales

Síguenos en Twitter:@educaINEE

En nuestro blog:http://blog.educalab.es/inee/

Y en slideshare:http://www.slideshare.net/INEE_MECD

http://www.mecd.gob.es/inee/

¡¡Muchas gracias!!