EL CURRICULO DE ELE: EXMENES DE ELEJavier Fruns1. CONCEPTOS BSICOS1.1. TIPOS DE EXMENES Pruebas de nivel: diagnosticar el nivel del alumno. Tiene objetivos distintos, por lo que cambia la naturaleza del examen. Vocabulario Gramtica > organizar alumnos. 1) Cuestionario2) Estn siendo sustituidos por el portfolio: el alumno reflexiona.3) Parte oral: en funcin de ella se le da una prueba escrita u otra. Certificados de dominio: DELE. Lo nico que importa es si tiene un determinado nivel o no. No hay retroalimentacin vara el examen. Son cada vez ms comunicativos, se eliminan las partes de gramtica y vocabulario y pasan a ser por destrezas. Progreso o aprovechamiento: Son parecidos. El de progreso mide lo que se va aprendiendo en clase y el de aprovechamiento comprueba si se han conseguido los objetivos a final de curso. Pueden ser de muchos tipos, pero siempre coherentes con el currculo. 1.2. EFECTIVIDAD: Fiabilidad: Cuando el examen es consistente. Hay tres momentos para conseguir que sean as: 1) la creacin del examen: un examen ms o menos igual de difcil ao tras ao. 2) En la administracin del examen: las condiciones de exposicin al examen tienen que ser siempre las mismas (silencio, tiempos, tipo de respuestas)3) Al calificarlo: Si es una prueba subjetiva, como las de expresin, y se califica con escalas, hay que interpretar las escalas siempre de la misma manera; hay que ser consistente. Validez: Medimos lo que queremos medir y slo lo que queremos medir. Tenemos que tener claro cul es nuestro constructo del examen, lo que pensamos que es la competencia comunicativa, por ejemplo; qu entendemos nosotros por competencia comunicativa, comprensin de las ideas especficas, de vocabulario concreto, la capacidad de expresin oral segn una serie de rasgos Una vez que sabemos qu queremos medir, se hace el examen. Hay exmenes muy fiables pero poco vlidos. Por ejemplo, una evaluacin objetiva en la expresin escrita no siempre es tan vlida como la subjetiva, menos fiable pero ms vlida. Por ello, lo que se hace son exmenes con parte objetiva y parte subjetiva. Autenticidad: La evaluacin ha seguido la misma evolucin que la teora de la enseanza y aprendizaje, por lo que se intenta hacer lo ms autntico posible, por lo que se intenta utilizar textos autnticos. La autenticidad total en un examen nunca se logra. Con el enfoque por tareas casi se consigue. Viabilidad: Un examen tiene que ser posible de realizarse en unas condiciones determinadas. Muchas veces nos pasa que queremos examinar de todos los contenidos del curso. Al cabo de los 20 minutos de comprensin auditiva, un alumno est agotado. Lo que tenemos que hacer es reducir nuestras pretensiones, tiene que ser generalizable a partir de los datos que nosotros tenemos. Hay que elegir cuidadosamente las actividades. Un examen tiene que medir todo lo que queremos medir y slo lo que queremos medir, lo que quiere decir que tenemos que generalizar, y en las condiciones que tenemos. Interactividad: El tipo de ejercicios que tiene que hacer el alumno en un examen tiene que ser diverso. Hay culturas en las que el examen del tipo test es ms normal que en otras, lo mismo con la interpretacin de grficos: lo que medimos es la habilidad con la lengua, con lo que hay que hacerlo variado para medir capacidad lingstica y no otras cosas. Impacto: Las consecuencias. No tiene sentido un examen de una hora de vocabulario de clase. Al hablar de impacto, est relacionado el efecto rebote, que es el impacto que nuestro examen va a tener en la enseanza. Si hace un examen de vocabulario slo, el alumno no va a participar en la parte comunicativa: el alumno aprende en funcin de su examen. Esto a veces toca incluso aspectos ticos (como dar una nacionalidad a alguien por un examen de lengua).

1.3. ESPECIFICACIONES1) Propsito.2) Perfil del destinatario.3) Nivel (al elegir textos, hacer las preguntas)4) Constructo: lo que queremos medir, la concepcin que tenemos de la competencia comunicativa. 5) Situaciones en la lengua meta. (en consonancia con el currculo, tipos de texto, etc.)6) Destrezas que se evalan y de qu forma. A veces es menos autntico separar destrezas, pero en algunos momentos es ms eficaz para saber dar una retroalimentacin a los alumnos (en los de aprovechamiento), y as es como se identifican de manera ms sencilla los problemas.7) Secciones o partes del examen y duracin de cada una. La mayora de estas especificaciones ya las tenemos en un curso.

2. CREACIN DE UNA PRUEBA DE COMPRENSIN2.1. ESPECIFICACIONES DE COMPRENSIN LECTORA Tipos de textos: hay que elegir alguno que sea representativo. Tienen que ser variados. Elementos lingsticos que deben evaluarse: aunque no sea un examen especfico de gramtica, es necesario saber qu es lo que vamos a preguntar dependiendo del nivel y de lo que queramos evaluar. Como ayuda siempre tenemos el PCIC. Tipos de tareas y ejercicios que vamos a hacer para la comprensin: Tienen que ser variadas. Nmero de ejercicios y valor de cada uno: Aqu es donde entra la viabilidad. Instrucciones: Cmo dar las instrucciones de las tareas. Asegurarnos de que las instrucciones son del nivel de lengua de los alumnos. Criterios de calificacin: Cunto va a valer cada ejercicio y qu puntuacin les damos. LA SELECCIN DEL TEXTO: Hay que tener en cuenta el nivel El mbito al que pertenece el texto (personal, pblico, acadmico y profesional) Gnero discursivo (descriptivo, narrativo, argumentativo, expositivo) Temas Nivel (gramtica, lxico, etc.) Autenticidad y fuente (se puede adaptar) Extensin del texto: tienen que tener una extensin similar los distintos textos de un examen. Variedades lingsticas: siempre del espaol peninsular o tambin otras variedades? Tono y registro Organizacin: tienen que ser textos muy bien estructurados, que estn bien escritos. Nmero y separacin de ideas en el texto. Tipos de informacin: que sea novedosa pero que tampoco sea demasiado especializada, de manera que no sepan unos ms que otros. 2.2. FOCALIZACIN DE UNA TAREA:Tenemos que saber qu queremos que haga el alumno en la tarea. Normalmente se le pide que haga lo que hara en la vida real con ese tipo de texto. Por ejemplo, si tienes que leer un billete de autobs, que sepas leer lo que te importa: a qu puerta tiene que ir, a qu hora, precio, etc. Podemos focalizar la tarea en cualquiera de estos puntos o en algunos de ellos (comn para comprensin de lectura y auditiva): Saber de qu trata (idea general) Captar las ideas principales Localizar informacin especfica Comprenderlo en profundidad y detalle (por ejemplo, si ponemos un artculo para clase, un ensayo, etc.) Identificar la estructura del texto (tendr que comprender mecanismos de cohesin, ideas principales) Inferir intenciones, sentido, etc.

2.3. TIPOS DE TEMS: Respuesta cerrada: lo nico que tiene que hacer el alumno es comprender. a) Opcin mltipleLa agencia EFE celebra en 2014:a. Su 75 aniversario.b. Su traslado a una nueva sede.c. Su expansin a Amrica.

En pruebas de comprensin de lectura, cuando queremos poner cuatro opciones a veces es difcil hacer cuatro opciones plausibles, que parezcan verdaderas. Es mejor hacer tres y que parezcan verdaderas.

Ventajas: son muy fciles de corregir; son conocidos en todo el mundo; nos sirve para cualquier tipo de texto y cualquier tipo de focalizacin (ideas generales, idea principal)

Desventajas: son muy difciles de elaborar; los distractores tienen que distraer, tienen que estar basados en lo que dice el texto; hay gente que dice que con ellos confundimos intencionadamente al alumno; hay gente a las que se les da mejor y peor hacer este tipo de tems.

b) Opcin mltiple con banco comn de opciones

Un texto con huecos y palabras que sobran.

Aqu no confundimos tan intencionadamente al lector. No est mal frente a la opcin mltiple. c) Reconstruir: tambin con ms opciones que huecos. Exige comprender las ideas principales, los nexos Realmente te hace comprender el sentido del texto. Requiere mucha concentracin y tiempo por parte del alumno.

d) Relacionar: Textos y enunciados. Es muy bueno para niveles bajos, porque podemos utilizar textos cortos.

e) Ordenar: Desordenar un texto y que lo tengan que ordenar los alumnos. Tambin tienes que entender las ideas principales del texto; a veces los alumnos hacen la mitad bien y la mitad mal y no han entendido nada; es difcil de calificar.

Respuesta semiabiertaf) Cloze-test: son palabras concretas pero que tambin pueden permitir otras palabras que a nosotros no habamos pensado. En sentido literal, tal y como eran al principio, es que cada cierto nmero de palabras, (5, 6, 7) siempre el mismo, falta una palabra. g) Cloze-test sin intervalo fijo: Luego pas a ser quitar la palabra que t quieras para ajustarse a lo que uno quiere preguntar. Es un poco ms adecuada que la anterior. h) Cloze cerrado: Se dan opciones, y en esta s que influye el azar ms que en la anterior. i) C-test: te quita la mitad de la palabra. Respuesta abierta: de la vida real. un resumen, responder a preguntas. Son al mismo tiempo de comprensin y de expresin. Tendrn distintos grados de correccin, con lo que no hay que medirlas como correctas/incorrectas. Se mide tambin otra destreza adems de la comprensin lectora o auditiva. Dependiendo de nuestros objetivos podemos tener lo que se llama la medida embarrada, no saber bien qu se est evaluando porque no realiza la tarea. Es mejor separar una cosa de otra.2.4. PAUTAS PARA TEMS DE OPCIN MLTIPLE todas las opciones tienen que ser posibles no hay opciones agramaticales: no hay que confundir al alumno en ese sentido. todas las opciones son plausibles pero el texto no dice eso la respuesta no se deduce antes de leer el texto todos los tems evalan contenidos distintos y son independientes y sobre ideas separadas. Los tems se enuncian afirmativamente Las opciones de un tem tienen una extensin similar No hay dos opciones contrarias o relacionadas junto a otras completamente distintas Los tems siguen el orden de la informacin en el texto En los tems no hay lxico o construcciones ms complejas que en los textos El nmero de opciones no dificulta la creacin de buenos tems

Una de las funciones bsicas a la hora de crear exmenes, es el tener una revisin de tems, en la certificacin oficial, aparte de que luego se experimente.Est muy bien decir segn el texto para poder tener ms distractores. No usar las mismas palabras en los tems que en el texto, de manera que nos aseguramos de que ha comprendido la idea, pero siempre del mismo nivel de lengua. 2.7. PARTICULARIDADES DE LAS PRUEBAS de COMPRENSIN AUDITIVA Hay que basarse ms en el audio que en la transcripcin del audio. Dificultad de encontrar fuentes autnticas Duracin de las pruebas (20 minutos es muy largo) Falta de control por parte del examinando: tienes que seguir el orden del audio y luego ya no puede volver a escucharlo ni puede prever lo que le van a preguntar; el alumno est muy limitado. Nmero de escuchas: se parte de la idea de que el examen de por s no es autntico: sera mejor poner un audio dos veces, excepcionalmente 3. Tiempo para leer antes de la audicin o entre audiciones. Segn los estudios el que mejoren los resultados no tiene nada que ver con esto. Lo que s que es importante, es dejar un tiempo entre la primera y la segunda escucha. Textos: nmero de participantes y facilidad para reconocerlos. Textos: velocidad e inteligibilidad.

3. ANLISIS DE LOS TEMS Y PUNTO DE CORTE3.1. EL PUNTO DE CORTE: Decisin sobre el punto de corte ndice de dificultad: que el aprobado siempre sea la misma nota, no siempre es el mismo. En los DELE, por ejemplo, cambia el punto de corte por el uso de tems ancla: hay profesores que utilizan exmenes del DELE con 100 alumnos que experimentan antes de que se les ponga. As se sabe cmo van. Cogen un tem de un DELE pasado, se sabe con seguridad que tiene una dificultad media, se pone, no cuenta, y con eso se sabe el nivel que hay.3.2. COEFICIENTE DE DIFICULTAD: Se obtiene de dividir el nmero de respuestas correctas a un tem entre el nmero de examinandos. Ejemplo: COEFICIENTEDIFICULTAD DEL TEM