agencia andaluza de evaluaciÓn educativa presentación de las evaluaciones internacionales timss y...

AGENCIA ANDALUZA DEEVALUACIÓN EDUCATIVAPresentación de las evaluaciones internacionales TIMSS y PIRLSDiciembre de 2014

1. TIMSS 2015 y PIRLS 2016.2. El estudio internacional TIMSS.3. El estudio internacional PIRLS.4. Aplicación de la prueba TIMSS.5. Tratamiento confidencial de los datos.6. Difusión de resultados.7. Participación de España en TIMSS – PIRLS.8. Muestra en Andalucía.

ÍNDICE

AGENCIA ANDALUZA

DE EVALUACIÓN EDUCATIVA

Presentación de las evaluaciones internacionales TIMSS y PIRLS

Diciembre 2014

TIMSS 2015PIRLS 2016

1

AGENCIA ANDALUZA



Diciembre 2014

1 TIMSS Y PIRLS

Responsable de la evaluación

TIMSS y PIRLS son los dos estudios internacionales de evaluación de la IEA más antiguos y consolidados.

La IEA (Asociación Internacional para la Evaluación del Logro Educativo) es la encargada de dirigir y administrar el proyecto, coordinar la participación de los países y manejar las bases de datos. Tiene su sede en Ámsterdam.

Ambos estudios están dirigidos desde el International Study Center del Boston College (USA) y tienen como centros colaboradores al DPC-IEA de Hamburgo, Statistics Canada y el Educacional Testing Service (USA).

AGENCIA ANDALUZA



Diciembre 2014

1 TIMSS Y PIRLS

ESTUDIOS REALIZADOS

AGENCIA ANDALUZA



Diciembre 2014

1 TIMSS Y PIRLS

Responsable de la evaluación

Los estudios TIMSS y PIRLS en España están coordinados por el Instituto Nacional de Evaluación Educativa del Ministerio de Educación, Cultura y Deporte, en estrecha colaboración con la Agencia Andaluza de Evaluación Educativa en nuestra comunidad autónoma.

AGENCIA ANDALUZA



Diciembre 2014

2

AGENCIA ANDALUZA



Diciembre 2014

EL ESTUDIO INTERNACIONAL TIMSS

2 EL ESTUDIO INTERNACIONAL TIMSS

AGENCIA ANDALUZA



Diciembre 2014


Objeto de la evaluación:

TIMSS (Trends International Mathematics and Science Study) es el Estudio Internacional de Tendencias en Matemáticas y Ciencias que evalúa los aprendizajes en estas áreas que el alumnado de 4º de Primaria ha adquirido en la escuela.

Matemáticas: La razón fundamental de la inclusión de las matemáticas en los currículos escolares es el reconocimiento de la importancia que su conocimiento, y aún más su capacidad de aplicación, tienen en la formación de los ciudadanos y ciudadanas para su vida tanto personal, laboral como social.

Ciencias: El estudio de las Ciencias es básico para comprender el mundo y la evolución de la sociedad en función de las aplicaciones de los descubrimientos científicos. Por ello, las Ciencias son consideradas como un medio para desarrollar en el alumnado procedimientos, estrategias y conocimientos rigurosos.

AGENCIA ANDALUZA



Diciembre 2014


Organización de las Matemáticas en TIMSS

EL rendimiento en Matemáticas se organiza en torno a dos dimensiones: áreas de contenido y dominios cognitivos.

Áreas de contenido:I. Números (50%)II. Figuras geométricas y medición (35%)III. Presentación de datos (15%)

Dominios cognitivos:I. Conocer (40%)II. Aplicar (40%)III. Razonar (20%)

AGENCIA ANDALUZA



Diciembre 2014


Organización de las Ciencias en TIMSS

EL rendimiento en Ciencias se organiza en torno a dos dimensiones: áreas de contenido y dominios cognitivos.

Áreas de contenido:I. Ciencias de la vida (45%)II. Ciencias físicas (35%)III. Ciencias de la Tierra (20%)

Dominios cognitivos:I. Conocer (40%)II. Aplicar (40%)III. Razonar(20%)

AGENCIA ANDALUZA



Diciembre 2014


¿Qué instrumentos utiliza el estudio?

• Prueba para el alumnado: • Hay un cuadernillo de prueba, que consta de dos

partes.

• Cada parte está dedicada a una materia, matemáticas y ciencias, y consta de unas 20 preguntas, la mayoría precedidas de un estímulo generalmente breve.

• Cada parte de la prueba requerirá al alumnado unos 50 minutos de trabajo, por lo que se recomienda que haya un descanso entre las dos.

AGENCIA ANDALUZA



Diciembre 2014



• Prueba para el alumnado: • El diseño de la prueba consiste en elaborar un

número amplio de ítems que se distribuyen en bloques de entre 10 y 14 ítems cada uno. Asimismo, para facilitar el cálculo de las tendencias entre las ediciones de la prueba, se utilizan algunos de los bloques de la edición anterior (2011).

• Los cuadros siguientes explicitan los distintos bloques y cómo se distribuyen en cuadernillos diferentes.

AGENCIA ANDALUZA



Diciembre 2014

AGENCIA ANDALUZA



Diciembre 2014

BLOQUES DE PREGUNTAS

DE MATEMÁTICA

S

TIPO DE ÍTEMS

BLOQUES DE

PREGUNTA

S DE CIENCIAS

TIPO DE ÍTEMS

M01 M13 (TIMSS 2011) S01 S13 (TIMSS 2011)

M02Nuevos ítems TIMSS 2015

S02Nuevos ítems TIMSS 2015

M03 M04 (TIMSS 2011) S03 S04 (TIMSS 2011)



M05 M09 (TIMSS 2011) S05 S09 (TIMSS 2011)M06 M10 (TIMSS 2011) S06 S10 (TIMSS 2011)M07 M11 (TIMSS 2011) S07 S11 (TIMSS 2011)



M09 M08 (TIMSS 2011) S09 S08 (TIMSS 2011)



M11 M12 (TIMSS 2011) S11 S12 (TIMSS 2011)



M13 M14 (TIMSS 2011) S13 S14 (TIMSS 2011)



AGENCIA ANDALUZA



Diciembre 2014

CUADERNILLOS PARA LA EVALUACIÓN DEL ALUMNADO

PARTE 1 PARTE 2

CUADERNILLO 1 M01 M02 S01 S02

CUADERNILLO 2 S02 S03 M02 M03



CUADERNILLO 5 M05 M06 S05 SO6












• Cuestionarios de contexto:

Cuestionario para el alumnado. Debe ser cumplimentado por cada estudiante que responda a las pruebas TIMSS. Al alumnado se le pregunta sobre su entorno familiar y escolar y su experiencia en el aprendizaje de las matemáticas y las ciencias. Responder este cuestionario requiere entre 15 y 30 minutos.

AGENCIA ANDALUZA



Diciembre 2014




Cuestionario para el profesorado. Se pregunta al docente sobre su formación docente, experiencia, recursos y métodos que utiliza en la implementación del currículo, etc. Responder este cuestionario requiere cerca de 30 minutos.

AGENCIA ANDALUZA



Diciembre 2014




Cuestionario para la dirección del centro. Es respondido por el director o la directora u otro miembro del equipo directivo. Pregunta por las características del colegio, recursos, ambiente educativo, relaciones con las familias, etc. Responder este cuestionario requiere cerca de 30 minutos.

AGENCIA ANDALUZA



Diciembre 2014




Cuestionario para las familias. Es respondido por el padre, la madre o los tutores legales. Se recaba información sobre actividades relacionadas con matemáticas, ciencias y hábitos lectores. Además recopila información sobre los recursos de los hogares, la percepción de las familias acerca del apoyo educativo y el ambiente escolar. Responder este cuestionario requiere cerca de 30 minutos.

AGENCIA ANDALUZA



Diciembre 2014


Ejemplos de preguntas (Ítems liberados).

La IEA considera importante que se conozcan los tipos de preguntas que se utilizan en esta evaluación. Para ello hace públicos determinados ítems, con el propósito de que sean trabajados en el aula con diferentes finalidades:

Diseñar evaluaciones sobre procesos específicos.

Detectar conceptos mal adquiridos o erróneos.

Identificar dificultades individuales.

AGENCIA ANDALUZA



Diciembre 2014


Ejemplos de preguntas:

Preguntas de matemáticasPreguntas de ciencias

AGENCIA ANDALUZA



Diciembre 2014

Ejemplo TIMSS. Preguntas Matemáticas.

En un barco hay 218 pasajeros y 191 miembros de la tripulación.

¿Cuántas personas hay en total en el barco?

Respuesta: __________________________________________

En un barco hay 218 pasajeros y 191 miembros de la tripulación.

¿Cuántas personas hay en total en el barco?

Respuesta: __________________________________________Media de aciertos nacional: 83,00%Media de aciertos internacional: 73,00%

La escala de un mapa indica que 1 centímetro en el mapa

representa 4 kilómetros en el terreno.

La distancia entre dos pueblos en el mapa es de 8 centímetros.

¿A cuántos kilómetros de distancia están los dos pueblos?

2

8

16

32

La escala de un mapa indica que 1 centímetro en el mapa

representa 4 kilómetros en el terreno.

La distancia entre dos pueblos en el mapa es de 8 centímetros.

¿A cuántos kilómetros de distancia están los dos pueblos?

2

8

16

32

Media de aciertos nacional: 46,00%Media de aciertos internacional: 52,00%


¿Cuál de estas fracciones no es igual a las demás?¿Cuál de estas fracciones no es igual a las demás?



Escribe los nombres de las figuras A, B y C.Escribe los nombres de las figuras A, B y C.



El gráfico muestra el número de alumnos de cada curso en el

Colegio Pino.

En el Colegio Pino hay plazas para 30 alumnos en cada curso.

¿Cuántos alumnos más cabrían en el colegio?

20

25

30

35

El gráfico muestra el número de alumnos de cada curso en el

Colegio Pino.

En el Colegio Pino hay plazas para 30 alumnos en cada curso.

¿Cuántos alumnos más cabrían en el colegio?

20

25

30

35



Uno de estos ángulos es un ángulo recto. ¿Cuál de ellos?Uno de estos ángulos es un ángulo recto. ¿Cuál de ellos?



¿Cuántos ejes de simetría tiene esta figura?

1

2

3

4

¿Cuántos ejes de simetría tiene esta figura?

1

2

3

4


Ejemplo TIMSS. Preguntas Ciencias.

Los osos polares y las morsas son muy distintos, pero ambos pueden sobrevivir en el frío extremo. Un oso polar tiene un grueso pelaje que le ayuda a mantenerse caliente. La morsa no tiene pelaje.

¿Que tienen las morsas para poder mantenerse calientes?

Capas de grasa

Colmillos

Bigotes

Aletas

Los osos polares y las morsas son muy distintos, pero ambos pueden sobrevivir en el frío extremo. Un oso polar tiene un grueso pelaje que le ayuda a mantenerse caliente. La morsa no tiene pelaje.

¿Que tienen las morsas para poder mantenerse calientes?

Capas de grasa

Colmillos

Bigotes

Aletas



La tabla muestra tres funciones que realizan ciertas partes del cuerpo humano.

Escribe la parte del cuerpo que realiza cada función. El primero te lo damos ya hecho.

La tabla muestra tres funciones que realizan ciertas partes del cuerpo humano.

Escribe la parte del cuerpo que realiza cada función. El primero te lo damos ya hecho.



¿Que tienen en común pájaros, murcielagos y mariposas?

Plumas

Pelos

Esqueleto interno

Alas

¿Que tienen en común pájaros, murcielagos y mariposas?

Plumas

Pelos

Esqueleto interno

Alas


Un depredador es un animal que se alimenta de otros animales. ¿Cuál de los siguientes es un depredador?

Ciervo

Lobo

Vaca

Cabra

Un depredador es un animal que se alimenta de otros animales. ¿Cuál de los siguientes es un depredador?

Ciervo

Lobo

Vaca

Cabra



Se ha puesto un cubito de hielo en un vaso de agua. ¿Que figura muestra mejor la posición del cubito de hielo en el agua?

Se ha puesto un cubito de hielo en un vaso de agua. ¿Que figura muestra mejor la posición del cubito de hielo en el agua?



Gregorio conecta una pila, una bombilla y un cable tal como se muestra a continuación.

¿Dará luz la bombilla? Indica sí o no y explica tu respuesta.

Gregorio conecta una pila, una bombilla y un cable tal como se muestra a continuación.

¿Dará luz la bombilla? Indica sí o no y explica tu respuesta.



El agua, el hielo y el vapor tienen todos temperaturas diferentes. ¿Cuál es el orden de más frío a más caliente?

Hielo, agua, vapor.

Hielo, vapor, agua.

Vapor, hielo, agua.

Vapor, agua, hielo.

El agua, el hielo y el vapor tienen todos temperaturas diferentes. ¿Cuál es el orden de más frío a más caliente?

Hielo, agua, vapor.

Hielo, vapor, agua.

Vapor, hielo, agua.

Vapor, agua, hielo.


Durante la congelación, la fusión y la ebullición, el agua cambia de un estado a otro. Para que tenga lugar uno de estos cambios es necesario aportar calor. ¿Para cuál?

Solo para la ebullición.

Solo para la fusión.

Para la fusión y la congelación, pero no para la ebullición.

Para la fusión y la ebullición, pero no para la congelación.

Durante la congelación, la fusión y la ebullición, el agua cambia de un estado a otro. Para que tenga lugar uno de estos cambios es necesario aportar calor. ¿Para cuál?

Solo para la ebullición.

Solo para la fusión.

Para la fusión y la congelación, pero no para la ebullición.

Para la fusión y la ebullición, pero no para la congelación.



María diseñó un experimento usando sal y agua. Los resultados de su experimento se muestran en la tabla siguiente.

¿Que estaba estudiando María con su experimento?

Cuánta sal se disolvería en diferentes volúmenes de agua.

Cuánta sal se disolvería a diferentes temperaturas.

Si al remover, la sal se disuelve más rápidamente.

Si al remover, la sal se disuelve menos rápidamente.

María diseñó un experimento usando sal y agua. Los resultados de su experimento se muestran en la tabla siguiente.

¿Que estaba estudiando María con su experimento?

Cuánta sal se disolvería en diferentes volúmenes de agua.

Cuánta sal se disolvería a diferentes temperaturas.

Si al remover, la sal se disuelve más rápidamente.

Si al remover, la sal se disuelve menos rápidamente.


EL ESTUDIO INTERNACIONAL PIRLS3

AGENCIA ANDALUZA



Diciembre 2014

3 EL ESTUDIO INTERNACIONAL PIRLS

AGENCIA ANDALUZA



Diciembre 2014

Países participantes: 53 países participaron en 2011.Alemania, Arabia Saudita, Australia, Austria, Azerbaiyán,

Bahréin, Bélgica, Botsuana, Bulgaria, Canadá, Colombia,

Croacia, China Taipéi, Dinamarca, Egipto, Emiratos Árabes

Unidos, Eslovenia, España, Estados Unidos, Federación de

Rusia, Finlandia, Francia, Georgia, Honduras, Hong Kong,

Hungría, Indonesia, Inglaterra, Irán, Irlanda, Irlanda del Norte,

Israel, Italia, Kuwait, Libia, Lituania, Malta, Marruecos,

Mongolia, Noruega, Nueva Zelanda, Omán, Países Bajos,

Polonia, Portugal, Qatar, República Checa, República Eslovaca,

Singapur, Sudáfrica, Suecia, Trinidad y Tobago, Ucrania.

En 2015 se llevará a cabo una prueba piloto para seleccionar los textos que se usarán en la

evaluación PIRLS 2016.

Muestra para el estudio piloto:

• En Andalucía se llevará a cabo en 12 centros.

• En cada centro se aplicará en dos unidades de 4º de Educación Primaria.

• Estos 12 centros se seleccionan de entre la muestra de la evaluación TIMSS 2015, ya que esto permitirá desarrollar algunos estudios de correlación.

AGENCIA ANDALUZA



Diciembre 2014


Objeto de la evaluación:

PIRLS (Progress in International Reading Literacy Study) es el Estudio Internacional de Progreso en Comprensión Lectora que evalúa el rendimiento en este ámbito de las niñas y los niños de 4º de Primaria, así como las políticas educativas y las prácticas relacionadas con esta competencia.

Definición de competencia lectora: Habilidad para comprender y utilizar las formas lingüísticas requeridas por la sociedad y valoradas por el individuo.

AGENCIA ANDALUZA



Diciembre 2014



Aspectos que analiza:• Procesos o destrezas cognitivas:

obtención de información, inferencias directas, interpretación, integración y evaluación de la información.

• Propósitos o finalidad de la lectura: experiencia literaria y obtención de información.

• Conductas y actitudes ante la lectura.

• Los contextos familiar educativo -curricular y escolar propiamente dicho (centro y profesorado).

AGENCIA ANDALUZA



Diciembre 2014



• Prueba para el alumnado: • La prueba la componen 2 bloques de evaluación,

cada uno formado por un texto de estímulo, con una extensión media de 760 palabras y de 12 a 15 preguntas.

• Los textos pueden ser literarios (un cuento, una fábula…) o informativos.

• Se incluyen preguntas de selección múltiple y también preguntas abiertas en las que el alumnado debe escribir su respuesta. Algunas preguntas abiertas requieren de una respuesta corta pero otras piden que el o la estudiante explique su respuesta tomando como base lo que ha leído en el texto.

AGENCIA ANDALUZA



Diciembre 2014



• Prueba para el alumnado:

• Cada pregunta de elección múltiple vale un punto, mientras que las de respuesta construida pueden calificarse hasta con tres puntos en función de la complejidad requerida, circunstancia de la que se informa al alumnado en cada pregunta de calificación variable, mediante una cifra (1, 2, o 3) junto a un lápiz.

• Para la puntuación de las preguntas de respuesta construida existe una guía de corrección que, en cada pregunta, indica con detalle y abundantes ejemplos las características esenciales que deben tener una respuesta apropiada y completa o bien parcial, y la puntuación que en cada caso le corresponde.

AGENCIA ANDALUZA



Diciembre 2014




Cuestionario para el alumnado.Cuestionario para las familias. Cuestionario para el profesorado.Cuestionario para la dirección del centro.

Su contenido es muy similar al descrito para la evaluación TIMSS.

AGENCIA ANDALUZA



Diciembre 2014


Ejemplos de preguntas:

Textos literarios

Textos informativos

AGENCIA ANDALUZA



Diciembre 2014

Ejemplo PIRLS texto literario

Ejemplo PIRLS texto informativo

Ejemplo PIRLS texto literario

Ejemplo PIRLS texto literario. Preguntas.



Ejemplo PIRLS texto informativo.

Ejemplo PIRLS texto informativo. Preguntas.

Respuesta de Nivel Avanzado (2 puntos) Media de aciertos en España: 24,1% Media de aciertos internacional: 23%

Respuesta de Nivel Bajo (1 punto) Media de aciertos en España: 79,1% Media de aciertos internacional: 78,4%


Ejemplo PIRLS texto informativo. Preguntas.


APLICACIÓN DE LA PRUEBA TIMSS

4

AGENCIA ANDALUZA



Diciembre 2014

4 APLICACIÓN DE LA PRUEBA TIMSS

Centros que participan en TIMSS:

La aplicación de la prueba la va a llevar a cabo personal de una empresa contratada por el Instituto Nacional de Evaluación Educativa mediante concurso público.

A finales de febrero, la empresa adjudicataria se pondrá en contacto con el centro para solicitarle datos sobre las unidades de 4º de Primaria que tenga, así como listados codificados del alumnado de esos grupos con objeto de completar la muestra. Para la aplicación solo se seleccionará una unidad por centro.

Es muy conveniente que haya una persona coordinadora del estudio en el centro, que haga de enlace entre el colegio y la empresa y coordine los distintos aspectos de la aplicación.

AGENCIA ANDALUZA



Diciembre 2014

En anteriores ediciones, el horario de aplicación fue el siguiente:

- Primera parte de la prueba: 50’- Descanso: 30’- Segunda parte de la prueba: 50’- Cuestionario: 30’

Total: 2 h y 40’

AGENCIA ANDALUZA



Diciembre 2014

Centros que participan en TIMSS:


Periodo de aplicación:

Está prevista su aplicación entre marzo y abril de 2015.

La empresa adjudicataria concretará con cada centro las fechas precisas.

AGENCIA ANDALUZA



Diciembre 2014


TRATAMIENTO CONFIDENCIAL DE LOS DATOS

5

AGENCIA ANDALUZA



Diciembre 2014

5 TRATAMIENTO CONFIDENCIAL DE LOS

DATOSPara asegurar la confidencialidad, tanto las pruebas como los cuestionarios se realizarán bajo absoluto anonimato, de forma que los nombres y datos personales de alumnado y profesorado no saldrán nunca de su centro.

En el caso de la prueba piloto de PIRLS no se está, de hecho, evaluando al alumnado sino seleccionando aquellos ítems más adecuados para la prueba de 2016.

AGENCIA ANDALUZA



Diciembre 2014

DIFUSIÓN DE LOS RESULTADOS

6

AGENCIA ANDALUZA



Diciembre 2014

6 DIFUSIÓN DE LOS RESULTADOS

• Es un estudio realizado sobre una muestra representativa.

• Los informes y publicaciones de los resultados obtenidos por el estudio TIMSS no permiten conocer datos concretos de centros, alumnado o profesorado.

• Todos los datos que aparezcan en las publicaciones se referirán siempre a datos agregados del conjunto de España y de la comunidad autónoma de Andalucía.

• Los resultados del estudio estarán disponibles el año 2016.

AGENCIA ANDALUZA



Diciembre 2014

PARTICIPACIÓN DE ESPAÑA EN TIMSS

7

AGENCIA ANDALUZA



Diciembre 2014

7 PARTICIPACIÓN DE ESPAÑA EN TIMSS

• TIMSS 2015 es la sexta edición del estudio internacional, tras TIMSS 1995, 1999, 2003, 2007 y 2011, que mide las tendencias en el rendimiento en matemáticas y ciencias de las niñas y niños de 4º de Educación Primaria.

• España participó en los estudios de 1995 y 2011 y lo hará también en 2015.

AGENCIA ANDALUZA



Diciembre 2014

MUESTRA EN ANDALUCÍA

8

AGENCIA ANDALUZA



Diciembre 2014

8 MUESTRA EN ANDALUCÍA TIMSS

7

11

2

9

3

4

7

7

AGENCIA ANDALUZA



Diciembre 2014

AGENCIA ANDALUZA



Diciembre 2014

8 MUESTRA EN ANDALUCÍA TIMSS

Total de centros: 50

Unidades: 50

Alumnado aproximado :1200

Nuestros contactos:

AGENCIA ANDALUZA



Diciembre 2014

http://evaluaccion.es

http://www.agaeve.es

@EvaluAccion

Web:

Blog:

Twitter:

Correo electrónico: [email protected]

Teléfonos Departamento de alumnado: 955405018 375018

955405011 375011

Diciembre 2014

agencia andaluza de evaluaciÓn educativa presentación de las evaluaciones internacionales timss y...

Documents