PISA 2012
Características y algunos resultados
Informe de Centros Comunidad Autónoma de Aragón
Zaragoza, 3 Nov 2014
Luis Sanz San [email protected]
1. Las evaluaciones a gran escala. PISA
1.Rasgos comunes de los estudios de evaluación a gran escala
Evaluaciones cíclicas, a gran escala Cuadernillo de prueba + cuestionarios de
contexto Rigor metodológico:
• Marco teórico: qué evaluar, elaboración de ítems, distribución de ítems y cuadernillos…
• Definición exhaustiva de la población objetivo• Selección de la muestra/censo• Traducción de materiales, aplicación, corrección,
depuración de datos…• Análisis TRI de las respuestas . Dificultad de los ítems y
puntuación lograda por los alumnos
Informes internacionales comparativos
1. Principales características del programa
Programa para la Evaluación Internacional de los Alumnos (PISA 2012)
4
Evaluación cada tres años (PISA 2000 – PISA 2012).
Conocimientos y destrezas de los alumnos de 15 años en las áreas de matemáticas, lectura y ciencias. En 2012, además Resolución de Problemas y Competencia Financiera
Muestra Población
Estudiantes evaluados
Estudiantes de 15 años
Porcentaje muestral
España 25.313 373.691 6,7%
OCDE (34 países) 295.416 13.142.800 2,3%
Total (65 países) 510.000 28.000.000 1,8%
Área principal: (1 hora y 20 minutos) en 2012 matemáticas
¿Qué se evalúa?
Temporalización:
Población
y
Muestra
Áreas de evaluación:
Instrumentos: Cuestionario de contexto cumplimentado por el alumnado y por los directores de los centros educativos
Áreas secundarias: (20 minutos de prueba) en 2102 lectura y ciencias
2. Selección de la muestra
El diseño muestral es clave para que los resultados sean fiables y para el cálculo de los estimadores (variables de ponderación)
Muestra representativa. Procedimiento probabilístico para evitar sesgos
Muestreo en bietápico (centros y alumnos). Estratos.
Estratificación explícita: diferentes subpoblaciones o estratos definidos por una variable de estratificación (CC.AA., titularidad de los centros, etc.)
Estratificación implícita: asociada a un muestreo sistemático. Se ordenan las unidades de muestreo según un cierto criterio para que la muestra reproduzca la distribución de los porcentajes de la población.
Selección sistemática de centros dentro de cada estrato
1.Selección de
centros (Primary Sampling
Unit)
• Muestreo proporcional al tamaño
• PISA: 35 alumnos al azar o todos
2.Selección de
alumnos dentro del
centro (Secondary Sampling
Unit)
Muestreo en dos etapas2. Selección de la muestra: características generales
2. Selección y tamaño de la muestra
• Precisión de los estimadores
• Tamaño de la muestra
• Tiempo• Presupuesto
• Sencillez del diseño del muestreo y del trabajo de
campo
7
2. Selección de la muestra. Individuos frente a centros
Selección sistemática de
centros
Muestreo por individuos (alumnos)
Muestreo por conglomerados
(centros educativos)
8
2-Selección de la muestraExclusiones y ampliaciones de la muestra
Ampliación de muestras
(por algún aspecto de especial interés)
¡Cuidado con las exclusiones!¡Algunas pueden ser importantes!
9
15 alumnos
30 alumnos
45 alumnos
Probabilidad del centro
Probabilidad del alumno en
el centro
Probabilidad final
del alumno
Peso base del
alumno
Población. N =180 Muestra n= 9 Elegir 3 centros /3 alumnos por centro
La suma de pesos de los alumnos es el tamaño de la población
Ejemplo
10
Tamaño del centro
TitularidadPequeño Mediano Grande TOTAL
Nº centros
Nº alumnos
Nº centros
Nº alumnos
Nº centros
Nº alumnos
Nº centros
Nº alumnos
Pública 3 6 2 53 27 2528 32 2587Privada 1 3 4 96 15 1077 20 1176
TOTAL 4 9 6 149 42 3605 52 3763
Tamaño del centro
TitularidadPequeño Mediano Grande TOTAL
Nº centros
Nº alumnos
Nº centros
Nº alumnos
Nº centros
Nº alumnos
Nº centros
Nº alumnos
Pública 22 69 10 236 84 6932 116 7237Privada 17 163 23 567 51 3198 91 3928
TOTAL 39 232 33 803 135 10130 207 11165
Muestra de Aragón
Población de Aragón
3. Algunos resultados PISA 2012
Nivel 1Nivel 1Nivel 1Nivel 1Nivel 1Nivel 1Nivel 1 Nivel 2Nivel 2Nivel 2Nivel 2Nivel 2Nivel 2Nivel 2 Nivel 3Nivel 3Nivel 3Nivel 3Nivel 3Nivel 3Nivel 3 Nivel 4Nivel 4Nivel 4Nivel 4Nivel 4Nivel 4Nivel 4
Promedio OCDE (494)Promedio UE (489)
México (413)Chile (423)
Turquía (448)Grecia (453)Israel (466)
Hungría (477)Suecia (478)
Estados Unidos (481)Eslovaquia (482)
España (484)Italia (485)
Portugal (487)Noruega (489)
Luxemburgo (490)Islandia (493)
Reino Unido (494)Francia (495)
República Checa (499)Nueva Zelanda (500)
Dinamarca (500)Eslovenia (501)
Irlanda (501)Australia (504)
Austria (506)Alemania (514)
Bélgica (515)Polonia (518)Canadá (518)
Finlandia (519)Estonia (521)
Países Bajos (523)Suiza (531)Japón (536)
Corea del Sur (554)
400 420 440 460 480 500 520 540 56013
Programa para la Evaluación Internacional de los Alumnos (PISA 2012)
Posición de España entre los 34 países de la OCDE
España obtiene 484 puntos en matemáticas, 10 puntos menos que el promedio de la OCDE (494), siendo esta diferencia significativa estadísticamente.
3. Resultados en matemáticas
22-29
Aragón obtiene 496 puntos en matemáticas, 2 puntos más que el promedio de la OCDE (494), no siendo esta diferencia estadísticamente significativa.
Aragón485 - 507
14
Programa para la Evaluación Internacional de los Alumnos (PISA 2012)
3. Resultados en matemáticas
Evolución de los resultados en matemáticas Aragón-España-Promedio OCDE
Se observa una evolución negativa en la comunidad de Aragón y también en la OCDE. Ninguna de ellas es significativa.
Tampoco es significativo el ligero aumento observado en las puntuaciones de España.
PISA 2006 PISA 2009 PISA 2012470
475
480
485
490
495
500
505
510
515
520
513
506
496
480483 484
498496 494
Aragón España Promedio OCDE
En 2012, no hay diferencias significativas en los
resultados de Aragón con respecto al conjunto de
España y al promedio OCDE
15
Programa para la Evaluación Internacional de los Alumnos (PISA 2012)
Porcentaje de alumnos en los niveles más bajos (<1 y 1)
3. Resultados en matemáticas El porcentaje de alumnos en los niveles bajos y el porcentaje de alumnos en
los niveles altos no experimentan cambios significativos en PISA 2012.La proporción de alumnos situados en los niveles bajos de rendimiento es
similar al de la OCDE.
Aragón España OCDE0
5
10
15
20
25
30
17
25
21
18
24 22 21
24 23
PISA 2006 PISA 2009 PISA 2012
Aragón España OCDE0
5
10
15
20
25
30
17
7
13 14
8
13 12
8
13
PISA 2006 PISA 2009 PISA 2012
Porcentaje de alumnos excelentes (niveles 5 y 6)
Nivel 2Nivel 2Nivel 2Nivel 2Nivel 2Nivel 2Nivel 2 Nivel 3Nivel 3Nivel 3Nivel 3Nivel 3Nivel 3Nivel 3 Nivel 4Nivel 4Nivel 4Nivel 4Nivel 4Nivel 4Nivel 4
Promedio OCDE (501)Promedio UE (497)
México (415)Chile (445)
Turquía (463)Grecia (467)Israel (470)
Eslovaquia (471)Islandia (478)Suecia (485)
Portugal (489)Luxemburgo (491)
Italia (494)Hungría (494)
Noruega (495)España (496)
Estados Unidos (497)Dinamarca (498)
Francia (499)Bélgica (505)Austria (506)
República Checa (508)Reino Unido (514)
Eslovenia (514)Suiza (515)
Nueva Zelanda (516)Australia (521)
Irlanda (522)Países Bajos (522)
Alemania (524)Canadá (525)Polonia (526)
Corea del Sur (538)Estonia (541)
Finlandia (545)Japón (547)
400 420 440 460 480 500 520 540 56016
Programa para la Evaluación Internacional de los Alumnos (PISA 2012)
Posición de España entre los 34 países de la OCDE
3. Resultados en ciencias
En ciencias España obtiene 496 puntos. Se sitúa 5 puntos por debajo del promedio OCDE (501), siendo esta diferencia significativa estadísticamente.
18-26
Por su parte, Aragón obtiene 504 puntos, 3 puntos por encima del promedio OCDE (501), aunque esta diferencia no es estadísticamente significativa.
Aragón494 - 514
17
Programa para la Evaluación Internacional de los Alumnos (PISA 2012)
3. Resultados en ciencias
Evolución de los resultados en ciencias Aragón-España-Promedio OCDE
Evolución negativa en la comunidad de Aragón y estable en el promedio OCDE, ambos no significativos
Aumento significativo en el conjunto
de España.
PISA 2006 PISA 2009 PISA 2012470
475
480
485
490
495
500
505
510
515
520
513
505504
488 488
496500
501501
Aragón España Promedio OCDE
En 2012, no hay diferencias significativas en los
resultados de Aragón con respecto al conjunto de
España y al promedio OCDE
Nivel 2Nivel 2Nivel 2Nivel 2Nivel 2Nivel 2Nivel 2Nivel 2 Nivel 3Nivel 3Nivel 3Nivel 3Nivel 3Nivel 3Nivel 3Nivel 3 Nivel 4Nivel 4Nivel 4Nivel 4Nivel 4Nivel 4Nivel 4Nivel 4
Promedio OCDE (496)Promedio UE (489)
México (424)Chile (441)
Eslovaquia (463)Turquía (475)Grecia (477)
Eslovenia (481)Islandia (483)Suecia (483)
Israel (486)Portugal (488)
Luxemburgo (488)España (488)Hungría (488)Austria (490)
Italia (490)República Checa (493)
Dinamarca (496)Estados Unidos (498)
Reino Unido (499)Noruega (504)Francia (505)
Alemania (508)Suiza (509)
Bélgica (509)Países Bajos (511)
Australia (512)Nueva Zelanda (512)
Estonia (516)Polonia (518)Canadá (523)Irlanda (523)
Finlandia (524)Corea del Sur (536)
Japón (538)
400 420 440 460 480 500 520 540 56018
Programa para la Evaluación Internacional de los Alumnos (PISA 2012)
Posición de España entre los 34 países de la OCDE
En lectura España alcanza 488 puntos, una puntuación significativamente inferior al promedio de la OCDE (496).
3. Resultados en lectura
19-28
En lectura Aragón alcanza 493 puntos, una puntuación no significativamente inferior al promedio de la OCDE (496).
Aragón481 - 505
19
Programa para la Evaluación Internacional de los Alumnos (PISA 2012)
3. Resultados en lectura
Evolución de los resultados en lectura Aragón-España-Promedio OCDE
Los resultados de Aragón en lectura no han variado significativamente en los últimos años
PISA 2006 PISA 2009 PISA 2012450
455
460
465
470
475
480
485
490
495
500
483
495
493
461
481
488
492493
496
Aragón España Promedio OCDE
En 2012, no hay diferencias significativas en los resultados
de Aragón con respecto al conjunto de España y al
promedio OCDE
4. Preguntas liberadas matemáticas
Programa para la Evaluación Internacional de los Alumnos (PISA 2012)
4. Preguntas liberadas. Matemáticas
Programa para la Evaluación Internacional de los Alumnos (PISA 2012)
4. Preguntas liberadas. Matemáticas
5. Calidad y equidad del sistema educativo
68101214161820222426380
400
420
440
460
480
500
520
540
560
580
520.545521676786518.750335282979
536.406918234208
478.260635903011
504.150766311124
518.078519433354
492.795697239492
489.373070348755
413.281466667708
553.766659143613
485.321181012553
447.984414978955
452.973426858907
484.319297801971
493.934230896316498.95788231768
500.026756625414501.127422390953501.497460196644505.540743249801
514.745238582901
522.971758192682530.931003950397
517.501096817955
481.366786279212
422.632355405519
466.48143014931
477.044455015488481.644744006326 487.063181343903 489.845098037208
494.98467432064 499.749902827586
513.525055819928
Relación entre el rendimiento y el ESCS por encima del promedio OCDE
Relación entre el rendimiento y el ESCS no significa-tiuvamente diferente al promedio OCDE
Relación entre el rendimiento y el ESCS por debajo del promedio OCDE
Porcentaje de la varianza del rendimiento explicada por el índice socioeconómico y cultural
Punt
uaci
ón m
edia
Pro
med
io O
CD
E
Promedio OCDE
24
Programa para la Evaluación Internacional de los Alumnos (PISA 2012)
5. Calidad y equidad del sistema educativo españolEl rendimiento del alumnado y la varianza explicada por el ESCS
Rendimiento bajo impacto ESCS alto
Rendimiento alto impacto ESCS alto
Rendimiento bajo impacto ESCS bajo
Rendimiento alto impacto ESCS bajo
España 2003España 2012
Menos calidad:
El rendimiento del alumnado español es significativamente inferior a la media de la OCDE. El de los alumnos de Aragón se encuentra en la media OCDE
Algo menos de equidad:
El impacto del entorno socioeconómico y cultural en España es algo mayor que en la OCDE en su conjunto, como lo es también en Aragón
Aragón 2012
Finl
andi
a
Isla
ndia
Suec
ia
Nor
uega
Din
amar
ca
Esto
nia
Irla
nda
Espa
ña
Can
adá
Polo
nia
Esta
dos
Uni
dos
Méx
ico
Nue
va Z
elan
da
Gre
cia
Rei
no U
nido
Aus
tral
ia
Port
ugal
Chi
le
Prom
edio
OC
DE
Suiz
a
Cor
ea
Aus
tria
Luxe
mbu
rgo
Ital
ia
Rep
úblic
a C
heca
Japó
n
Isra
el
Ale
man
ia
Eslo
veni
a
Rep
úblic
a Es
lova
ca
Turq
uía
Bél
gica
Hun
gría
País
es B
ajos
100
80
60
40
20
02
04
06
0
Var
ian
za e
ntr
e y
den
tro
de
los
cen
tros
exp
resa
da c
omo
por
cent
aje
de
la v
aria
nza
med
ia d
e la
OCD
E
25
Programa para la Evaluación Internacional de los Alumnos (PISA 2012)
Media OCDE
Media OCDE
Diferencias entre centros
Diferencias dentro del centro
Variación en el rendimiento de los alumnos entre y dentro de los centros educativos
5. Calidad y equidad del sistema educativo español
España 17,1%Aragón 15,6%
España 73,8%Aragón 85,1%
6. Algunas informaciones extraídas de los cuestionarios
27
Programa para la Evaluación Internacional de los Alumnos (PISA 2012)
En España el número de horas lectivas es mayor que en la mayoría de los países de la OCDE.
6. Tiempo dedicado a la instrucción
Sin embargo, el tiempo de instrucción en cada una de las áreas de conocimiento evaluadas en PISA es menor
Promedio OCDE España Aragón0
200
400
600
800
1000
1200
907
1050 1060
Horas de clase totales
Tiempo de instrucción en ciencias
Tiempo de instrucción en lengua
Tiempo de instrucción en matemáticas
99
125
122
113
125
130
133
143
145
Tiempo medio (horas/curso)
Promedio OCDE España Aragón
28
Programa para la Evaluación Internacional de los Alumnos (PISA 2012)
Relación entre la autonomía de los centros en el currículo*, la evaluación y el rendimiento
6. Autonomía de los centros educativos
-1.5 -1 -0.5 0 0.5 1 1.5420
440
460
480
500
520
540
560
EEUU
Polonia
Nueva Zelanda
Grecia
Reino Unido
Estonia
Finlandia
República Eslovaca
Luxemburgo
Alemania
Austria
República Checa
Francia
Japón
TurquíaSuecia
Hungría
Australia
Israel
Canadá
Irlanda
Chile
Bélgica
Países Bajos
España Dinamarca
Suiza
Islandia
Eslovenia
Portugal
Noruega
México
Corea
Italia
Índice de la responsabilidad de las escuelas sobre el currículo y la evaluación
Rend
imie
nto
en m
atem
ática
s
Una mayor autonomía de los centros en el currículo y evaluación parece estar asociada a mejores resultados educativos
* La autonomía de los centros se estima a partir de las respuestas de los directores de los centros educativos a los cuestionarios
de contexto en PISA
y = 27,83x + 495,17R² = 0,34
29
Programa para la Evaluación Internacional de los Alumnos (PISA 2012)
Se observa una clara tendencia hacía el uso de los resultados académicos para comparar los centros educativos con la media nacional en la OCDE.
En la OCDE se llevan a cabo más prácticas de monitorización de la actividad docente que en España.
6. Evaluaciones externas y estandarizadas
Australia
Canadá
Corea
Dinamarca
EEUU
Eslovaquia Estonia
Finlandia
Flandes (Bélgica)
Francia
Irlanda
Italia
Japón
Noruega
Países Bajos
PoloniaPoloniaPoloniaPoloniaPoloniaPoloniaPoloniaPoloniaPoloniaPoloniaPoloniaPoloniaPoloniaPoloniaPoloniaPoloniaPoloniaPoloniaPoloniaPoloniaPoloniaPoloniaPolonia
AlemaniaAlemaniaAlemaniaAlemaniaAlemaniaAlemaniaAlemaniaAlemaniaAlemaniaAlemaniaAlemaniaAlemaniaAlemaniaAlemaniaAlemaniaAlemaniaAlemaniaAlemaniaAlemaniaAlemaniaAlemaniaAlemaniaAlemania
AustriaAustriaAustriaAustriaAustriaAustriaAustriaAustriaAustriaAustriaAustriaAustriaAustriaAustriaAustriaAustriaAustriaAustriaAustriaAustriaAustriaAustriaAustria
Inglaterra/Irlanda NInglaterra/Irlanda NInglaterra/Irlanda NInglaterra/Irlanda NInglaterra/Irlanda NInglaterra/Irlanda NInglaterra/Irlanda NInglaterra/Irlanda NInglaterra/Irlanda NInglaterra/Irlanda NInglaterra/Irlanda NInglaterra/Irlanda NInglaterra/Irlanda NInglaterra/Irlanda NInglaterra/Irlanda NInglaterra/Irlanda NInglaterra/Irlanda NInglaterra/Irlanda NInglaterra/Irlanda NInglaterra/Irlanda NInglaterra/Irlanda NInglaterra/Irlanda NInglaterra/Irlanda N
OCDEOCDEOCDEOCDEOCDEOCDEOCDEOCDEOCDEOCDEOCDEOCDEOCDEOCDEOCDEOCDEOCDEOCDEOCDEOCDEOCDEOCDEOCDE
EspañaEspañaEspañaEspañaEspañaEspañaEspañaEspañaEspañaEspañaEspañaEspañaEspañaEspañaEspañaEspañaEspañaEspañaEspañaEspañaEspañaEspañaEspaña
República ChecaRepública ChecaRepública ChecaRepública ChecaRepública ChecaRepública ChecaRepública ChecaRepública ChecaRepública ChecaRepública ChecaRepública ChecaRepública ChecaRepública ChecaRepública ChecaRepública ChecaRepública ChecaRepública ChecaRepública ChecaRepública ChecaRepública ChecaRepública ChecaRepública ChecaRepública ChecaSueciaSueciaSueciaSueciaSueciaSueciaSueciaSueciaSueciaSueciaSueciaSueciaSueciaSueciaSueciaSueciaSueciaSueciaSueciaSueciaSueciaSueciaSuecia
y = 0,42x+60,36y = 0,42x+60,36y = 0,42x+60,36y = 0,42x+60,36y = 0,42x+60,36y = 0,42x+60,36y = 0,42x+60,36y = 0,42x+60,36y = 0,42x+60,36y = 0,42x+60,36y = 0,42x+60,36y = 0,42x+60,36y = 0,42x+60,36y = 0,42x+60,36y = 0,42x+60,36y = 0,42x+60,36y = 0,42x+60,36y = 0,42x+60,36y = 0,42x+60,36y = 0,42x+60,36y = 0,42x+60,36y = 0,42x+60,36y = 0,42x+60,36R cuadrado = 0,567R cuadrado = 0,567R cuadrado = 0,567R cuadrado = 0,567R cuadrado = 0,567R cuadrado = 0,567R cuadrado = 0,567R cuadrado = 0,567R cuadrado = 0,567R cuadrado = 0,567R cuadrado = 0,567R cuadrado = 0,567R cuadrado = 0,567R cuadrado = 0,567R cuadrado = 0,567R cuadrado = 0,567R cuadrado = 0,567R cuadrado = 0,567R cuadrado = 0,567R cuadrado = 0,567R cuadrado = 0,567R cuadrado = 0,567R cuadrado = 0,567
245
250
255
260
265
270
275
280
285
290
460 470 480 490 500 510 520 530 540 550Puntuaciones PISA
Pu
ntu
aci
on
es
PIA
AC
Datos de 2003-2006-2009
6. Relación en matemáticas: PISA y PIAAC
Los resultados PISA explican el 56,7% de la variabilidad de los resultados en PIAAC
Hay una clara relación positiva entre ambas puntuaciones, más fuerte que en lectura
Los estudios PISA y PIAAC: una evolución comparada
30
7. Actitud y disposición de los estudiantes frente a rendimiento en matemáticas
32
Programa para la Evaluación Internacional de los Alumnos (PISA 2012)
En Aragón el 25% de los alumnos declara haber faltado a uno o más días de clase sin justificar.
En España, el 27%
En la OCDE este porcentaje es significativamente inferior, un 15%.
7. Absentismo escolar no justificado
Faltar a clase influye en el rendimiento
Promedio OCDE
España
Aragón
85
72
74
12
24
22
2
3
3
1
1
0
Porcentaje de alumnos que ha faltado a días enteros de clase en las últimas 2 semanas
NuncaUna o dos veces3 o 4 veces5 o más veces
El sentido de pertenencia evalúa el grado de satisfacción de los alumnos con el centro educativo y en qué medida este se aproxima a su ideal.
La relación profesor-alumno mide la percepción de los alumnos acerca de la dedicación y el interés de los profesores hacia los estudiantes.
El clima de disciplina escolar mide la percepción que los alumnos tienen en cuanto al orden y la atención en la clase de matemáticas.
Programa para la Evaluación Internacional de los Alumnos (PISA 2012)
7. Sentido de pertenencia, clima escolar y motivación
33
0.410.41
0.430.43
00
-0.13-0.13
-0.04-0.04
-0.03-0.03
Sentido de pertenencia Relación profesor - alumno Clima escolar
Índice
-0.6 -0.4 -0.2 0 0.2 0.4 0.6 -0.6 -0.4 -0.2 0 0.2 0.4 0.6 -0.6 -0.4 -0.2 0 0.2 0.4 0.6
España Aragón
7. Motivación intrínseca para aprender matemáticas
Me interesan las cosas que aprendo en matemáticas
Estudio matemáticas porque me gusta
Estoy deseando tener clase de matemáticas
Me gusta leer libros sobre matemáticas
34
473473473473473473473473473473473473473473473473
470470470470470470470470470470470470470470470470
465465465465465465465465465465465465465465465465
472472472472472472472472472472472472472472472472
489489489489489489489489489489489489489489489489
484484484484484484484484484484484484484484484484
477477477477477477477477477477477477477477477477
496496496496496496496496496496496496496496496496
504504504504504504504504504504504504504504504504
498498498498498498498498498498498498498498498498
490490490490490490490490490490490490490490490490
507507507507507507507507507507507507507507507507
521521521521521521521521521521521521521521521521
514514514514514514514514514514514514514514514514
512512512512512512512512512512512512512512512512
517517517517517517517517517517517517517517517517
OCDE
UE
España
Aragón
460 470 480 490 500 510 520 530 540 550
Bajo Medio-bajo Medio-alto Alto
7. Motivación intrínseca para aprender matemáticas
47 puntos
44 puntos
48 puntos
35
45 puntos
Mayor nivel de interés por las matemáticas, por sí mismas, se asocia con mejores resultados.
7. Motivación extrínseca para aprender matemáticas
Aprenderé muchas cosas en matemáticas que me ayudarán a conseguir trabajo
Las matemáticas las necesito para lo que quiero estudiar más adelante
Me merece la pena estudiar matemáticas porque tendré mejores perspectivas en
mi carrera profesional
Merece la pena hacer un esfuerzo porque me ayudará en el trabajo que haré más
adelante
36
477477477477477477477477477477477477477477477477
475475475475475475475475475475475475475475475475
462462462462462462462462462462462462462462462462
476476476476476476476476476476476476476476476476
489489489489489489489489489489489489489489489489
485485485485485485485485485485485485485485485485
475475475475475475475475475475475475475475475475
486486486486486486486486486486486486486486486486
501501501501501501501501501501501501501501501501
495495495495495495495495495495495495495495495495
492492492492492492492492492492492492492492492492
509509509509509509509509509509509509509509509509
519519519519519519519519519519519519519519519519
511511511511511511511511511511511511511511511511
515515515515515515515515515515515515515515515515
522522522522522522522522522522522522522522522522
OCDE
UE
España
Aragón
460 470 480 490 500 510 520 530 540 550
Bajo Medio-bajo Medio-alto Alto
7. Motivación extrínseca para aprender matemáticas
53 puntos
36 puntos
42 puntos
37
46 puntos
Los estudiantes que valoran en mayor medida la utilidad futura del aprendizaje de las matemáticas, obtienen mejores resultados.
Me preocupo cuando pienso que sacaré malas notas en matemáticas
Me siento incapaz cuando hago un problema de matemáticas
Me pongo muy nervioso al hacer problemas de matemáticas
Me pongo muy tenso cuando tengo que hacer deberes de matemáticas
A menudo me preocupo pensando que tendré dificultades en las clases de matemáticas
7. Ansiedad hacia las matemáticas
38
En España los estudiantes muestran mayor índice de ansiedad que los de la OCDE y la UE
• Las alumnas muestran índices de ansiedad superiores a los de los chicos
542542542542542542542542542542542542542542542542
538538538538538538538538538538538538538538538538
522522522522522522522522522522522522522522522522
534534534534534534534534534534534534534534534534
507507507507507507507507507507507507507507507507
503503503503503503503503503503503503503503503503
494494494494494494494494494494494494494494494494
505505505505505505505505505505505505505505505505
482482482482482482482482482482482482482482482482
476476476476476476476476476476476476476476476476
471471471471471471471471471471471471471471471471
484484484484484484484484484484484484484484484484
456456456456456456456456456456456456456456456456
450450450450450450450450450450450450450450450450
457457457457457457457457457457457457457457457457
458458458458458458458458458458458458458458458458
OCDE
UE
España
Aragón
460 470 480 490 500 510 520 530 540 550
Bajo Medio-bajo Medio-alto Alto
La ansiedad hacia las matemáticas influye en los resultados
La capacidad explicativa de los resultados por este índice es menor en España que en la OCDE.
OCDE: 14% de la varianza explicada. España: 8,4% .Disminuir en un punto el índice de ansiedad supondría un aumento de 34
puntos en PISA en OCDE (en España 28)
65 puntos
88 puntos
86 puntos
39
76 puntos
En mi clase de matemáticas entiendo incluso lo más difícil
Siempre he creído que las matemáticas es una de las asignaturas en que soy mejor
Saco buenas notas en matemáticas
Aprendo matemáticas rápidamente
No se me dan bien las matemáticas
7. En Autoconcepto en las matemáticas
En España los alumnos tienen menor concepto sobre sí mismos en las matemáticas que los de la OCDE y la UE
• Las alumnas muestran índices de autoconcepto en matemáticas inferiores a los de los alumnos
456456456456456456456456456456456456456456456456
453453453453453453453453453453453453453453453453
449449449449449449449449449449449449449449449449
451451451451451451451451451451451451451451451451
479479479479479479479479479479479479479479479479
474474474474474474474474474474474474474474474474
471471471471471471471471471471471471471471471471
483483483483483483483483483483483483483483483483
505505505505505505505505505505505505505505505505
499499499499499499499499499499499499499499499499
490490490490490490490490490490490490490490490490
506506506506506506506506506506506506506506506506
548548548548548548548548548548548548548548548548
542542542542542542542542542542542542542542542542
534534534534534534534534534534534534534534534534
540540540540540540540540540540540540540540540540
OCDE
UE
España
Aragón
460 470 480 490 500 510 520 530 540 550
Bajo Medio-bajo Medio-alto Alto
La percepción del alumno sobre sus habilidades en matemáticas influye en sus resultados
La capacidad explicativa de los resultados por este índice es menor en España que en la OCDE.
OCDE: 17% de la varianza explicada. España: 13,8% .Aumentar en un punto el índice de autoconcepto supondría un aumento
de 36,5 puntos en PISA en OCDE (en España 31)
85 puntos
89 puntos
92 puntos
41
89 puntos
456456456456456456456456456456456456456456456456
453453453453453453453453453453453453453453453453
449449449449449449449449449449449449449449449449
451451451451451451451451451451451451451451451451
479479479479479479479479479479479479479479479479
474474474474474474474474474474474474474474474474
471471471471471471471471471471471471471471471471
483483483483483483483483483483483483483483483483
505505505505505505505505505505505505505505505505
499499499499499499499499499499499499499499499499
490490490490490490490490490490490490490490490490
506506506506506506506506506506506506506506506506
548548548548548548548548548548548548548548548548
542542542542542542542542542542542542542542542542
534534534534534534534534534534534534534534534534
540540540540540540540540540540540540540540540540
OCDE
UE
España
Aragón
460 470 480 490 500 510 520 530 540 550
Bajo Medio-bajo Medio-alto Alto
Relación entre rendimiento en matemáticas y exposición de los alumnos a las matemáticas
aplicadas
0.0 0.5 1.0 1.5 2.0 2.5 3.0430
450
470
490
510
Índice de exposición a las matemáticas aplicadas
Pu
ntu
ac
ión
me
dia
en
ma
tem
áti
ca
s
raramente a veces frecuentementenunca
Programa para la Evaluación Internacional de los Alumnos (PISA 2012)
42
8. Informes de centros educativos
Puntuación media con intervalo de confianza al 95%El gráfico muestra la puntuación estimada para el centro, la comunidad
autónoma, España y la OCDE.
Cualquier puntuación dentro de este intervalo puede considerarse una estimación de la media del centro
44
La amplitud (grande) del intervalo de confianza para el centro se debe a quelos errores en la estimación de las puntuaciones medias para los centros son muy grandes. PISA no está diseñado para evaluar centros educativos..
Si el intervalo correspondiente al centro tiene intersección no vacía con el de la comunidad/España/OCDE, no existen diferencias significativas entre sus puntuaciones medias
En este ejemplo la puntuación media del centro no puede considerarse superior a la de la comunidad, España ni OCDE
45
Aquí no hay diferencia significativa entre la media de la comunidad y la de España. Ni entre la media de la comunidad y OCDE.
La puntuación media del centro es inferior a la de la comunidad, España y OCDE de forma significativa
Ahora, la puntuación media de la comunidad es superior a la de España y a la de la OCDE.
Y la puntuación media del centro es superior a la de la comunidad, España y OCDE de forma significativa
46
Distribución por niveles (agrupando niveles 5 y 6)-PorcentajesLos niveles describen la dificultad progresiva en las actividades
propuestas.El número indicado entre paréntesis representa el error de la estimación del porcentaje.
La magnitud de los errores en los porcentajes de centro se deben a que la muestra PISA no se diseña para estimar puntuaciones de los centros, sino de
países o comunidades autónomas con muestra ampliada.
47
Puntuaciones medias por procesos con intervalo de confianza al 95%
Puntuaciones medias por sub-áreas con intervalo de confianza al 95%
Se puede consultar el marco de evaluación PISA 2012 para una correcta definición de los procesos y sub-áreas.
La interpretación de los intervalos de confianza se ha
descrito con anterioridad.
48
Resultados de chicos y chicas
El gráfico muestra la puntuación estimada para chicos y chicas en el centro, la comunidad autónoma, España y la OCDE
No se muestran los intervalos de confianza para cada una de las puntuaciones, pero debe tenerse en cuenta los errores de estas estimaciones,
A nivel de centro, en general no se podrá afirmar que las diferencias entre las puntuaciones de chicos y chicas sean significativas.
Resultados de los centros frente a su nivel socioeconómicoCada punto representa un centro
participante en PISA 2012 de la comunidad autónoma. También aparece el valor medio de la comunidad.
Los puntos sobre la recta de regresión corresponden al valor medio estimado para la puntuación del centro, según el índice socioeconómico de su alumnado.
El método de cálculo del índice socioeconómico y cultural se puede consultar en el Capítulo 3 del Volumen I del Informe Español.
Un tercio del alumnado de la comunidad autónoma se sitúa en cada uno de los tramos del ISEC
Mayor índice ISEC
Mayor puntuación
54
Como valor medio de cada uno de los índices se tomó como origen el valor cero para OCDE.
0.30.30.3
-0.09-0.09-0.09
0.410.410.41
0.10.10.1
0.10.10.1
000
-0.5-0.5-0.5
0.20.20.2
-0.04-0.04-0.04
Sentido de pertenencia Relaciones profesor-alumno Clima Escolar
Índice
-1.25 -1 -0.75-0.5-0.25 0 0.25 0.5 0.75 1 1.25 -1.25 -1 -0.75-0.5-0.25 0 0.25 0.5 0.75 1 1.25 -1.25 -1 -0.75-0.5-0.25 0 0.25 0.5 0.75 1 1.25
España Comunidad Centro
Valores superiores a cero indican una mejor percepción de los alumnos en los aspectos
medidos que la media de la OCDE,
Los valores menores que cero indican peor percepción de los
alumnos en los aspectos medidos que la media de la OCDE.
Blog: http://blog.educalab.es/inee/ Slideshare: http://www.slideshare.net/INEE_MECD
http://www.mecd.gob.es/inee/
GRACIAS
Twitter:@educaINEE