¿cómo medir la calidad de la educación? -...
TRANSCRIPT
¿Cómo medir la calidad
de la educación?
Domingo 13 de Noviembre 2016
Ancell Scheker Mendoza Dirección de Evaluación de la Calidad
AGENDA
I. CONTEXTUALIZACIÓN
II. MEDICIÓN DE LA CALIDAD EN EL SISTEMA EDUCATIVO DOMINICANO
a) PRUEBAS NACIONALES
b) PRUEBAS INTERNACIONALES
i. TERCE- UNESCO
ii. PISA-OCDE
III. CONCLUSIONES
CONTEXTUALIZACIÓN
IMPORTANCIA DE LA CALIDAD EDUCATIVA
Meta de la reforma educativa
Eje de debate educativo mundial
Foco de políticas educativas
CONTEXTO INTERNACIONAL DE LA CALIDAD
CONTEXTO NACIONAL DE LA CALIDAD
Desarrollar en los estudiantes, las competencias para el dominio de la lengua y otras
habilidades comunicativas; el pensamiento lógico-matemático, crítico y creativo; la
capacidad para resolver problemas y tomar decisiones; …..consciencia ética y ciudadana
y una actitud para aprender durante toda la vida…
La calidad es un concepto amplio y complejo, de múltiples
significados y dimensiones.
¿CÓMO SE MIDE LA CALIDAD DE LA EDUCACIÓN?
Calidad
Relevancia
Pertinencia
Eficiencia Equidad
Eficacia
Los objetivos de calidad plantean la necesidad e importancia de desarrollar sistemas de evaluación de los procesos y resultados de aprendizaje que generen información y evidencias para la formulación de políticas y para la gestión del sistema educativo
¿PARA QUÉ MEDIR LA CALIDAD?
Determinar la calidad de los aprendizajes
logrados por los estudiantes.
Identificar las dificultades en la
enseñanza Medir el
impacto de algunas políticas
Tomar decisiones de política educativa
fundamentadas en evidencias
Rendir cuentas a la sociedad sobre la labor
educativa y sus resultados
¿QUÉ Y CÓMO SE DEBE EVALUAR?
La evaluaciones deben medir aprendizajes relevantes y considerar las oportunidades de aprendizaje. Relación con el Currículo
Las evaluaciones deben ser sistemáticas, estandarizadas y comparables en el tiempo para medir progreso
Las evaluaciones deben ser técnicamente sólidas, robustas y rigurosas, válidas y transparentes
Deben proveer información confiable y pertinente y considerar el contexto
Los resultados de las evaluaciones deben utilizarse para la mejora
MEDICIÓN DE LA CALIDAD EN EL SISTEMA DOMINICANO
¿CÓMO SE ESTÁ EVALUANDO LA CALIDAD DEL SISTEMA EDUCATIVO DOMINICANO?
Logros de aprendizajes como indicador de calidad.
Acuerdo 6 del Pacto. Desarrollar una cultura de evaluación. La calidad del sistema educativo será medida por los resultados de los aprendizajes, a partir de instrumentos nacionales, regionales e internacionales.
PRUEBAS NACIONALES
PRUEBAS NACIONALES
Informes de Pruebas Nacionales
Informe General Informe Curricular Informe de Centro Educativo
Tipos
Interpreta los resultados generales
estadísticamente
Informa sobre el desempeño según
el currículo, por áreas de
conocimiento
Informa sobre los resultados del
centro en particular,
estableciendo comparaciones y
relaciones
PRUEBAS NACIONALES
PRUEBAS NACIONALES
PRUEBAS NACIONALES
Número estudiantes en las pruebas nacionales de 8vo grado, por año
144.398
146.084
150.688
151.095 150.748
2012 2013 2014 2015 2016
Puntaje promedio en las pruebas nacionales de 8vo grado, por año
PRUEBAS NACIONALES
17,6
14,7 15,4 15,2
18,2
15,2 15,8 15,4
18,1
15,0 15,6 15,3
17,9
15,3 15,7 15,6
17,8 16,8 16,9 16,8
Lengua Española Matemática Ciencias Sociales Ciencias de la Naturaleza
2012 2013 2014 2015 2016
Ejemplo de ítem 8vo grado
En un colmado ofertan la libra de salami a $53.95 y la de queso crema a $89.95. Si tienes $100.00, ¿cuánto te faltan para poder comprar una libra de cada artículo?
A) $43.90
B) $42.90
C) $143.90
D) $243.90
Porcentajes de respuestas por opción
A B C D
27.74% 27.21% 31.02% 13.04%
Correcta.
Para contestar correctamente
tienen que sumar el precio de
la libra de salami y queso y
luego restarle 100.
Incorrecta.
Esta opción y es el
resultado de sumar
incorrectamente los
precios y luego restar
100.
Incorrecta.
Es el resultado de
sumar los precios del
salami y queso.
Incorrecta.
Es el resultado de
sumar los precios y
sumar también 100,
en vez de restarlo.
PRUEBAS NACIONALES
Contenido: Números racionales Respuesta correcta: A Nivel de complejidad: (3) Resolución de problemas
El siguiente gráfico registra la cantidad de "platos del día" que despachó durante una semana un negocio de comida económica. ¿Cuántos "platos del día" se vendieron en la semana?
A) 820 B) 160 C) 140 D) 41
Contenido: Estadística Nivel de complejidad: (3) Resolución de problemas
Porcentajes de respuestas por opción
A B C D
19.22 6.79 6.68 66.16
PRUEBAS NACIONALES
Ejemplo de ítem 8vo grado
Ordenanza ’ 6
CAMBIOS EN EL SISTEMA DE EVALUACIÓN
La evaluación se asume como una
herramienta cuyo uso contribuye a mejorar
la calidad de la educación, en la medida en
que informa sobre los aprendizajes logrados
por los estudiantes y los factores asociados a
esos logros con el fin de que se desarrollen
planes, programas y políticas que permitan
atender los desafíos identificados.
EVALUACIONES DIAGNÓSTICAS
Evalúan los logros de aprendizaje de acuerdo al nuevo currículo, sin
tener consecuencias en la promoción de los estudiantes.
• 3er grado de primaria: evaluación de lectura y matemática. Cuestionarios de docentes, directores y familia. 2017
• 6to grado de primaria: pruebas de lengua española, matemática, ciencias sociales y ciencias naturales. Cuestionarios de estudiante, docentes, directores y familia. 2018
• 3er grado de secundaria: pruebas de lengua española, matemática, ciencias sociales y ciencias naturales. Cuestionarios de estudiante, docentes, directores. 2019
PRUEBAS INTERNACIONALES
¿POR QUÉ PARTICIPAR EN EVALUACIONES INTERNACIONALES?
Permite tener referentes más allá del contexto nacional
Amplía nuestra mirada a una visión global, y posibilita monitorear los cambios en los logros del sistema educativo desde una perspectiva internacional
Provee con regularidad indicadores comparables que describen un perfil de los conocimientos y habilidades de los estudiantes y sus niveles de desempeño.
Provee indicadores de la relación del aprendizaje con otras variables demográficas, socioeconómicas y educativas.
Aporta evidencias para orientar la política educativa.
Identifica brechas y desigualdades.
Posibilita el intercambio de experiencias y capacidades entre países. Oportunidad de aprender de otros
Estudio Organizado por Año de Aplicación
Áreas evaluadas Población
PERCE UNESCO 1997 Lectura Matemáticas 3º y 4º 3º y 4º
SERCE UNESCO 2006 Lectura y escritura
Matemáticas
Ciencias Naturales
3º y 6º
3º y 6º
6º
CIVICA (ICCS)
IEA 2009
2016
Conocimientos y actitudes cívicas
8º
TERCE
ERCE
UNESCO 2013 Lectura y escritura
Matemáticas
Ciencias Naturales
3º y 6º
3º y 6º
6º
PISA OECD 2015 Ciencias (principal)
Lengua y Matemática
15 años
ESTUDIOS INTERNACIONALES EN QUE EL PAÍS PARTICIPA
¿QUÉ ES EL TERCE?
Dar cuenta del logro de aprendizaje en los países de la región,
desde una perspectiva comparativa pero con referencia a los
currículos locales e informar sobre las variables asociadas al
logro.
Participaron 15 países latinoamericanos y un estado subnacional.
¿QUÉ ES EL TERCE?
Mide los logros de aprendizaje de estudiantes de 3º y 6º del Nivel Primario en las áreas de Lenguaje (Escritura y Comprensión Lectora), Matemática y Ciencias así como los factores asociados a este logro.
En mayo 2013 se evaluaron a un total de 8,254
estudiantes de primaria; 4,324 fueron de tercer grado y 3,930 de sexto grado, inscritos en 208
escuelas primarias.
Puntaje promedio de República Dominicana en TERCE y comparación con la
región y con los propios resultados de SERCE.
TERCE-UNESCO
Grado Área curricular Puntaje promedio en
la prueba TERCE Comparación con promedio
de países en TERCE Comparación con
resultados en SERCE
Tercer grado Lectura 614 ▼
Matemática 602 ▼
Sexto grado
Lectura 633 ▼
Matemática 622 ▼
Ciencias Naturales 632 ▼
Porcentaje de estudiantes por nivel de desempeño en TERCE, comparación con la región
NIVELES DE DESEMPEÑO
Nivel I Nivel II Nivel III Nivel IV
Lectura 3ro RD 74.1 14.9 8.9 2.1
Total países L3 39.5 21.7 26.2 12.7
Lectura 6to RD 37.8 54.2 5.9 2.1
Total países L6 18.4 51.5 16.4 13.7
Matemática 3ro RD 84.8 10.3 4.0 0.9
Total países M3 47.2 23.3 22.1 7.4
Matemática 6to RD 80.1 18.5 1.3 0.2
Total países M6 46.9 35.9 12.1 5.1
Ciencias naturales
6to RD 64.7 31.0 3.7 0.6
Total países CN6 40 39.1 15.2 5.7
TERCE-UNESCO
TERCE Ejemplo de Nivel I en Matemática 3er Grado
Ejemplo 1: identificar figuras
geométricas conocidas o
presentadas en formatos
convencionales.
En este caso, a través de las
opciones, el alumno debe
identificar figuras geométricas
básicas.
Correcta: C
Promedio Países: 75%
RD: 49%
TERCE-UNESCO
TERCE Ejemplo de Nivel IV en
Matemática 3er Grado Ejemplo 2: realizar
operaciones combinadas entre
números naturales en más de
un paso.
En este caso, a través de las
opciones, el alumno debe
resolver problemas más
complejos en el ámbito de los
números naturales.
Correcta: A
Promedio Países: 24%
RD: 13%
TERCE-UNESCO
FACTORES ASOCIADOS EN RD
Características estudiantes y
familias
• Nivel socioeconómico
• Repitencia
• Trabajo infantil
• Género: niñas mejor en 3ero. Niños mejor en ciencia y matemática de 6to.
• Asistencia a educación inicial
• Prácticas en el hogar: altas expectativas, tiempo de estudio
Docentes, prácticas
pedagógicas y recursos
•Recursos en el aula
•Clima escolar
Escuelas
•Nivel socioeconómico del centro
• Infraestructura
•Tipo de escuelas: urbanas mejor puntaje en 6to grado. Privadas en 3er grado
DESAFÍOS GENERALES QUE SURGEN DEL TERCE
El TERCE reafirma que nuestra región está marcada por importantes brechas de logro tanto al interior de los países, como entre los países.
Hubo una mejora significativa entre los resultados del SERCE y TERCE.
El promedio de puntaje del país es por debajo del promedio de la región en todas las áreas.
La mayoría de los estudiantes están en el nivel I de desempeño con excepción de lectura de 6to.
La información de logros junto con la de factores asociados constituye un importante insumo para orientar decisiones de política educativa para los países participantes en este estudio regional.
PISA intenta responder la pregunta: ¿qué es importante que los
ciudadanos sepan y sepan hacer?
33
¿QUÉ ES PISA?
• Evalúa hasta qué punto los alumnos de 15 años, cercanos al final de la educación obligatoria, han adquirido conocimientos y habilidades claves necesarios para la participación plena en la sociedad moderna.
• 2015 el foco es Ciencias. La competencia científica se entiende como la capacidad de explicar fenómenos científicos, evaluar y diseñar investigación científica, e interpretar datos y evidencia científicamente en contextos personales, locales y globales.
34
¿QUÉ ES PISA?
Cada tres años se evalúan competencias en
Lectura, Matemática y Ciencias con énfasis en
un área
• Prueba de ciencias, lectura y matemática.
• Cuestionario a estudiantes general y de TICs.
• Cuestionario a director de centro educativo
• Cuestionario a padres
• Cuestionario de profesores
INSTRUMENTOS APLICADOS EN PISA
PISA 2015 EN REPÚBLICA DOMINICANA
Se aplicó del 23 de marzo al 30 de abril 2015 en 196 centros educativos y 4,935 estudiantes de 15
años.
Los resultados se presentarán el 6 de diciembre del 2016.
Un informe nacional se presentará en
2017
PRIMERA PARTICIPACION DEL PAIS EN PISA
¿Cuáles son las características de los estudiantes, actitudes, motivaciones?
¿Cuáles son las características de centros educativos, docentes y familias?
¿Cómo se relacionan los resultados con otras variables?
¿Qué hipótesis o posibles explicaciones existen para entender los resultados?
¿CÓMO LEER LOS RESULTADOS?
¿Cuáles son los resultados en cuanto a logro y niveles de desempeño de los estudiantes?
•
REFLEXIONES SOBRE LOS RESULTADOS
¿Cuál es el contexto del país, situación económica, social y política?
¿Cómo es el sistema educativo: cobertura, inclusión, gestión?
¿Qué políticas educativas se han desarrollado? ¿Por cuanto tiempo? ¿Cuáles se han priorizado?
¿Tienen tiempo suficiente de implementación para producir un cambio (mínimo 5 años)?
¿Qué lecciones podemos aprender? ¿Qué se hará con los resultados de la evaluación?
CONCLUSIÓN
La calidad es el objetivo principal del sistema educativo y por tanto debe definirse y evaluarse de manera regular para monitorear cómo avanzamos. Reconocer que hay áreas y aspectos más fáciles de medir que otros.
Las evaluaciones nacionales e internacionales nos proveen información valiosa como indicadores del desempeño del sistema.
CONCLUSIÓN
Proporcionan un punto de partida y una métrica para dar seguimiento en el tiempo. Disponer de datos (aunque nos duelan) es muy importante pues nos dan información para generar diálogos, mejorar y garantizar el derecho de aprender.
Los resultados de la evaluación deben guiar las decisiones con respecto a planes y políticas de mejora. Pero es necesario considerar que los cambios en educación son a largo plazo.