proyecto: cultura de calidad y evaluaciÓn en...

33
12/05/2013 1 J.M.Jornet Meliá Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN CONSERVATORIOS PROFESIONALES DE MÚSICA Y DANZA DE LA COMUNIDAD VALENCIANA (Eval-CPMD-CV) Taller III Diseño de un Mapa de Indicadores de la Enseñanzas Artísticas de Música y Danza en la CV Mapa-INDAMD-CV 1 J.M.Jornet Meliá COMITÉ DE ORGANIZACIÓN Jesús M. Jornet Juan Pablo Valero Raúl Juncos César Cabedo Pau Gil Batiste Bernat 2

Upload: others

Post on 04-Jul-2020

8 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

1

J.M.Jornet Meliá

Proyecto:

CULTURA DE CALIDAD Y EVALUACIÓN EN

CONSERVATORIOS PROFESIONALES DE

MÚSICA Y DANZA DE LA COMUNIDAD

VALENCIANA

(Eval-CPMD-CV)

Taller III

Diseño de un Mapa de Indicadores de

la Enseñanzas Artísticas de Música y

Danza en la CV

Mapa-INDAMD-CV

1

J.M.Jornet Meliá

COMITÉ DE ORGANIZACIÓN

Jesús M. Jornet

Juan Pablo Valero

Raúl Juncos

César Cabedo

Pau Gil

Batiste Bernat

2

Page 2: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

2

J.M.Jornet Meliá

COMISIÓN EVALUACIÓN INSTITUCIONAL

Coordinador: Raúl Juncos

1. Ángel Casero Alcañiz

2. José Galiano Pérez

3. Rodrigo Madrid Gomez

4. Juan Miravet Lecha

5. Sergio Perelló Blanquer

6. Ignacio Sanjuan Rodrigo

7. Amalia Valero Fernández

3

J.M.Jornet Meliá

Programa de trabajo

Horario Actividad Metodología

10.15-11.45 Aproximación conceptual a los

Indicadores en evaluación.

Exposición

Debate

11.45-12.15 Descanso

12.15-13.00 Presentación de Plataforma de Trabajo Exposición

Debate

13.00-14.00 Características del Mapa de Indicadores

para la CV.

Exposición

Debate

14.00-16.00 Almuerzo

16.00-17.45 Indicadores de entrada y proceso. Grupos Focales

17,45-16,15 Descanso

17,45-20,00 Indicadores de contexto y resultados. Grupos Focales

4

Page 3: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

3

J.M.Jornet Meliá

Indicadores Educativos

Jesús Miguel Jornet Meliá

Dpto. MIDE-UVEG

WWW.uv.es/gem

J.M.Jornet Meliá

Hablaremos acerca de…

A modo de introducción

Conceptos: criterios, estándares e indicadores.

Componentes del diseño: las preguntas de la

evaluación

Fuentes e instrumentos de información

Ejemplos de Indicadores

6

Page 4: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

4

J.M.Jornet Meliá

A modo de introducción

7

Enfoques en la Evaluación en CC. Sociales

Estudios Indicadores

J.M.Jornet Meliá

A modo de introducción

Indicador • Respuesta a una pregunta

específica

Mapas • Respuesta a preguntas genéricas o

complejas

Visión

Macro-analítica

• Visibilizar socialmente un fenómeno

• Orientación Política

• Base de Estudios

8

Page 5: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

5

J.M.Jornet Meliá

9

J.M.Jornet Meliá

A modo de introducción

¿Cuántas personas están integradas en procesos

de formación artística en la CV, sea en

instituciones oficiales o no oficiales?

¿Qué nivel de diseminación social tienen las

enseñanzas artísticas?

¿Existe en la CV las mismas oportunidades de

acceso a las enseñanzas artísticas?

Las enseñanzas artísticas en la CV ¿son propias

de alguna clase social? ¿están reservadas a una

élite?...

10

Page 6: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

6

J.M.Jornet Meliá

A modo de introducción

¿Cuántos estudiantes de Música o Danza hay

actualmente matriculados en la CV?

Los estudiantes ¿qué edades tienen? ¿cuántos

chicos y chicas hay? ¿qué niveles de rendimiento

tienen en sus escuelas? ¿qué tipos de

instrumentos estudian? ¿qué nivel de éxito se da

entre ellos en los estudios musicales? ¿realizan

alguna otra actividad musical fuera de los

conservatorios?...

11

J.M.Jornet Meliá

A modo de introducción

Además de los conservatorios…

¿Qué estructuras –y cuantas hay- que

realicen enseñanzas musicales (regladas o

no regladas)?

¿Cuántos están implicados en ellas?

¿Qué impacto socio-educativo tienen las

enseñanzas artísticas en el desarrollo

educativo? ¿y en los adultos, qué impacto

tienen?...

12

Page 7: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

7

J.M.Jornet Meliá

Conceptos: criterios, estándares

e indicadores (1).

Es necesario diferenciar entre:

Criterio

Estándar

Indicador Índice

Argumento

13

J.M.Jornet Meliá

Conceptos: criterios, estándares

e indicadores (2).

Criterio (Rodríguez Gómez, 2007)

Aquella condición que debe cumplir una

determinada actividad, actuación o proceso para ser

considerada de calidad.

Define un objetivo de calidad con relación a aquello

que se pretende evaluar.

Se apoya en un principio o axioma definido a priori

sobre el que se puede emitir una valoración.

14

Page 8: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

8

J.M.Jornet Meliá

Conceptos: criterios, estándares e

indicadores (3).

Características de calidad de los Criterios:

Ser explícito.

Aceptado por los diferentes interesados.

Elaborado en forma participativa.

Comprensible.

Fácilmente medible.

Debe ser flexible, capaz de adaptarse a cambios

difícilmente previsibles.

Aceptable por los participantes y usuarios.

(Rodríguez Gómez, 2007)

15

J.M.Jornet Meliá

Conceptos: criterios, estándares e

indicadores (4).

Ejemplos de criterios:

Genéricos (a comprobar en diversos

proyectos, programas o servicios)…

Eficacia, eficiencia, funcionalidad…

Relevancia, suficiencia, pertinencia…

Específicos de un modelo (ejº EFQM)

16

Page 9: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

9

J.M.Jornet Meliá

Definición de Criterios (efectos) a evaluar:

Eficacia: grado de consecución de objetivos. ( C B)

Eficiencia: grado en que se optimizan los recursos en la consecución

de objetivos. ((E,D) B)

Funcionalidad: adecuación de todo el proceso a las necesidades,

aspiraciones y expectativas sociales.((E,D,C,B) A)

Contexto sociocultural y económico de la Educación

A Necesidades, aspiraciones y expectativas sociales

a que debe responder la educación/institución escolar

B

Metas y objetivos de la Educación

C

Productos educativos Aprendizajes y equipamiento intelectual de los

estudiantes

D Procesos

Organizativos Curriculares Instructivos Investigadores

Evaluativos

Directivos y de liderazgo Administrativos y gerenciales

Recursos humanos Recursos económicos Recursos materiales

E

Entradas al sistema escolar Estudiantes: Número y características Profesores: Número y características

Recursos asignados

17

Modelo sistémico de

Arturo De la Orden

Efectos a evaluar: Eficacia

Eficiencia

Funcionalidad

Ejemplo

J.M.Jornet Meliá

Conceptos: criterios, estándares

e indicadores (5).

Estándares:

Sistematización explícita

del concepto (criterios)

de Calidad de proyectos,

programas y servicios.

Operativizan el

concepto de calidad que

va a comprobarse

mediante la evaluación.

18

Concepto de

Calidad

(Criterios)

Estándares

Indicadores

Instrumentos

Plan de

Evaluación

Se

operativiza

a través de…

Page 10: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

10

J.M.Jornet Meliá

Conceptos: criterios, estándares

e indicadores (6).

El Estándar…

Especifica el nivel o grado en que ha de

darse un criterio para tomar una decisión

evaluativa:

-Dicotómica -bien/mal evaluado-, o

-Policótoma –por debajo del nivel

básico/básico/medio/avanzado-

19

J.M.Jornet Meliá

Conceptos: criterios, estándares e

indicadores (7).

Características de calidad de los

Estándares:

Las mismas descritas para los

criterios.

Especificidad y claridad para la toma

de decisiones.

Pueden especificarse de forma

cuantitativa o cualitativa.

20

Page 11: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

11

J.M.Jornet Meliá

Conceptos: criterios, estándares

e indicadores (8).

Indicador:

Dato o resultado susceptible de una

interpretación inequívoca o

normalizada, que informa del estado

o evolución de algún fenómeno.

(Jornet, Suárez y Belloch, 1998).

21

J.M.Jornet Meliá

Conceptos: criterios, estándares e

indicadores (9).

Tipos de indicadores:

Cuantitativos: Índices

Cualitativos: Argumentos

22

Page 12: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

12

J.M.Jornet Meliá

Conceptos: criterios, estándares e

indicadores (10).

Es decir … Cuantitativos … Índices:

Dato: Ratio profesor/alumnos

Resultado: % Alumnos en Niveles de Logro de EXCALE

Interpretación normalizada:

a) en sí mismo, y/o

b) En relación al fenómeno evaluado

Informa del estado o evolución de algún fenómeno:

el indicador debe entenderse como una unidad de análisis dentro de un Universo de Medida (por ejemplo, “Calidad de los resultados del

aprendizaje en Matemáticas” como constructo)

23

J.M.Jornet Meliá

Conceptos: criterios, estándares e

indicadores (11).

Tipos de Indicadores Cuantitativos o

Índices.

24

Indicadores

Simples

Indicadores

Complejos

Nº de libros

Estudios de los Padres

Autoestima

Clima social del aula

Ejº

Ejº

Ítems, tasas, ratios

Tasas complejas

Instrumentos

Page 13: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

13

J.M.Jornet Meliá

Programa de Formación Profesional

Ocupacional de la Junta de Andalucía

Objetivo: Facilitar la inserción laboral de los desempleados

y realizar el adecuado seguimiento de las acciones

formativas

Indicador: Inserción laboral

Cálculo del indicador: (Personas con contrato en los 6

meses siguientes al curso FPO / Personas asistentes a los

cursos FPO) X 100

Estándar: ≥ 50

25

Ejemplo

J.M.Jornet Meliá

Estándar NAEP

Etiqueta de nivel de

rendimiento

Descriptor de nivel de rendimiento

Avanzado Los estudiantes de cuarto grado que están en el nivel avanzado deben poder generalizar sobre los tópicos en la selección de lecturas y demostrar

un conocimiento suficiente acerca de cómo los escritores componen y usan las estrategias literarias. Cuando leen textos apropiados para cuarto grado, deben poder juzgarlos de forma crítica y, en general, dar respuestas minuciosas que demuestren que han comprendido el texto.

Por ejemplo, cuando leen textos literarios los estudiantes de nivel avanzado deben poder hacer las generalizaciones sobre lo relevante de la historia y prolongar su significado integrando las experiencias personales y las otras interpretaciones con las ideas indicadas por el texto. Deben poder identificar los recursos literarios como la lengua figurada.

Cuando leen textos informativos los alumnos de cuarto grado de nivel avanzado deben poder explicar el propósito del escritor usando material de soporte del texto. Deben poder hacer juicios críticos sobre la forma y el contenido del texto y explicar sus juicios claramente.

26

Ejemplo

Page 14: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

14

J.M.Jornet Meliá

Indicador R6 SIV

27

Ejemplo

R6. Alumnos por ordenador

Definición: Número medio de alumnos por ordenador en el centro educativo.

Aplicación: Todos los centros de la Comunitat Valenciana.

Especificaciones técnicas: El número medio de alumnos por ordenador es el cociente entre el

número de alumnos y el número de ordenadores destinados preferentemente a docencia con el

alumnado.

IR6= Na/ Np

Donde:

Na= Número de alumnado matriculado en el centro.

Nod = Número de ordenadores destinados preferentemente a docencia.

*Otros indicadores similares planteados en el Sistema Estatal de Indicadores de la Educación (SEIE),

son: Profesor por ordenador o la distribución porcentual de los ordenadores del centro según su

uso (docencia, profesorado, administración, tareas múltiples).

Fuente: ÍTACA / GESCEN / Registro de Innovación Tecnológica Educativa.

Periodicidad de obtención: Anual, por curso académico.

Objetivo/Meta: (Edición 2009 (curso 2006-2007)

- Nacional: 7,8

- Com. Valenciana: 11,3

- Máx: 12,6 (Baleares)

- Mín: 2,5 (Extremadura)

J.M.Jornet Meliá

Ejemplo

28

Page 15: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

15

J.M.Jornet Meliá

Otros Ejemplos de Indicadores

Indicador de Capacidad Económica

Indicadores de inversión

Indicadores de Empleo

Indicadores de desigualdad

Indicadores de Innovación (TIC)

Indicadores de Inmigración

…Un ejemplo integrado para un propósito…

Sistema de Indicadores de la Comunidad Valenciana

29

J.M.Jornet Meliá

Conceptos: criterios, estándares e

indicadores (12).

Es decir… Cualitativos … :

Dato:

Resultado:

Interpretación normalizada:

a) en sí mismo, y/o

b) En relación al fenómeno evaluado

Informa del estado o evolución de algún fenómeno:

el indicador debe entenderse como una declaración razonada que justifica la pertinencia de una valoración.

30

Argumento

EJEMPLOS: El nivel de exigencia de la programación se adapta a los niveles de competencia de cada grupo. Existen unos criterios de evaluación comunes para todas las materias de una misma familia profesional

Page 16: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

16

J.M.Jornet Meliá

Conceptos: criterios, estándares

e indicadores (13).

Características de los Indicadores:

Simples o Compuestos

Bien descritos

Permitan interpretaciones sincrónicas y/o

diacrónicas de la unidad evaluada

Relacionados técnicamente con otros

indicadores y/o variables

31

J.M.Jornet Meliá

Fuentes e instrumentos ¿Cómo identificar criterios, desarrollar

estándares y definir indicadores? (1)

32

La definición de criterios, estándares e

indicadores se produce en

interacción con la definición del

objeto y finalidad de la evaluación.

Page 17: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

17

J.M.Jornet Meliá

Fuentes e instrumentos ¿Cómo identificar criterios, desarrollar

estándares y definir indicadores? (2)

¿Qué información se

requiere?

Identificar cuál es la información verdaderamente relevante para el proceso

evaluativo.

¿A quién se le demanda

información?

Identificar quién puede aportar la información relevante.

¿Cómo se

recoge la información?

Decidir acerca de la Técnica Evaluativa o

Instrumento de Medida más adecuado para llevar a cabo la recogida de información.

33

En la definición de Fuentes e instrumentos de

recogida de información se concreta la

identificación de Indicadores

J.M.Jornet Meliá

Fuentes e instrumentos ¿Cómo identificar criterios, desarrollar

estándares y definir indicadores? (3)

Hay que diferenciar entre Variables e Indicadores

Y…… ASIGNARLES UN ROL EN LA EVALUACIÓN

Cuatro tipos de variables o indicadores: Contextuales

De Entrada

Proceso

Producto

34

Page 18: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

18

J.M.Jornet Meliá

Fuentes e instrumentos ¿Cómo identificar criterios, desarrollar

estándares y definir indicadores? (3)

Clasificación de información

Adaptado a partir del Modelo CIPP de

Sttuflebeam y otros (1971)

Variables / Indicadores Contextuales son aquellos que nos pueden ayudar

a modular la interpretación de un fenómeno teniendo en cuenta la

situación en que se inserta

Variables / Indicadores de Entrada (Input) son los referidos a los medios

con que se cuenta para el desarrollo de la Formación, tanto medios

materiales como personales

Variables/ Indicadores de Proceso son los relativos al “Cómo se produce la

Formación”, es decir, todas las implicadas en el desarrollo del Programa

Variables / Indicadores de Producto -o Resultados de la Formación- son

aquellos que pueden poner de manifiesto el logro de objetivos del

programa

35

J.M.Jornet Meliá

Fuentes e instrumentos ¿Cómo identificar criterios, desarrollar

estándares y definir indicadores? (4)

Y finalmente, ajustar el MODO EN QUE SE RECOGE LA INFORMACIÓN…

Instrumentos de Medida

Técnicas Evaluativas

Bancos de Datos

Criterios de selección de instrumentos:

Adecuación al tipo de información a recoger

Criterios técnico-metodológicos, y

Oportunidad (la logística de la evaluación)

36

Page 19: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

19

J.M.Jornet Meliá

Fuentes e instrumentos ¿Cómo identificar criterios, desarrollar

estándares y definir indicadores? (5)

¿A quién se le pide información?

37

¿Quién puede aportar la información requerida de

una manera más fiable y válida?

Alumnos

Profesores Responsables de formación

Supervisores

¿Existe más de una posibilidad?

¿Cuál es la más operativa?

¿Interesa triangular fuentes?

¿Es factible el acceso a la información?

SI

¿El banco está actualizado?

¿Hacen falta permisos especiales para acceder?

¿Puede haber perturbaciones en el programa de

formación?

Bancos de datos

J.M.Jornet Meliá

Fuentes e instrumentos ¿Cómo identificar criterios, desarrollar

estándares y definir indicadores? (6)

Tabla de selección de información

Rol / tipo Variable / indicador

¿Es evaluable?

¿Podemos interpretarla?

¿Es fiable y válida?

Desarrollo tecnológico…

Si Si Si

Oferta de formación

Si Si Si Contexto

Infraestructura

Puestos para prácticas

Nº Alumnos Entrada

Proceso …

Producto …

38

Page 20: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

20

J.M.Jornet Meliá

Fuentes e instrumentos ¿Cómo identificar criterios, desarrollar

estándares y definir indicadores? (7)

Tabla de fuentes de información

Síntesis de variables/indicadores y fuentes de

información. Fuentes de información

Tipo

Variables /

Indicadores

Alu

mno

s

Prof

esor

es

Coor

dina

dor

Obs

erva

dor

Exte

rno

Otr

as f

uent

es

Características de alumnos X X X

Características de los profesores

X X

Sistema de selección de alumnos X

Infraestructura (aulas teóricas, prácticas…) X X X X Entr

ada

Medios disponibles en las aulas X X X

Actuación del Profesorado X X X

Nº de sesiones teóricas X X

X X X

Metodología didáctica X

Proc

eso

… … …

Producto … … …

Contexto … … …

39

J.M.Jornet Meliá

Conclusiones sobre Indicadores

Pretenden representar la realidad económica, social y

educativa

Aportan en la evaluación de proyectos y programas

elementos de entrada y/o contextuales generalmente, si

bien pueden ser especialmente importante para la

evaluación de procesos y resultados

Si bien hay pocas propuestas especificas en el ámbito

socioeducativo para el fenómeno de la enseñanza artística

(musical y danza), cualquier marco de indicadores puede

contener referencias que se pueden adaptar al problema

específico que se pretenda abordar

40

Page 21: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

21

J.M.Jornet Meliá

Muchas gracias por su atención

41

J.M.Jornet Meliá

Diseño de un Mapa de Indicadores

acerca del impacto y relevancia de las

Enseñanzas Musicales y de Danza en

la Comunidad Valenciana.

Mapa-INDAMD-CV

42

Page 22: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

22

J.M.Jornet Meliá

Características del Modelo

Mapa-INDAMD-CV (1)

¿Qué Criterios seleccionamos en la CV?

Impacto de la formación musical

Condiciones en que se produce

¿Para qué se evalúa?

Ofrezca respuestas a:

◦ Efectos: eficacia, eficiencia, funcionalidad

◦ Evaluación de necesidades

◦ Analice la red institucional (reglada y no reglada) y su

vinculación con el entorno

◦ Dirigido a la mejora.

43

J.M.Jornet Meliá

Características del Modelo

Mapa-INDAMD-CV (2)

¿Qué objetivos persigue?

◦ Coadyuvar al desarrollo de una CULTURA DE CALIDAD

◦ La evaluación actúa como un instrumento para valorar el

impacto socio-educativo, que nos ayude a:

Visibilizar la realidad de la CV en las enseñanzas artísticas

Valorar su impacto social y educativo

Valorar su relación con el desarrollo de la cohesión social

44

Page 23: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

23

J.M.Jornet Meliá

Características del Modelo

Mapa-INDAMD-CV (3)

La cohesión social como referencia

(Sociología Clásica –Durkheim-)

Se refiere a la inclusión de los miembros de un grupo, a

su sentido de pertenencia, al grado en que comparten

valores y participan para el mantenimiento y desarrollo

del mismo.

Concepto que orienta políticas sociales en la UE, América Latina y el

Caribe (CEPAL), Canadá, Nueva Zelanda, …

45

J.M.Jornet Meliá

Características del Modelo

Mapa-INDAMD-CV (4)

La cohesión social como referencia

(Consejo de Europa, 2005; p: 23)

La CS de una sociedad moderna se entiende como:

la capacidad de la sociedad para garantizar la

sostenibilidad del bienestar de todos sus miembros,

asegurar el acceso equitativo a los recursos disponibles,

Asegurar la dignidad en la diversidad y la autonomía

personal y colectiva, y

hacer posible la participación responsable.

46

Page 24: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

24

J.M.Jornet Meliá

Características del Modelo

Mapa-INDAMD-CV (5)

La cohesión social como referencia

Es decir …

Las DIMENSIONES de la CS son:

Bienestar social (para todos)

Sostenibilidad (a lo largo de la vida)

Equidad (en el acceso a recursos y

oportunidades)

Integración de la diversidad (personal y social)

Participación (social)

47

J.M.Jornet Meliá

Características del Modelo

Mapa-INDAMD-CV (6)

¿Qué debe representar?

48

Situación educativa: Escenarios

Informal

S

O

C

I

A

L

Individual

No-Formal

Programas Socio-educativos

Enfoque Político

Instituciones

Formal

Sistema Educativo

Instituciones

Aula Acciones Formativas

Page 25: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

25

J.M.Jornet Meliá

Características del Modelo

Mapa-INDAMD-CV (7)

¿Qué debe representar?

Sistema

Educativo

Contexto

social

inmediato

Institución

Educativa

J.M.Jornet Meliá

Características del Modelo

Mapa-INDAMD-CV (8)

¿Qué debe representar?

¿Quién evalúa?

Comité técnico.

Utiliza datos objetivos: Bases de información periódica de carácter estadístico.

Diseña estrategias de recogida de información y gestión que

permitan estructurar la información en forma de indicadores.

Analiza indicadores: Identificar estándares.

Equidad/brechas

Relaciones con otros indicadores educativos, sociales y

económicos

50

Page 26: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

26

J.M.Jornet Meliá

Características del Modelo

Mapa-INDAMD-CV (9)

¿Qué debe representar?

51

Dinamizadores

Comisión de Coordinación

Administración

Pública

Equipos

Directivos CPMD

Federaciones

Agrupaciones

J.M.Jornet Meliá

Características del Modelo

Mapa-INDAMD-CV (10)

¿Qué debe representar?

Comité Técnico

• Dinamiza

• Organiza recogida de información

• Realiza contactos

Centros Reglados

• Aporta

información

centros propios

• Facilita

información y

contactos

Estructuras No-regladas

• Aporta información (agrupaciones, orfeones…)

• Facilita información y contactos

52

Page 27: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

27

J.M.Jornet Meliá

Características del Modelo

Mapa-INDAMD-CV (11)

¿Qué debe representar?

53

Difunde Información

Informe periódico:

Panorama de la Educación Musical y de la Danza en la CV

Mapa de Indicadores Informatizado accesible en la web de la GV

Comité Central

J.M.Jornet Meliá

Características del Modelo

Mapa-INDAMD-CV (12)

¿Qué debe representar?

¿Metodología?

◦ Mixta: Cuantitativa

◦ Punto de partida: Estructura CIPP/SICV

◦ Incluye:

Diseño de preguntas de evaluación

Selección de indicadores para responderlas

Análisis de fuentes de información:

Bases de Datos

Instrumentos (Escalas y Cuestionarios; Entrevistas; Observación y

Análisis Documental)

Documentación de Gestión

54

Page 28: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

28

J.M.Jornet Meliá

Características del Modelo

Mapa-INDAMD-CV (13)

Categorías de Clasificación

Contexto

Entrada

Procesos

Productos (resultados)

55

J.M.Jornet Meliá

J.M.Jornet Meliá

Estructura del Mapa de Indicadores

56

Page 29: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

29

J.M.Jornet Meliá

Proceso de implementación del

Mapa-INDAMD-CV Fase Actuaciones

1 Acuerdos de la Comisión Organizadora.

2 Análisis del concepto de impacto/relevancia a estudiar a partir del MI

3 Diseñar preguntas de evaluación a responder, clasificadas según el modelo CIPP

4 Diseño de indicadores para responder cada pregunta

5 Identificación de la fuente más adecuada (evaluabilidad, operatividad)

6 Diseño de base de datos de integración de cada indicador

7 Recogida de información

8 Incorporación de Información en base de datos

9 Diseño web de acceso público al Mapa de Indicadores

10 Elaboración del Informe: Panorama de la Educación Artística (Música y Danza) en la

CV

11 Difusión del informe

12 Estudios a partir de indicadores

13 Actualización de indicadores, según periodo estimado

57

J.M.Jornet Meliá

Proceso de trabajo

58

Actividad ¿Quién? ¿Cómo? Fechas

Diseño de

Indicadores

Comisión de

Coordinación

Preguntas a responder sobre el impacto

y relevancia de la formación musical en

la CV.

Indicadores para responder cada

pregunta.

Inicio en taller:

14/5/2103

Finalización:

Consulta

sobre acceso a

información

Revisar qué documentos existen

normalmente en los CPM y Otras

instituciones no-regladas y valorar si es

posible incluirlos en el modelo de

evaluación.

Revisar Bases de datos y su accesibilidad.

Determinar Indicadores finales,

incluyendo: definición, fuente, criterios y

estándares de interpretación.

Indicadores

Page 30: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

30

J.M.Jornet Meliá

Proceso de trabajo

59

Actividad ¿Quién? ¿Cómo? Fechas

Diseñar base de

Datos de

integración de

indicadores

Administración Pública Integrando la recogida de

información y la forma en

que se puede hacer

disponible para el Mapa de

Indicadores

Diseño de

Instrumentos

Propuesta: Grupo MIDE

Validación Lógica:

Comisiones de coordinación

+ Otros representantes de

estamentos implicados.

Para los indicadores que sea

necesario, diseñar

instrumentos y modos de

recogida on-line

Análisis de

validación

Coordinación + Grupo

MIDE

Análisis de Datos sobre la

validación: funcionalidad de

los indicadores

Diseño de Modelo

de Informe:

Panorama de la

Educación Musical

en la CV

Dinamizadores de la

Comisión.

Grupo MIDE

Incluir:

Objetivo del MI

Metodología

Resultados organizados

según tipo de indicador

(CIPP, y preguntas

evaluativas)

J.M.Jornet Meliá

Adaptación del modelo a

Conservatorios Profesionales de

Música y Danza

60

Page 31: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

31

J.M.Jornet Meliá

Grupos Focales (1)

Protocolo de trabajo I: Grupo Completo

1. Tomar como punto de partida:

1. Modelo de clasificación (CIPP)

2. Indicadores educativos CV

2. Decidir:

1. Preguntas a responder en cada categoría

2. Indicadores que sirvan para darles respuesta

1. Identificar Obstáculos y Facilitadores para el acceso a información

3. ¿Se puede establecer un cronograma para el diseño del

Modelo?

Documentos de Trabajo 1 y 2

61

J.M.Jornet Meliá

Grupos Focales (II)

Protocolo de trabajo II: Grupos Decidir:

1. ¿Para cada categoría, los criterios planteados son adecuados?

2. ¿Cómo podemos acceder a la información? ¿Es necesario

componer una comisión diversificada para acceso a Bancos de

Datos y para establecer contacto con instituciones? ¿Es

necesario recoger información mediante encuestas a alumnado,

profesorado, familias? ¿Qué tipo de instrumento es más

adecuado: encuesta, entrevista…? ¿Existe documentación en los

enfoques de gestión de la instituciones regladas y no-regladas

que sirva de referencia para indicadores? ¿Sería necesario

cambiar el modo de gestión para disponer de indicadores?

Documentos de Trabajo 1 y 2

62

Page 32: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

32

J.M.Jornet Meliá

ACUERDOS

para el

Diseño del Mapa de Indicadores de la

EM de la CV

63

J.M.Jornet Meliá

ACUERDOS

64

Page 33: Proyecto: CULTURA DE CALIDAD Y EVALUACIÓN EN ...cefire.edu.gva.es/pluginfile.php/458019/mod_folder...Conceptos: criterios, estándares e indicadores. Componentes del diseño: las

12/05/2013

33

J.M.Jornet Meliá

Muchas gracias por su atención

65