rul, j. (2008):...

33
Rul, J. (2008): Evaluación-decisión Evaluar y decidir Evaluar y decidir “evaluar para mejorar” “evaluar para mejorar” “la evaluación “llave” para la mejora” “la evaluación “llave” para la mejora” “saber y actuar” “saber y actuar” “conocer y decidir mejor” “conocer y decidir mejor” Evaluar para mejorar Evaluar para mejorar “saber para decidir” “saber para decidir” Jesús Jesús Rul Rul

Upload: others

Post on 30-Apr-2020

9 views

Category:

Documents


0 download

TRANSCRIPT

Rul, J. (2008): Evaluación-decisión

Evaluar y decidirEvaluar y decidir“evaluar para mejorar”“evaluar para mejorar”

“la evaluación “llave” para la mejora”“la evaluación “llave” para la mejora”“saber y actuar”“saber y actuar”

“conocer y decidir mejor”“conocer y decidir mejor”Evaluar para mejorar Evaluar para mejorar “saber para decidir”“saber para decidir”

Jesús Jesús RulRul

Rul, J. (2008): Evaluación-decisión

SUMARIOSUMARIO

La función cognoscitiva de la La función cognoscitiva de la evaluaciónevaluación

1. Aproximación a la evaluación como actividad humana

2. La “función evaluativa”. El núcleo de la evaluación y los problemas: acepción, función, evaluabilidad

ConocimientoConocimiento y decisiy decisióónn3. Los temas relevantes de la educaci3. Los temas relevantes de la educacióónn

4. Evaluaci4. Evaluacióón y decisin y decisióón (cambio)n (cambio)

Rul, J. (2008): Evaluación-decisión

11Aproximación a la evaluación

como actividad:

“hechos y significadoshechos y significados”cuento de los 3 sabios ciegos: “elefante”.

columna-serpiente-lanza

LA FUNCIÓN COGNOSCITIVA DE LA EVALUACIÓN

Rul, J. (2008): Evaluación-decisión

La evaluación versa sobre “significados valorativos atribuidos a hechos”

HECHOS

Funciones designificación

Estrategias, técnicasde atribución valor

--ValoraciónValoraciónSentido-opinión--Medición Medición datos--ComprensiónComprensiónSaber-experiencia--EvaluaciónEvaluaciónInformación-juicio

ObservaciónExperienciaPruebaComunicación

Significados

--Contexto familiar y Contexto familiar y socioculturalsociocultural

Educación: hechos relevantesEducación: hechos relevantes

--Modelo y tradición Modelo y tradición administrativaadministrativa

--“Dispositivo de enseñanza”:“Dispositivo de enseñanza”:Currículum, organización, docencia

--“Calidad” y “nivel” alumnos“Calidad” y “nivel” alumnos

“funciones significantes”

actores

Rul, J. (2008): Evaluación-decisión

Funciones de significaciónFunciones de significaciónMEDICIÓNMEDICIÓN. Es determinar la cantidad de una magnitud por comparación con otra que se toma como unidad o patrón (datos)

VALORACIÓNVALORACIÓN. Es el juicio que aprecia o determina el valor de algo (opinión, creencia, suposición)

EVALUACIÓNEVALUACIÓN. Es el juicio que se crea o construyesobre hechos o fenómenos, basado en información objetivada (datos) y en valoraciones contrastadas(opinión)

COMPRENSIÓNCOMPRENSIÓN. Facultad, capacidad o perspicacia para entender o penetrar las cosas. Entender, alcanzar, penetrar

Rul, J. (2008): Evaluación-decisión

22El núcleo de la evaluación

LA “FUNCIÓN EVALUATIVA”

Rul, J. (2008): Evaluación-decisión

EL NÚCLEO DE LA EVALUACIÓNEL NÚCLEO DE LA EVALUACIÓN: :

OBJETOOBJETO

DATOSINFORMACIÓN

SIGNIFICIÓN(juicio de valor)

1. Selección de “objetos relevantes”

2. Obtener datos e información rigurosa y plural

3. Atribuir significación a la información (juicios ponderados)

Rul, J. (2008): Evaluación-decisión

Evaluación (modelo): 4 factores Evaluación (modelo): 4 factores y 2 movimientosy 2 movimientos

SUJETOevaluador,

participantes

OBJETOhecho, tema, contenido

VALORsignificación, sentido

FINESexplícitosimplícitos

Movimiento 1: Subjetivo.Juicio valorativo

(Valores apriorísticos)

Movimiento 2: Objetivo.Juicio evaluativo

(valores fundamentados)

Rul, J. (2008): Evaluación-decisión

1.1.Concepto de Evaluación: Concepto de Evaluación: aproximación descriptivaaproximación descriptiva

“Proceso sistemático de atribución de juicios de juicios de valorvalor (significados) a determinados objetosobjetos(datos e información), , estratégicamente seleccionados, como consecuencia de las acciones subjetivosubjetivo--objetivas objetivas realizadas por los agentes evaluadores en un contexto específico, con arreglo a finesfines de conocimiento, orientación decisional y creación cultural”(Rul, 1995)

Ejemplos: diagnóstico médico, probación jurídica

Rul, J. (2008): Evaluación-decisión

Adquirir SABER: SABER: Significación, visión, perspectivaSignificación, visión, perspectiva:

EstratEstrateegigiaass- IntuicióIntuiciónn (experi(experieenciancia lúcidalúcida))- MetodologMetodologíasías diagndiagnóóstisticacas y prons y pronóóstisticacass::

a. Proceso diagnóstico escolar: “PDE”b. Modelo análisis sistémico: “AG5+3”, “NIC”

c. Método “Delphi”

-Metodologías de medición y evaluación:a. Producción: “pruebas”, “modelos acreditación”b. Aprendizaje: “GE-Rs”, Modelos Stake...

Rul, J. (2008): Evaluación-decisión

33Los problemas de la evaluación: acepción, función, evaluabilidad

LA “FUNCIÓN EVALUATIVA”

Rul, J. (2008): Evaluación-decisión

EvaluaciEvaluacióón: el problema de n: el problema de la la ““acepciacepcióónn””

ImprecisiImprecisióón y confusin y confusióón conceptualn conceptual: : valoracivaloracióón, medicin, medicióón, comprensin, comprensióón, evaluacin, evaluacióón.n.Expectativas desproporcionadasExpectativas desproporcionadas: asimetr: asimetríía a entre hechos y significados; y entre modelos y entre hechos y significados; y entre modelos y resultados.resultados.

Rul, J. (2008): Evaluación-decisión

EvaluaciónEvaluación: : el problema el problema de la “de la “funciónfunción””

• Siglo XX dos tendencias: ““positivistapositivista”” y “humanistahumanista””. L. Lucha de paradigmas y metodologías

• Siglo XXI: se mantienen las tendencias, pero la luchaestá centrada en la función:

Función de producción. Interés en los resultados. Metáforas: “caja negra” (mecánico)

Función de conocimiento (aprendizaje). Interés en el saber práctico. Metáforas: “organismo” (sistema).

Rul, J. (2008): Evaluación-decisión

MODELOS ESTADÍSTICOSEstandarización Estandarización ::

•Mediciones •Opiniones

MODELOS ACREDITATIVOSNormalización: Normalización:

(prestigio, pertenencia)•Mediciones •Opiniones

MODELOS COMPRENSIVOSComprensión:Comprensión:•Comunicación

•Experiencia

MODELOS GENERATIVOS

Aprendizaje:Aprendizaje: (conocimiento)•Información auténtica

•Juicio ponderado

Función:Función:CuantitativaCuantitativa

Valor:Valor:ObjetividadObjetividad

Función:Función:CualitativaCualitativa

Valor:Valor:SubjetividadSubjetividad

Función:Función:SancionadoraSancionadora

Valor:Valor:ReconocimientoReconocimiento

Función:Función:CognoscitivaCognoscitiva

Valor:Valor:SaberSaber

producción

conocimiento

Rul, J. (2008): Evaluación-decisión

Evaluación: el problema de Evaluación: el problema de la “evaluabilidad”la “evaluabilidad”

ESCEPTICISMO.ESCEPTICISMO. No es posible ir más allá del subjetivismo de la opinión. Función: juego opiniones

ACREDITACIONISMO.ACREDITACIONISMO. La posición y prestigio de determinadas personas determina la realidad de las cosas, su valor y adecuación. Función: sanción

DEMARCACIONISMO.DEMARCACIONISMO. Es posible si, y sólo si, se ajusta a criterios que hay que especificar a priori (demarcación). Función: juicio cualificado (fundado en datos e información objetivada)

Rul, J. (2008): Evaluación-decisión

El problema de la “demarcacióndemarcación”1Toda demarcación presupone la posibilidad de

normas universales, en el “tercer mundo *”, de verdad lógica y de inferencia lógicamente válida

Demarcar permite distinguir entre evaluación y no-evaluación o pseudoevaluación.

Los productos del conocimiento pueden ser evaluados y comparados sobre la base de criterios universales

Primer mundo: mundo físicoSegundo mundo: mundo de la conciencia, estados mentales, creenciasTercer mundo: mundo de las ideas, de la lógica, del espíritu objetivo (Popper, 1972)

Rul, J. (2008): Evaluación-decisión

El problema de la “demarcacióndemarcación”2Lo específico de la evaluación como acción es

(demarcación):

a. Generación de información objetivada sobre determinados objetos evaluables, esto es, descriptibles

b. Atribución de juicios ajustados a la información inmediata generada en el proceso evaluativo a partir del conocimiento disponible sobre el objeto (información mediata)

Ejemplos de evaluación son el diagnóstico en Medicina y la probación en Derecho

Rul, J. (2008): Evaluación-decisión

El problema de la “demarcacióndemarcación”3

La función clave de la evaluación es de “conocimientoconocimiento--juiciojuicio”:

a. Incrementar el conocimiento práctico sobre la realidad evaluada: saber adquirido a resultas de la evaluación

b. Atribución de valores ajustados que aporten sentido al conocimiento disponible: juicio evaluativo y propuestas de acción.

Las funciones derivadas son: - Orientar las decisiones personales y grupales a

partir del aprendizaje suscitado por la evaluación- Crear y/o reafirmar valores compartidos

Rul, J. (2008): Evaluación-decisión

OBJETO

ConocimientoMediato

CIENCIAEVALUACIÓN

ConocimientoInmediato(concreto)

SignificaciónSignificacióndescriptivadescriptiva

Valoración

Juicios de valor

(adecuados al conocimiento concreto)

Significación Significación valorativavalorativa

Rul, J. (2008): Evaluación-decisión

Evaluación: juicios de valorEvaluación: juicios de valor

JUICIO VALORATIVOJUICIO VALORATIVO: Es una opinión o creencia sobre cualquier tema basada en la experiencia con una gran carga de subjetividad (visión personal)

JUICIO EVALUATIVOJUICIO EVALUATIVO: Es una opinión sobre un hecho basada en información objetivada y plural (opinión cualificada)

Rul, J. (2008): Evaluación-decisión

problema de la “evaluabilidadevaluabilidad””

EscepticismoEscepticismo

AcreditacionismoAcreditacionismo DemarcacionismoDemarcacionismo

Plano Epistemológico

(lógica)

Plano Fenomenológico

(hechos)

problema de la “funciónfunción””

medirmedir valorarvalorar comprendercomprender evaluarevaluar

Rul, J. (2008): Evaluación-decisión

RESUMEN de la “función evaluadora de la educación”RESUMEN de la “función evaluadora de la educación”

-La evaluación es un potente recurso de regulación y conocimiento, pese a la precariedad de las experiencias existentes

-Evaluar la educación es complejo: las pruebas externas dan una foto fija con muchas sombras; las estadísticas de opinión suscitan un interés cambiante y, por ello, efímero; crear conocimiento y juicio ponderado sobre aspectos relevantes del sistema es costoso

-Hay que distinguir entre acciones de “medición”, de “valoración” y de “evaluación” propiamente dicha. En sentido estricto, los órganos evaluadores son los docentes, los centros educativos y la Inspección, siempre que relacionen “conocimiento y juicio”

-Dotarse de una red por la que circule información y conocimiento sobre el sistema educativo es la meta. Los actores clave de esta red, con papeles distintos, son: los Centros educativos, la Inspección y otros organismos como institutos y organismos internacionales

Rul, J. (2008): Evaluación-decisión

11Los temas relevantes en

educación:

a.Mejora nivel y calidad alumnos

b.Logro objetivos educativos

CONOCIMIENTO Y DECISIÓN

Rul, J. (2008): Evaluación-decisión

Logro Objetivos

Calidad y nivel

alumnos

Investigación y consulta

Programa de estudios

Clima del centre

Calidad y nivel

docentes

Dirección institución

Adquisición y gestión

recursos

Prestigio institución

Apertura y relaciones

Rul, J. (2008): Evaluación-decisión

FACTORFACTOREES INSTITUCIONALS INSTITUCIONALEES BS BÁÁSICSICOOS DES DE LLOOS S CENTRCENTROOS EDUCATIS EDUCATIVOVOSS

1.1. DesDesarrollo arrollo institucionalinstitucional: 1.1. Incidir en la “visióvisiónn” para acertar en la “misiómisiónn” (criteriode eficacia)

Centralidad del aprendizaje: lograr metas en el nivel ycalidad de los alumnos

Clima institucional saludable y centrado en el aprendizaje1.2. Incidir en los “recursosrecursos” para optimizar los “efectefectooss” (criterio de eficiencia)

Capacidad (competencias y autonomía), liderazgo, estilo de gestión

2. 2. DesDesarrollo arrollo humhumano yano y profesionalprofesional: : 2.1. Incidir en el “capital humcapital humanoano” para optimizar las

respuestas y las sinergias: investigación, capacitación, asesoramiento

Programa de estudios: creación de oferta formativa adaptada y exitosa

Incentivación, prestigio social y capacitación de los docentes

Rul, J. (2008): Evaluación-decisión

22

Evaluación y decisión (cambio)

CONOCIMIENTO Y DECISIÓN

Rul, J. (2008): Evaluación-decisión

CULTURA DEL CAMBIO: dimensionesCULTURA DEL CAMBIO: dimensiones

EsferaEmocional

EsferaCognoscitiva

Esfera Operativa

Esfera EstructuralCAMBIO

CONOCIMIENTOCONOCIMIENTO

ACTITUDESACTITUDES

RREECCUURRSSOOSS

PPRRAACCTTIICCAASS

Rul, J. (2008): Evaluación-decisión

“Acción de crear o modificar una determinada realidad específica”

INNOVACIÓNINNOVACIÓN:

INNOVARINNOVAR:“Proceso para la promoción de cambios

concretos como consecuencia de la acción intencional motivada por necesidades de

adaptación y/o de optimización”

GESTIÓN DE LA INNOVACIÓN GESTIÓN DE LA INNOVACIÓN CONCEPTOCONCEPTO

Rul, J. (2008): Evaluación-decisión

DIFERENCIACIÓNDIFERENCIACIÓN

REFORMA.REFORMA. Es un cambio a gran escala que integra diversos ámbitos

interrelacionados de una determinada la realidad

CAMBIO. CAMBIO. Es una estrategia de acción humana orientada a la transformación de

determinadas realidades por inadecuación al entorno (adaptación) o por una expectativa

de mejora (calidad)

INNOVACIÓN.INNOVACIÓN. Es un cambio concreto a escala media y pequeña que procura generar

mejoras tangibles, en la acción personal, profesional e institucional

Rul, J. (2008): Evaluación-decisión

INNOVACIÓNINNOVACIÓN: FUNCIÓN Y FUNCIONES

FUNCIÓN:

--Transformadora en la Transformadora en la dimensiódimensió fenoménica fenoménica ((conductesconductes, , realitzacionsrealitzacions) y axiológica (valores, ) y axiológica (valores, intereses, implicaciónintereses, implicación) )

FUNCIONES:

--”Visión” de la realidad que promueve una “misión””Visión” de la realidad que promueve una “misión”

--Integración de esfuerzos y recursos en la acciónIntegración de esfuerzos y recursos en la acción

--Lograr experiencia de mejora: “Lograr experiencia de mejora: “funciona mejor”, funciona mejor”, “es efectivo”, “satisface”, “crea sinergias” ...“es efectivo”, “satisface”, “crea sinergias” ...

Rul, J. (2008): Evaluación-decisión

ETAPAS PROCESO CAMBIO

1. Iniciación. Estudios, promotores

2. Difusión. Información, comunicación

3. Adopción. Participación, compromiso

4. Implementación. Gestión: planificación,

seguimiento, control

5. Institucionalización. Integración organizativa

(modificación funcional)

Rul, J. (2008): Evaluación-decisión

Situación A:INSTITUCIÓN EDUCATIVA

>Global>Específica

Situación B:INSTITUCIÓN EDUCATIVA

>Global>Específica

CambioCambio

Estrategias (visión logro)

-Intuición (experiencia lúcida)

-Diagnósticos (valoración)

-Medición (pruebas)

-Evaluación (saber concreto)

Gestión del cambio:

-Proyecto (criterios de selección)-Promotores-Recursos implicados-Etapas

Rul, J. (2008): Evaluación-decisión

-El cambio debe ser estratégico:El cambio debe ser estratégico:

• Selección núcleos sinérgicos

• Equilibrio energético: energía en uso, energía adicional cambio

--El cambio debe ser efectivo:El cambio debe ser efectivo:

• Eficacia: logro de metas, institucionalización

• Eficiencia. Relación metas / recursos implicados:

>Sucede a distintos niveles: operativo, tecnológico, volitivo y

actitudinal

>Modulado en el tiempo: gestión de la eficacia y satisfacción

CRITERIOS BÁSICOS DE GESTIÓN DEL CAMBIOCRITERIOS BÁSICOS DE GESTIÓN DEL CAMBIO