“evaluación de competencias a nivel del...

“Evaluación de competencias a nivel del programa”

José Rafael López Islas

Tecnológico de Monterrey

Coloque aquí el logo de su institución

Temas

• El contexto.

• El programa de evaluación de competencias de egreso.

• Las implicaciones.

• Los retos.

• Los aprendizajes y recomendaciones.


El contexto


• Universidad privada, sin

fines de lucro

• Fundada en 1943 por la

sociedad civil

• 26 campus en México

• 55 mil alumnos en pregrado,

y 12 mil en posgrado

• 7,300 profesores

• Acreditada por vez primera

por SACSCOC en 1950

• 206 en el ranking mundial

de QS, y 56 en opinión de

empleadores

Visión

Formar líderescon espíritu

emprendedor, sentido humano y

competitivos internacionalmente


• Innovación como característica central de la Institución.

•Rediseño del modelo educativo en 1998.

•Cambios en el contexto internacional, especialmente las agencias acreditadoras:•De la medición de la capacidad institucional…

•…a la medición de los resultados de aprendizaje como base para evaluar la calidad de las instituciones educativas.


Fundamento teórico -metodológico


•El concepto competencia en el ámbito de recursos humanos.

• La crítica a las universidades por enfocarse en las competencias disciplinares en vez de las generales (soft skills).

•El uso en educación del término competencias para definir perfiles de egreso, consistente con requerimientos de agencias acreditadoras.

• La educación basada en competencias como modelo disruptivo.


Conceptos clave


•Competencia de egreso: combinación de atributos—con respecto al conocimiento y su aplicación, a las actitudes y a las responsabilidades—que hacen referencia a las capacidades que un estudiante debe haber desarrollado al momento de su graduación.


•Criterios de desempeño: enunciados específicos medibles basados en comportamientos observables que evidencian el desarrollo de una competencia.


Modelo de implementación de cuatro etapas


Definición

Acciones educativas

Cursos, actividadesco-curriculares, programas

de apoyo, recursos de aprendizaje

Directa Indirecta

Valoración

Medición

Evaluación

Decisión de mejora continua

Plan de Evaluación

Competencias de egreso

Criterios de desempeño

Cierre de ciclo


• Etapa 1: Definir perfiles de egreso basados en competencias

•Se define perfil de egreso que incluye 6-8 competencias de egreso disciplinares y ocho generales.

•Cada competencia tiene definidos al menos dos criterios de desempeño.

• Las competencias de egreso son transversales al currículo.

• La malla curricular debe ser consistente con las competencias de egreso.


Ejemplo de Ingeniero Químico y de Sistemas:

Competencia de egreso disciplinar:El alumno diseña equipos de procesos o procesos químicos completos para la producción de materiales o productos que satisfacen las demandas específicas del mercado.

Criterios de desempeño:1: El alumno resuelve problemas de diseño abierto (open ended designproblems), de manera satisfactoria y de acuerdo a criterios previamente establecidos. (Rúbrica)2: El alumno obtiene un dictamen igual o superior a "Satisfactorio" en la sección de "Diseño e Ingeniería de Sistemas" en el Examen Nacional de Egreso de Ingeniería Química. (Examen).


• Etapa 2: Elaborar el plan de evaluación del programa académico

• El plan de evaluación es la guía para realizar la evaluación de las competencias de egreso del programa.

• Para cada criterio de desempeño de cada una de las competencias de egreso, se identifican:

• Método de medición• Frecuencia de la medición• Dónde medir (en qué curso)• Forma de cumplimiento y metas• Responsable(s)


• Etapa 2: Elaborar el plan de evaluación del programa académico


• Etapa 3: Llevar a cabo la evaluación de las competencias de egreso

•Asegurar que el plan de evaluación de cada programa se lleva a cabo adecuadamente.

•Se evalúa el programa académico y no al alumno o al profesor en lo individual, a través de evidencias del desarrollo de las competencias a nivel programa.

•No se requiere medir todo, ni todo el tiempo: • La medición puede ser semestral, anual o bianual.

• La medición se realiza sobre una muestra aleatoria.


• Etapa 3: Llevar a cabo la evaluación de las competencias de egreso

•Es una tarea adicional a la evaluación del curso pero puede

hacerse sobre el producto de un curso (course embedded

assessment ).

•También es posible realizarlo en un evento especial

(assessment center /day ).

•En ambos casos, se trata de evaluación del desempeño

(también llamada evaluación auténtica ).


21

Combinación de conocimientos, habilidades y actitudes que hacen referencia a las capacidades que un estudiante debe haber desarrollado al momento de su graduación

Habilidades

Actitudes

Conocimientos

Valores

Competencia de egreso



22

Habilidades

Actitudes

Conocimientos

Valores


Evaluación tradicional

Examen

Quiz© UQO


23

Habilidades

Actitudes

Conocimientos

Valores


Evaluación del

desempeño

La evaluación del desempeño implica que un estudiante enfrente un problema altamente significativo donde tiene que aplicar sus conocimientos y habilidades para resolverlo.

Rúbricas


Dimensiones

Niveles de desempeño

Incipiente o

ElementalEn desarrollo

Satisfactorio

o

Adecuado

Sobresaliente

o

Excelente

Estructura del texto

El texto no muestra una estructura, únicamente

presenta ideas aisladas, sin coherencia y que pueden

estar relacionadas entre sí, pero se encuentran vagas y

desconectadas.

El texto muestra una estructura de introducción, desarrollo y conclusión pero puede estar incompleto en

alguno de los tres elementos básicos.

El texto muestra una clara evidencia de tener

introducción, desarrollo y conclusión

El texto muestra una clara evidencia de tener

introducción, desarrollo y conclusión, además presenta

ideas congruentes y relacionadas entre sí, citando

autores destacados relacionados con el tema.

Presentación y organización

de ideas

Escrito deficiente. Trata de escribir sobre el tema pero lo logra parcialmente. No hay enunciados claros de la idea principal y hay confusión en las ideas secundarias. Falla en la secuencia efectiva de

ideas.

Escrito limitado con características de

comunicación efectiva parcialmente dadas. El

propósito no está totalmente claro y, aunque la idea

principal está escrita, no hay evidencia de mantener el foco

de la idea principal.

Escrito adecuado que comunica un mensaje

completo a una audiencia específica. Aunque el

propósito está claro, el desarrollo de ideas

secundarias no se realiza en su totalidad. La organización de las ideas es evidente pero

puede faltar especificidad, puede estar incompleto o no

desarrollado en secuencia efectiva.

Escrito muy bien desarrollado que es efectivo al comunicar un mensaje completo a una audiencia específica. Bien

organizado y mantiene el foco central con un propósito

claramente expuesto con ideas secundarias.

Ortografía, sintaxis y

puntuación

El texto presenta severas deficiencias en el uso del

lenguaje y/o en la estructura de las oraciones; por

ejemplo: las ideas no son claras, el orden es

incomprensible. El texto presenta más de 10 errores

de ortografía y/o de puntuación.

El texto demuestra algunas deficiencias en el uso de

lenguaje y/o en la estructura de oraciones. El texto presenta

entre 6 y 10 errores de ortografía y/o de puntuación.

El texto demuestra evidencia del uso correcto de lenguaje. La estructura de oraciones es adecuada. El texto presenta

de 1 a 5 errores de ortografía y/o de puntuación.

El texto demuestra evidencia de un dominio total del uso correcto de lenguaje y de la

estructura de sus oraciones. El texto no presenta ningún error de ortografía ni de puntuación.

Niveles de desempeño

Dimensiones

Descripción de los

niveles de desempeño

Elementos de

una rúbrica


• Etapa 4: Identificar y llevar a cabo acciones de mejora

•Es una etapa clave pues implica la mejora continua de los

programas.

• Las mejoras pueden referirse a cualquier aspecto del proceso:

perfil, currículo, actividades de aprendizaje, infraestructura,

recursos, evaluación.


Implicaciones


Se requiere encontrar nuevas formas de facilitar el aprendizaje

•No podemos desarrollar competencias de egreso complejas con

modelos de enseñanza tradicionales.

•Debe haber mayor vinculación con el entorno.

•Debemos rediseñar el modo de enseñar/aprender. Por ejemplo:

flipped learning (aprendizaje invertido).


Se requiere construir un currículo con un mayor nivel de integración

• La malla curricular debe contar con conexiones transversales.

•Es posible desarrollar un mayor sentido de apropiación del

currículo por parte de todos los docentes.

•Se debe incorporar por diseño el desarrollo de competencias de

egreso generales a lo largo del currículo.


Se requiere una forma sustancialmente diferente de evaluar el aprendizaje

•Evaluar competencias implica utilizar formas de evaluación no

tradicionales.

•Dominar el uso de instrumentos tales como rúbricas toma

tiempo y requiere de un sólido apoyo institucional.


Las responsabilidades de los profesores se transforman

• Los docentes deben desarrollar nuevas maneras de enseñar,

de construir el currículo y de evaluar el aprendizaje.

•Se requiere replantear la estrategia de incentivos a los

docentes.


Se necesita contar con un sólido apoyo informático

•El seguimiento a toda la actividad de evaluación de

competencias de egreso es muy complejo.

•Se requiere de herramientas informáticas conectadas con los

sistemas de información de alumnos y cursos.

•Tener un sistema propio (como el Sistema para Administrar la

Evaluación de Programas, SAEP ) tiene ventajas pero implica

costos. Es necesario evaluar opciones en el mercado.


Es necesario contar con liderazgo, capacidad de gestión y de manejo del cambio

•Mover al cambio requiere apoyo institucional al más alto nivel.

•El programa demanda el liderazgo y la gestión de una entidad

central.

•Se requiere un plan para el manejo del cambio, incluyendo una

estrategia efectiva de comunicación.


Es una oportunidad para alinear los esfuerzos institucionales con los requerimientos de acreditación

•Es posible evitar doble esfuerzo si se alinea el programa

institucional con los requerimientos de agencias acreditadoras.

•Puede convertirse en un medio para asegurar la sostenibilidad

del programa de evaluación de competencias.


Principales retos


•Diseñar un modelo completo en su alcance pero sencillo en su aplicación y fácil de comunicar.

•Diseñar una estrategia efectiva de movilización al cambio.

•Asegurar la asignación de recursos y apoyo institucional.

•Cerrar ciclos de mejora.

•Mostrar resultados y avances de manera sistemática.


Recomendaciones


•Empezar pronto, aunque no se haya resuelto el debate teórico-metodológico, y aprender sobre la marcha.

• Integrar la definición de perfiles de egreso basados en competencias a la estrategia regular de revisión curricular.

•En la etapa inicial construir un equipo con docentes innovadores, y darles el apoyo para correr riesgos.

•Construir una estrategia de comunicación que explique las razones (en sentido positivo y negativo) para iniciar un programa de evaluación de competencias de egreso.


Reflexión final

•La evaluación de competencias de egreso permite asegurar que la institución está cumpliendo con lo que promete en sus perfiles de egreso.

•La evaluación va asociada a la mejora continua.

•No olvidar que el perfil de egreso debe preparar para el primer empleo pero también para el último, el más importante.

•Esto implica dar seguimiento a nuestros graduados.


¡Muchas gracias!

José Rafael López [email protected]

“evaluación de competencias a nivel del...

Documents