2. clase loge 2012 evaluación institucional
TRANSCRIPT
Autoevaluación
Proceso de Evaluación Institucional
Antecedentes y Prospectiva
Dra. Ángela Corengia
17 de noviembre de 2012
Evaluar para conocer
Cambiar
Mejorar
“Sin información de calidad, la gestión de la universidad es ciega o, lo que es lo mismo, queda librada a la intuición” (Bernasconi, 2010).
EVALUACIÓN INSTITUCIONAL
1. Selección y definición de la realidad a evaluar.
2. Definición de los propósitos de la evaluación.
3. Producción de evidencia empírica acerca de la realidad evaluada.
4. Formulación de juicios de valor.
5. Toma de decisiones o acciones que transformen dicha realidad.
Proceso que consta de cinco componentes:
Proceso holístico
Autoevaluación (UA)
Evaluación externa (CONEAU)
“Nadie quiere la evaluación externa, Nadie cree en la evaluación interna” (Nevo, 1997)
Evaluación Institucional
COOPERACIÓN Y DIÁLOGO
Fases Articuladas
Es un medio (no un fin).
Reúne evidencia (“hacer visible lo cotidiano”).
Desarrolla una actitud reflexiva.
Incluye procesos y resultados.
Participa toda la comunidad universitaria.
Características
Foco en la institución como un todo.
No hay acciones externas punitivas.
Mejoramiento de la calidad más que aseguramiento.
En el marco de los objetivos de cada institución:
¿somos en la realidad lo que queremos y decimos ser?
Diferencia con los Procesos de Acreditación
Autoevaluación
1996-1997: autoevaluación
2000: evaluación externa
2001: reconocimiento definitivo
2000 a 2010: evaluaciones sectoriales• Acreditación y reacreditación carreras grado y posgrado.
• Medición satisfacción: alumnos, graduados, docentes, no docentes, empleadores de pasantes y graduados.
• Medición estilos de enseñanza.
• Medición hábitos de estudio y aptitudes educaciones de los ingresantes.
• Construcción de series de indicadores simples y complejos.
• Evaluación de proyectos de carreras de posgrado.
La Evaluación Institucional en la Universidad Austral
Autoevaluación
Diagnóstico Reflexión Compromiso con el futuro
Cumplir con lo exigido por la Ley de Educación Superior
Fin último: mejorar la calidad de la UA
Conocer el grado de internalización de la misión, ideario, valores. Identificar grado de avance de las recomendaciones de CONEAU. Comparar el estado de situación de UA con otras universidades. Avanzar en el desarrollo del modelo de calidad de la UA.
¿Para qué? (Objetivos)1. A nivel interno e institucional
2. A nivel externo
Autoevaluación
Momento institucional más
favorable
Mejoramiento de la calidad
Articulación con los procesos de acreditación de carreras de
grado y posgrado
(Cfr. Res. CPCS 71/08, Res. CPCS 271/08)
¿Por qué en el 2010?
La universidad Austral como un todo:
Hospital Universitario Austral
Parque Austral
Áreas institucionales
Unidades de apoyo
Unidades académicas
¿Qué se va a evaluar?
Autoevaluación
Presidente: RectorVicepresidente: Vicerrector de Asuntos AcadémicosSecretario: Directora OEI6 Vocales: Vicerrector de Asuntos Económicos, Vicerrectora de Estudios, Secretario General de la CP, Luis García Ghezzi (FCE), Guillermo Perkins (IAE), Ángel Centeno (CAS)
¿Quiénes?
Autoevaluación
1. Se evaluarán 8 variables que abarcan toda la realidad institucional.
2. Involucra de modo directo a 130 personas e indirectamente a todos.
3. Evaluación de dimensiones: 700 indicadores.
4. Fuentes de información: - Documentos y base de datos de la universidad.
- Entrevistas en profundidad a 120 personas en puestos de responsabilidad.
- Cuestionarios cerrados a 15.000 personas de la UA: alumnos de pregrado, grado y
posgrado, graduados, personal docente y no docente, personal de salud y empleadores
de pasantes y graduados.
Resumen
Autoevaluación
2010:
- Diseño del modelo de Autoevaluación y de la guía de entrevista.
¿Qué se hizo hasta ahora?h
h 2011:
-- 120 entrevistas en profundidad a directivos de la UA, de ACES y de la Prelatura del Opus Dei (duración aproximada entre 3 y 4 hs).
-- Diseño y aplicación de los cuestionarios para toda la comunidad universitaria y empleadores. Porcentaje de respuesta promedio 90%.
- Comienzo de la codificación y pre-análisis de las entrevistas en profundidad.
91% alumnos de grado
89% alumnos de posgrado
90% profesores
97% personal gerencial, técnico y administrativo
60% personal de salud
Autoevaluación Institucional
Autoevaluación
Etapa diagnóstica: Organización de la información cualitativa y cuantitativa por variable, dimensión, subdimensión e indicador (a cargo de la OEI con seguimiento semanal de algunos miembros de la CEI)
Abril, mayo y junio 2012
Última semana de junio2012
Reunión con las 8 comisiones de trabajo para presentarles la información por variable, con una guía para se análisis.
Última semana de agosto 2012
Autoevaluación
Hasta el 15 de octubre
2012
Etapa valorativa: las 8 comisiones analizan y valoran (con una guía de análisis y con estándares) la información relevada en la etapa diagnóstica
Etapa prospectiva: las 8 comisiones se focalizarán en identificar las líneas de desarrollo y mejoramiento que tiendan a revertir las debilidades encontradas y potenciar las fortalezas.
Elaboración del informe final: la OEI y el CEI realizarán el informe final a partir del trabajo realizado por las 8 comisiones.
Noviembre y diciembre 2012
Autoevaluación
¿Cuándo serán comunicados los resultados?
-Informes a CD-Informes a áreas-A todos: RECTOR-Por carrera y por público: con las unidades
CONEAU
• Evaluación externa
Evaluación externa
Autoevaluación
¡Muchas gracias!
Autoevaluación
Etapa de Aplicación de Cuestionarios
Autoevaluación
Aplicación de Cuestionarios – Grupos a Encuestar
1. Alumnos de Pregrado
2. Alumnos de Grado
3. Alumnos de Posgrado
4. Profesores
5. Personal Gerencial, Técnico y
Administrativo
6. Personal de Salud
7. Graduados
8. Empleadores de nuestros
alumnos (pasantes) y graduados
Todas las unidades
académicas (Facultades,
Institutos, Escuelas) de
CABA, Pilar y Rosario.
Hospital Universitario
Austral.
Parque Austral.
Áreas institucionales y
unidades de apoyo.
Cuestionarios
en papel
Cuestionarios
electrónicos
Autoevaluación
Delegados del Proceso de Aplicación de Cuestionarios
Alumnos de Posgrado
Profesores
Personal Gerencial, Técnico y Administrativo
Graduados y Empleadores
José María Corrales (Pablo Murga y Florencia Paolini
– EMBA - ; Eduardo Fracchia – EMBA Regional -; María Eugenia
Delfino – MBA)
Alejandro Carrera
Mariana Bence
La aplicación de estos cuestionarios electrónicos estará centralizado en la OEI,
en conjunto con estas áreas.
Ernesto Ruete
Autoevaluación
Delegados del Proceso de Aplicación de Cuestionarios - Responsabilidades
Coordinar el plan de comunicación del proceso de Autoevaluación en su unidad, para cada grupo de personas a encuestar.
Coordinar el cronograma de aplicación de los cuestionarios teniendo en cuenta el momento y la forma más oportuna para cada grupo de personas a encuestar, y teniendo en cuenta el “cronograma base” de la OEI.
Aplicar los cuestionarios.
Realizar el seguimiento y control del número de respuestas obtenidas.
Cada delegado podrá armar un equipo de trabajo con otras personas. No obstante, el responsable y el nexo de comunicación con la OEI será sólo y
siempre el “Delegado de Autoevaluación”.
1
2
3
4
Autoevaluación
Coordinar el Plan de Comunicación1
Material de comunicación provisto por la OEI (folletos + video + carteles + Q&A).
Todas las herramientas de comunicación que gestiona cada Dirección de Comunicación de cada sede.
Aquellas nuevas acciones , específicas para esta etapa, que fomenten el compromiso de todos.
El éxito de esta etapa depende en gran medida del soporte que se brinde a través de un estratégico plan de comunicación que sensibilice a todos los grupos a encuestar sobre la importancia del proyecto y su impacto en el
futuro de nuestra organización.
Contamos con:
Acción a realizar por los delegados y sus equipos:
Concretar el plan de comunicación de cada grupo, teniendo en cuenta las fechas de aplicación de
cuestionarios. Dirección de Comunicación (Florencia Ameriso)
Autoevaluación
Alumnos de Posgrado
Coordinar el Cronograma de Aplicación de los Cuestionarios2
El delegado deberá armar el cronograma de aplicación de cuestionarios para su
grupo, teniendo en cuenta las siguientes fechas y plazos de aplicación:
Es importante:
15 de Septiembre
20 de Septiembre
29 de Septiembre
1 semana + 1 semana para ausentes
2 semanas + 1 semana para ausentes
1 semana + 1 semana para ausentes
A partir del: Duración de la aplicación:
Tener en cuenta el momento más oportuno para cada uno de los grupos a encuestar. Ejemplo: Alumnos: se tendrán en consideración las fechas de exámenes y será necesario “negociar” con los
profesores espacio en sus clases para poder aplicar el cuestionario.
Profesores: es conveniente aprovechar reuniones de claustro o departamentales, que cuenten con la
mayor asistencia posibles de profesores.
Profesores
Personal G, T y A
Autoevaluación
Aplicar los Cuestionarios3
La OEI proveerá a cada delegado de:
Listados de personas a encuestar, con dos columnas de seguimiento: Columna de control de entrega del cuestionario a la
persona a encuestar. Columna de control de que el encuestado depositó el
cuestionario en la urna.
Urnas en donde los encuestados depositarán los cuestionarios.
Cuestionarios correspondiente al grupo a cargo.
Autoevaluación
Aplicar los Cuestionarios3
Al ser aplicados en clase, la entrega del formulario al alumno y su devolución es inmediata. El control de doble columna en el listado consiste en la toma de asistencia y el seguimiento de quiénes depositan el cuestionario completo en la urna.
Es necesario que el delegado o personas de su equipo se hagan presentes en el aula, con los cuestionarios, listados y urnas.
Se le debe explicar a los alumnos:
La importancia de su participación en el proceso y su sinceridad en responder.
Que el cuestionario es anónimo y debe ser depositado en la urna una vez completo.
Que el listado es simplemente paras contabilizar el número de participantes.
Que cada alumno debe completarlo individualmente.
El delegado o la persona de su equipo debe estar presente hasta que finalicen todos los alumnos y debe retirarse con la urna llena.
ALUMNOS
Autoevaluación
Aplicar los Cuestionarios 3 PROFESORES Y PERSONAL G, T y A
Siempre que se respete el anonimato y los plazos, se podrá organizar la distribución y recolección de la manera más adecuada.
Se sugiere aprovechar reuniones de profesores / personal para solicitar que completen allí mismo los cuestionarios. Sino, se puede entregar el cuestionario individualmente (llevando control en el listado).
Se debe tener en cuenta el personal / profesores part-time (anunciarles que pasen a retirarlo y completarlo en caso que no asista a la unidad regularmente, enviarlo por correo, etc.). Siempre se deberá hacer seguimiento de los cuestionarios entregados y devueltos.
Las urnas estarán disponibles para que los profesores / personal depositen los cuestionarios. Las urnas no podrán estar solas, sino que deben permanecer bajo la custodia del delegado o personas del equipo que llevarán el control. Cada responsable de urna tendrá los listados.
El delegado es el responsable de seguir el avance y reclamar la entrega del cuestionario a quienes no lo hubieran hecho.
Autoevaluación
Seguimiento y control del número de respuestas obtenidas4
Se prevé una semana más a cada periodo de aplicación a fin de que el delegado y su equipo
se encarguen de reclamar los cuestionarios que aún no han sido completados, y así de
obtener la mayor cantidad de respuestas posibles (censo).
Los cuestionarios completos deberán ser depositados en las cajas en las que fueron
entregados por la OEI, pero nunca deben ser mezclados (alumnos por un lado, profesores
por otro, y personal por otro).
El delegado y su equipo son responsables de que las cajas con los cuestionarios sean
guardadas en un lugar seguro. Las mismas deben ser devueltas a la OEI, selladas con cinta y
clasificadas, junto con los listados.
Autoevaluación
Plan de Comunicación y Aplicación Modelo Alumnos de Posgrado
Acciones ResponsableSeptiembre Octubre
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 1 2 3 4 5 6 7 8 9
Plan de Comunicación DCI / Delegado
Entrega de cuestionarios, listados y urnas al Delegado OEI
Aplicación de cuestionarios Delegado
Control primera semana Delegado / OEI
Refuerzo aplicación ausentes Delegado
Control segunda semana Delegado / OEI
Devolución a la OEI de cuestionarios completos, listados y urnas Delegado
Autoevaluación
Plan de Comunicación y Aplicación Modelo Profesores
Acciones ResponsableSeptiembre Octubre
17 18 19 20 21 22 23 24 25 26 27 28 29 30 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23
Plan de Comunicación DCI / Delegado
Entrega de cuestionarios, listados y urnas al Delegado OEI
Aplicación de cuestionarios Delegado
Controles primera y segunda semana Delegado / OEI
Refuerzo aplicación ausentes Delegado
Control final Delegado / OEI
Devolución de cuestionarios completos, listados y urnas Delegado
Autoevaluación
Acciones ResponsableSeptiembre Octubre
17 18 19 20 21 22 23 24 25 26 27 28 29 30 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23
Plan de Comunicación DCI / Delegado
Entrega de cuestionarios, listados y urnas al Delegado OEI
Aplicación de cuestionarios Delegado
Control primera semana Delegado / OEI
Refuerzo aplicación ausentes Delegado
Control segunda semana Delegado / OEI
Devolución a la OEI de cuestionarios completos, listados y urnas Delegado
Plan de Comunicación y Aplicación Modelo Personal Gerencial, Técnico y Administrativo
Autoevaluación
¡Muchas gracias!