evaluación de la calidad en educación superior josé gutiérrez dpto. métodos de investigación y...

118
Evaluación de la Calidad en Evaluación de la Calidad en Educación Superior Educación Superior José Gutiérrez José Gutiérrez Dpto. Métodos de Investigación y Dpto. Métodos de Investigación y Diagnóstico en Educación Diagnóstico en Educación

Upload: enrique-paez-nieto

Post on 25-Jan-2016

217 views

Category:

Documents


2 download

TRANSCRIPT

Page 1: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Evaluación de la Evaluación de la Calidad en Educación Calidad en Educación

SuperiorSuperiorJosé Gutiérrez José Gutiérrez

Dpto. Métodos de Investigación y Dpto. Métodos de Investigación y Diagnóstico en EducaciónDiagnóstico en Educación

Page 2: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

CONTEXTO DE CONTEXTO DE REFERENCIA: REFERENCIA: Formación Universitaria Formación Universitaria En todos sus ámbitos, niveles, agentes y En todos sus ámbitos, niveles, agentes y

estructurasestructuras

Ambitos:Ambitos: Titulaciones y Programas Formativos Titulaciones y Programas Formativos

Niveles: Niveles: Diplomaturas y Licenciaturas, Diplomaturas y Licenciaturas, Doctorados, Master, Títulos Propios Doctorados, Master, Títulos Propios

Agentes:Agentes: Profesores, Estudiantes, Gestores, PAS Profesores, Estudiantes, Gestores, PAS

Estructuras y Recursos:Estructuras y Recursos: Facultades/Centros, Facultades/Centros, Servicios y Unidades de Administración y Servicios y Unidades de Administración y GestiónGestión

Page 3: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

UNIVERSIDADESProfesores Alumnos

PROCESO DE ADAPTACIÓN AL EEESEEES

Servicios

Unidades/ Administrativas

Personal de Administración y Servicios

El Sistema Universitario y su Contexto HistóricoEl Sistema Universitario y su Contexto Histórico

Page 4: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

UNIVERSIDADESProfesores Alumnos

PROCESO DE ADAPTACIÓN AL EEESEEES

Servicios

Retos de Calidad Universitaria en el Contexto del Espacio Europeo de Educación Superior

Cambios Sociales, Económicos, Cambios Sociales, Económicos, PolíticosPolíticos

Page 5: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

EXTERNAINTERNA

PROCESO DE ADAPTACIÓN

Instituciones Dinámicas

UNIVERSIDADES

Page 6: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Profesores

Alumnos

Nuevas relacionesUsuarios

Nuevas colaboraciones

R. Humanos

R. InformaciónActivos

R. Espaciales

Nuevos proyectos

Nuevos productos

Nuevos servicios

R. TIC

INT

ER

NO

EX

TE

RN

O

Page 7: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

R. Humanos

R. InformaciónActivosR. Espaciales

R. TICs

Nuevos perfiles

Gestión más dinámica y flexible

Modelos de Bibliotecas Virtuales

Desarrollo de las TIC

Proceso INTERNO de adaptación

8

Page 8: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

• Integración de los recursos y servicios de información

existentes en los sistemas de gestión de e-learning

• Integración de los recursos/objetos de aprendizaje en sistemas de información digital (directorios, depósitos, bibliotecas digitales…)

• Gestión de contenidos de los recursos/objetos de aprendizaje

• Gestión autónoma de la formación por parte de los estudiantes.

R. Humanos

R. InformaciónActivosR. Espaciales

R. TICs

Nuevos perfiles profesores/rol alumnos

Gestión integrada de la información

Modernización de los Espacios

Desarrollo de las TICs en Bibliotecas

Proceso INTERNO de adaptación

Page 9: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Contexto histórico y Situación actualContexto histórico y Situación actual

I Plan Nacional de la Calidad de las Universidades-95

II Plan Nacional de Calidad de las Universidades-2001-1006

Primer PACU-Plan Andaluz de Calidad de las Universidades

Los cambios acontecidos en España en el contexto económico-social en los últimos años, han provocado la adaptación de los sistema educativossistema educativos a nueva coyuntura.

Declaración de Bolonia de 1999: la educación superioreducación superior conforma uno de los principales focos de atención dentro de la creación de una Europa común.

Iniciativas para dar respuesta a estos retos

Page 10: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Contexto de AndalucíaContexto de Andalucía

Constitución de Vicerrectorados Gabinetes y Unidades de Calidad .

Planificación de Evaluaciones de Titulaciones, Servicios y Departamentos Universitarios.

Ley Andaluza de Universidades, LAU.

Unidad de Calidad Universidades Andaluzas. Planes de Calidad

Agencia Andaluza de Evaluación y Acreditación

Planes Estratégicos en las Universidades

Page 11: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

EvaluaciónEvaluaciónEvaluaciónEvaluación Obtener información objetiva (cuantitativa y cualitativa) de forma

sistemática para orientar decisiones. Conocimiento, reflexión.

LOU, LOMLOU autorregulación, rendición de cuentasLOU, LOMLOU autorregulación, rendición de cuentas Criterios de financiación universidades andaluzasCriterios de financiación universidades andaluzas Controlar el gasto público (aumento de costes, restricc Controlar el gasto público (aumento de costes, restricc

económ).económ). Ajustar la eficiencia y la calidad.Ajustar la eficiencia y la calidad. Contrarrestar la desigualdad e injusticia.Contrarrestar la desigualdad e injusticia. Aumentar la aportación al desarrollo nacional.Aumentar la aportación al desarrollo nacional. Mejorar la formación de los titulados como objetivo Mejorar la formación de los titulados como objetivo

económico, social y cultural.económico, social y cultural. Mejorar los servicios ofertados por la Universidad.Mejorar los servicios ofertados por la Universidad. Derecho de los clientes/usuarios a conocerDerecho de los clientes/usuarios a conocer Proporcionar evidencia, Proporcionar evidencia, información relevante y objetiva,

de su calidad a la sociedad, como servicio público.de su calidad a la sociedad, como servicio público. Proporcionar información objetiva para la adopción deProporcionar información objetiva para la adopción de decisiones justificadas (PF, PD, PM).decisiones justificadas (PF, PD, PM). Garantizar el buen funcionamiento de una institución Garantizar el buen funcionamiento de una institución

complejacompleja..

Obtener información objetiva (cuantitativa y cualitativa) de forma sistemática para orientar decisiones. Conocimiento, reflexión.

LOU, LOMLOU autorregulación, rendición de cuentasLOU, LOMLOU autorregulación, rendición de cuentas Criterios de financiación universidades andaluzasCriterios de financiación universidades andaluzas Controlar el gasto público (aumento de costes, restricc Controlar el gasto público (aumento de costes, restricc

económ).económ). Ajustar la eficiencia y la calidad.Ajustar la eficiencia y la calidad. Contrarrestar la desigualdad e injusticia.Contrarrestar la desigualdad e injusticia. Aumentar la aportación al desarrollo nacional.Aumentar la aportación al desarrollo nacional. Mejorar la formación de los titulados como objetivo Mejorar la formación de los titulados como objetivo

económico, social y cultural.económico, social y cultural. Mejorar los servicios ofertados por la Universidad.Mejorar los servicios ofertados por la Universidad. Derecho de los clientes/usuarios a conocerDerecho de los clientes/usuarios a conocer Proporcionar evidencia, Proporcionar evidencia, información relevante y objetiva,

de su calidad a la sociedad, como servicio público.de su calidad a la sociedad, como servicio público. Proporcionar información objetiva para la adopción deProporcionar información objetiva para la adopción de decisiones justificadas (PF, PD, PM).decisiones justificadas (PF, PD, PM). Garantizar el buen funcionamiento de una institución Garantizar el buen funcionamiento de una institución

complejacompleja..

Por qué y para qué Evaluar en la Universidad:Por qué y para qué Evaluar en la Universidad:Por qué y para qué Evaluar en la Universidad:Por qué y para qué Evaluar en la Universidad:

Page 12: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Promoción y garantía de la calidadPromoción y garantía de la calidad. Artículo 31 de la LOU

Medición del rendimiento del servicio público de la educación Medición del rendimiento del servicio público de la educación superior universitaria y la rendición de cuentas a la sociedad.superior universitaria y la rendición de cuentas a la sociedad.

La transparencia, la comparación, la cooperación y la competitividad La transparencia, la comparación, la cooperación y la competitividad de las universidades en el ámbito nacional e internacional. En un de las universidades en el ámbito nacional e internacional. En un momento de expansión de iniciativas privadas.momento de expansión de iniciativas privadas.

La mejora de la actividad docente e investigadora y de la gestión de La mejora de la actividad docente e investigadora y de la gestión de las universidades.las universidades.

La información a las administraciones públicas para la toma de La información a las administraciones públicas para la toma de decisiones en el ámbito de sus competencias.decisiones en el ámbito de sus competencias.

La información a la sociedad para fomentar la excelencia y movilidad La información a la sociedad para fomentar la excelencia y movilidad de estudiantes y profesores. En un momento de internacionalización de estudiantes y profesores. En un momento de internacionalización de la formación y flexibilización de estructuras.de la formación y flexibilización de estructuras.

La concepción global de la formación universitaria, como paquete La concepción global de la formación universitaria, como paquete integral de ofertas que compiten en el mercado.integral de ofertas que compiten en el mercado.

Constitución de Agencia Nacional y estructuras autonómicas.Constitución de Agencia Nacional y estructuras autonómicas.

Ley Orgánica de UniversidadesLey Orgánica de Universidades

Page 13: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Un cambio en los sistemas de gestión de los centros públicos de enseñanza superior

fundamentado en una mayor demanda social de:

Eficacia:Reducción de la complejidad organizacional para mejorar la prestación de servicios, la adaptación a cambios del entorno y la adopción de un compromiso ético de la institución con la mejora continua.Calidad:Sustitución de la cantidad como criterio de excelencia en las instituciones educativas. Estrategia para perseguir la mejora continua mediante el uso de herramientas adecuadas (información, planificación y evaluación de procesos).

Responsabilidad social:Rendición de cuentas y transparencia como ejercicio de información sobre cómo se utilizan los recursos, cómo se definen los procesos y qué impacto se está logrando en la sociedad.

Page 14: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

¿Cómo asegurar la calidad?

EVALUACIÓN

ACREDITACIÓN

CERTIFICACIÓN

FORMACIÓN

APOYO A LA INNOVACIÓN

FOMENTO DE LAFOMENTO DE LAMEJORA CALIDADMEJORA CALIDAD

INTERCAMBIOEXPERIENCIAS

RENDICIÓN DE CUENTAS RENDICIÓN DE CUENTAS GARANTÍA DE CALIDADGARANTÍA DE CALIDAD

Page 15: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

AGENCIAS DE LAS COMUNIDADES AUTÓNOMASAGENCIAS DE LAS COMUNIDADES AUTÓNOMAS

Agència de Qualitat Universitària de les Illes Balears (AQUIB)

Agencia Canaria de Evaluación de la Calidad y Acreditación Universitaria (ACECAU)

Agència per a la Qualitat del Sistema Universitari de Catalunya (AQU Catalunya)

Agencia para la Calidad del Sistema Universitario de Castilla y León

La Axencia para a Calidade do Sistema Universitario de Galicia (ACSUG),

Comisión Valenciana de Acreditación y Evaluación de la Calidad en el Sistema Universitario Valenciano.

Agencia de Calidad, Acreditación y Prospectiva de las Universidades de Madrid

Unidad para la Calidad de las Universidades Andaluzas

Page 16: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Agencias, Consorcios, Agencias, Consorcios, Fundaciones PúblicasFundaciones Públicas

Page 17: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

RIACESRIACES

Redes de Agencias Internacionales de Redes de Agencias Internacionales de Evaluación de la Calidad en Educación Evaluación de la Calidad en Educación SuperiorSuperior

CCoommpplleexxuuss

EEQQAA

Page 18: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Instituciones de reconocimiento Instituciones de reconocimiento PrivadosPrivados

Page 19: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Sistemas de reconocimiento Sistemas de reconocimiento PrivadosPrivados

Reconocimiento a través del Club de Gestión de Calidad

Calidad Europea: 200-400 puntos del modelo EFQM

Excelencia Europea:

(nivel de consolidación)401-500 puntos del modelo EFQM

Excelencia Europea:

(nivel de excelencia >500 puntos del modelo EFQM

Posibilidad de migración de los sellos de reconocimiento al sistema EFQM Levels of Excellence

Page 20: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

AGENCIA NACIONAL DE AGENCIA NACIONAL DE EVALUACIÓN Y EVALUACIÓN Y ACREDITACIÓNACREDITACIÓN

Fundación EstatalFundación Estatal

Page 21: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Unidad para la Calidad Unidad para la Calidad de las Universidades de las Universidades AndaluzasAndaluzas

Consorcio Público de las 8 Universidades Consorcio Público de las 8 Universidades AndaluzasAndaluzas

Page 22: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Las Relaciones de la AgenciaLas Relaciones de la Agencia

OTRAS AGENCIAS

CONSEJERÍA E y CUNIVERSIDADES

AGENCIA

Sistema Universitario

AndaluzCAU

•Evaluación/certificación de programas/unidades•Informes para contratos PDI•Informes para complementos retributivos

•Informes acreditación titulac.•E. Complementos retributivos•Colab. Contratos programa•Evaluación para PAI•Información

•Programas de formación•Apoyo Planes de Mejora•Información

Page 23: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Unidades de Calidad y Unidades de Calidad y Vicerrectorados de Vicerrectorados de CalidadCalidad

Vicerrectorado de Calidad y Planificación EstratégicaVicerrectorado de Calidad y Planificación Estratégica

Universidad de CórdobaUniversidad de Córdoba

Universidad de AlmeríaUniversidad de Almería

Universidad de JaénUniversidad de Jaén

Vicerrectorado de Planificación, Vicerrectorado de Planificación,

Calidad y EvaluaciónCalidad y EvaluaciónVicerrectorado de Calidad Vicerrectorado de Calidad

y Nuevas Tecnologíasy Nuevas Tecnologías

Page 24: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Papel de las Agencias Nacionales, Autonómicas e Papel de las Agencias Nacionales, Autonómicas e Internacionales de Evaluación y Acreditación ante Internacionales de Evaluación y Acreditación ante los nuevos retoslos nuevos retos

Principales funciones:

para promoverpromover y garantizargarantizar la calidad de las universidades Españolas, en el ámbito nacional e internacional

Evaluación,Evaluación,

Certificación,Certificación,

y Acreditación Acreditación

Las Agencias tienen como competencia la evaluación del desarrollo efectivo de estos procesos en titulaciones, servicios y profesores.

Page 25: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

- Evaluación: Dentro de la mejora continua en docencia, investigación y gestión, consiste en un examen sistemático para determinar si las acciones que conducen a la calidad se desarrollan según la planificación y si los productos o servicios se ofrecen de forma eficaz. Y, de esta forma, diagnosticar el momento presente para alcanzar los objetivos de calidad mediante la toma de decisiones.

- Acreditación: Es un proceso de evaluación que exige la superación de criterios y estándares de calidad, previamente establecidos, en las enseñanzas conducentes a la obtención de títulos universitarios de carácter oficial y validez en todo el territorio nacional y en los centros que imparten enseñanzas de acuerdo con sistemas educativos extranjeros.

- Certificación: La certificación es un proceso de evaluación externa, solicitado de forma voluntaria por la unidad a evaluar, por el que se comprueba el cumplimiento de un conjunto de especificaciones previamente establecidas. Este proceso tiene como objetivo fundamental comprobar la calidad de la unidad evaluada, así como implantar una metodología para promover la mejora continua de los programas y servicios de la Universidad.

Page 26: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Papel instrumental de las Agencias de Papel instrumental de las Agencias de

Evaluación y AcreditaciónEvaluación y Acreditación

Evaluación Institucional

Acreditación Profesorado y Títulos

Certificación

Convergencia Europea

Retos de Hogeneizar procesos de formación e instrumentos de evaluación

•Certificado de Calidad de los Servicios de Biblioteca•Mención de calidad de los programas de doctorado

•Titulaciones•Departamentos•Servicios

Page 27: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

•¿Qué ámbitos y unidades se evalúan?

TitulacióTitulaciónn

DepartamentDepartamentoo

ServicioServicio

EnseñanzaEnseñanza 1º y 2º 1º y 2º ciclosciclos

3er ciclo3er ciclo

InvestigaciInvestigaciónón

++

GestiónGestión ++ ++ ++

Page 28: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Programas de Programas de Evaluación InstitucionalEvaluación Institucional

Objetivo: proseguir la expansión de la cultura de la calidad en las instituciones, potenciando la evaluación para la mejora.

Resultado: Las titulaciones evaluadas obtienen un conjunto de recomendaciones para las mejoras correspondientes.Las titulaciones deben acreditarse cada 6 años.

Los servicios deben someterse a estos procesos.

Los profesores deben evaluarse, habilitarse y acreditarse.

Las universidades deben suscribir contratos programa para rendir cuentas de su actividad. Su financiación está condicionada por el logro de objetivos relacionados con la calidad: títulos evaluados, implantación tecnológica, proyectos de innovación, impacto de la investigación, movilidad estudiantil, potencial de inserción, tasas de fracaso…

Page 29: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Ámbito: programas no oficiales y servicios ofrecidos por las universidades.

Objetivo: garantizar que los servicios y programas universitarios cumplen unos requisitos de calidad previamente establecidos.

Resultado: obtención, o no, de un certificado de calidad.

• Mención de Calidad en los programas de Doctorado de las Universidades públicas y privadas.

• Certificado de Calidad de los Servicios de Biblioteca de las Universidades.

• Certificado de Calidad de Servicios. (O.R.I., O.T.R.I., …)

Programas de Certificación

Page 30: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Programas de Acreditación

Ámbito: de títulos oficiales y de profesores

Objetivos:

Garantizar que las titulaciones ofrecen formación útil, actualizada y de calidad.

Garantizar que los profesores están cualificados para desarrollar tareas de investigación, docencia y gestión

Implantar sistemas de incentivos personales (complementos autonómicos) e institucionales (contratos programa dotados de financiación)

Page 31: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Aspectos relevantes del Modelo Aspectos relevantes del Modelo

Institucional Voluntariedad Transitoria Debe ser formativa Modelo de autorregulación: componente

interna y externa Información cuantitativa y cualitativa.

Análisis Participación de todos los agentes implicados Metodología homogénea (criterios comunes)

y orientadora (Guías) Encuestas y otros instrumentos comparables Entrevistas y Audiencias Adaptable a cada Unidad de Evaluación Transparencia del proceso. Consenso.

Page 32: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Presupuestos del Modelo General de Evaluación de Calidad

1. Considerar al cliente como un punto de referencia.

2. Promover la mejora continua de todos los procesos y actividades. Evaluación Diagnóstica orientada a la mejora: p. fuertes, p.débiles y mejoras.

3. Fomentar el desarrollo e implicación del PDI i el PAS como activos mas importantes de la organización.

4. Considerar la completa implicación de todos los servicios, centros y departamentos en la mejora de la calidad.

5. Documentar las valoraciones con evidencias usando diferentes fuentes de información.

Page 33: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

•¿Qué modelo de evaluación se utiliza?– Modelo de autorregulaciónModelo de autorregulación

Autoevaluación y evaluación externaAutoevaluación y evaluación externa

– Previo aPrevio a AcreditaciónAcreditación CertificaciónCertificación

– Juicios de personal de la unidad y de Juicios de personal de la unidad y de expertos externos expertos externos

– Análisis cualitativos e indicadores y Análisis cualitativos e indicadores y valoraciones cuantitativasvaloraciones cuantitativas

– Orientación a la mejora continua (formativa) Orientación a la mejora continua (formativa) con componentes sumativas (transparencia con componentes sumativas (transparencia informativa)informativa)

– Preorientación Sumativa o de decisión Preorientación Sumativa o de decisión (acreditaciones y certificaciones)(acreditaciones y certificaciones)

– Modelo participativoModelo participativo

Page 34: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

El proceso de El proceso de autorreflexiónautorreflexión realizado por un Comité de realizado por un Comité de propia unidad que, siguiendo las pautas marcadas por propia unidad que, siguiendo las pautas marcadas por la guía de autoevaluación,la guía de autoevaluación, y y apoyado por la opinión de apoyado por la opinión de expertosexpertos externos, externos, realiza un realiza un análisis crítico de la análisis crítico de la mismamisma

Filosofía del Modelo¿Qué es la autorregulación?

• VENTAJAS: Mejor conocimiento del funcionamiento de la unidad Mejor aceptación por la unidad, por lo que asegura

• Obtención de datos más válidos• Confianza en el uso efectivo de los resultados

Fortalecimiento del compromiso de la unidad

• DESVENTAJAS: Mayor tendencia a la autocomplacencia (autosatisfacción) Más condicionados (equipos de gobierno, compañeros…)

AUTOEVALUACIÓN METAEVALUACIÓN EXTERNA

Page 35: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

¿Qué fases?: (responsables)¿Qué fases?: (responsables)– Evaluación interna (CIE)Evaluación interna (CIE)– Evaluación externa (CEE)Evaluación externa (CEE)Informe Final de Evaluación de la Informe Final de Evaluación de la

Unidad (CIE)Unidad (CIE)Informe de la Calidad de la Universidad (C. Informe de la Calidad de la Universidad (C.

Calidad Universidad)Calidad Universidad)Informe de la Calidad de las Informe de la Calidad de las

Universidades AndaluzasUniversidades Andaluzas (UCUA) (UCUA)

•¿Qué modelo de evaluación se utiliza (II)?

Page 36: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Comité InternoComité Interno Comité externoComité externo

Autoinforme

Informe externo

VisitaEntrevistas

Informe

Final Unidad

Las fases de la autorregulación

Análisis

Mejora Seguimiento

Acreditación

Aseguramiento calidad

Page 37: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Fases Fases del proceso de evaluación

Planificación.Planificación. Autoevaluación.Autoevaluación. Evaluación externa.Evaluación externa. Informe final y plan de mejoras. Informe final y plan de mejoras.

Cada fase tiene sus etapas con sus Cada fase tiene sus etapas con sus respectivos responsables respectivos responsables asociados asociados

Page 38: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

LA UCUA Y EL PACU. marzo 2002. M. BarbanchoLA UCUA Y EL PACU. marzo 2002. M. Barbancho

Recogida de información

Valoración de la información

Redacción del Autoinforme

Redacción del Informe deEvaluación Externa

Recogida de información Proporcionada, demandada y percibida

FASE FINAL: Informe Final: PLAN DE MEJORA

FASE INTERNA:Autoevaluación

FASE EXTERNA:Evaluación por pares

?

Valoración de la información

•Modelo de autorregulación

Page 39: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Comité de AutoevaluaciónComité de Autoevaluación

COMPOSICIÓN

DEL COMITÉ

COMPOSICIÓN

DEL COMITÉ

MOTIVACIÓNMOTIVACIÓN

PLANTEAMIENTO DE OBJETIVOS

DE LA EVALUACIÓN

PLANTEAMIENTO DE OBJETIVOS

DE LA EVALUACIÓN

- ¿CUÁNTOS LO FORMAN? - ¿QUIÉNES LO FORMAN? EQUILIBRIO .- ¿ELEGIDOS, DESIGNADOS, CONSENSUADOS?

- ¿QUIÉN HA DECIDIDO LA EVALUACIÓN?- ¿EXISTE UNA “CULTURA DE EVALUACIÓN” EN EL CENTRO, SERVICIO, INSITUCIÓN?- PERCEPCIÓN POR EL COMITÉ DEL SIGNIFICADO Y ALCANCE DE LA EVALUACIÓN- FORMACIÓN METODOLÓGICA

- GENERACIÓN DE PROPUESTAS DE MEJORA- CONTROL DE CALIDAD Y RENDIMIENTO DE CUENTAS

Page 40: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Composición del Comité de Composición del Comité de AutoevaluaciónAutoevaluación

Presidente (responsable del Servicio).Presidente (responsable del Servicio).

Representante con responsabilidad Representante con responsabilidad directiva.directiva.

Representante del personal sin Representante del personal sin responsabilidad directiva. responsabilidad directiva.

Representantes de los usuarios.Representantes de los usuarios.

Page 41: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Tareas previas de los miembros del CATareas previas de los miembros del CA

Conocer la finalidad y la metodología para evaluar la calidad de la Titulación.

Estar informado de la función y las tareas a realizar como miembro del Comité.

Estudiar y analizar la Guía de autoevaluación.

Promover la participación y el consenso.

Page 42: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Funciones del Comité de Funciones del Comité de AutoevaluaciónAutoevaluación

Diagnóstico de la Unidad siguiendo una Diagnóstico de la Unidad siguiendo una guía.guía.

Cumplimentación de los perfiles de calidad.Cumplimentación de los perfiles de calidad.

Elaboración del Informe de Autoevaluación.Elaboración del Informe de Autoevaluación.

Actuación de interlocutor con el Comité de Actuación de interlocutor con el Comité de Evaluación Externa.Evaluación Externa.

Elaboración del Informe Final de Evaluación Elaboración del Informe Final de Evaluación del Servicio. del Servicio.

Page 43: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Aplicación del Modelo a un Servicio Universitario: Aplicación del Modelo a un Servicio Universitario:

Biblioteca UniversitariaBiblioteca Universitaria

Problemas:Problemas:

- Concepto de Concepto de Unidad de Unidad de EvaluaciónEvaluación

- Concepto de Concepto de Usuarios del ServicioUsuarios del Servicio

- Agentes Agentes involucradosinvolucrados

- Magnitud y Magnitud y volumen de la volumen de la AutoevaluaciónAutoevaluación

- Influencias Influencias externas derivadas externas derivadas el Contexto de el Contexto de Cambio EEESCambio EEES

Page 44: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

LiderazgoLiderazgo ProcesosProcesosResultados Resultados

claveclave

PersonasPersonas

Política y Política y

estrategiaestrategia

Alianzas y Alianzas y estrategiasestrategias

ResultadosResultados

en clientesen clientes

ResultadosResultados

en personasen personas

Resultados Resultados

en en sociedadsociedad

ResultadosResultados

Innovación y aprendizajeInnovación y aprendizaje

Agentes facilitadoresAgentes facilitadores

Modelo EFQMModelo EFQM

Page 45: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

CRITERIOS

AGENTES FACILITADORE

S

RESULTADOS

1. Liderazgo2. Política

y estrategia

3. Personas

4. Alianzas

y recursos5. Procesos

6. Resultados en los

clientes

7. Resultados en las

personas

8. Resultados en la

sociedad

9. Resultados clave

0. Evolución y contexto actual

Page 46: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Cómo la evolución y contexto actual del Cómo la evolución y contexto actual del Servicio ayudan a explicar la trayectoria Servicio ayudan a explicar la trayectoria histórica y situación actual del mismo. histórica y situación actual del mismo.

SUBCRITERIOS:SUBCRITERIOS:

- Acontecimientos y cambios - Acontecimientos y cambios importantes. importantes.

- Política y situación actual. - Política y situación actual.

0. Evolución y contexto 0. Evolución y contexto actualactual

Page 47: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

1. Liderazgo1. Liderazgo

Hace referencia al grado de compromiso Hace referencia al grado de compromiso visible de los dirigentes y responsables visible de los dirigentes y responsables de distinto nivel en la creación y uso de de distinto nivel en la creación y uso de valores y estrategias de gestión integral valores y estrategias de gestión integral de la calidad.de la calidad.

SUBCRITERIOS:SUBCRITERIOS:

- Definición de la estrategia del Servicio.- Definición de la estrategia del Servicio.

- Actividades de mejora de la calidad. - Actividades de mejora de la calidad.

- Reconocimiento de los esfuerzos del - Reconocimiento de los esfuerzos del personal para la mejora.personal para la mejora.

- Comunicación con diversos grupos de - Comunicación con diversos grupos de interés. interés.

Page 48: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Cómo implanta el Servicio su misión y Cómo implanta el Servicio su misión y visión mediante una estrategia visión mediante una estrategia claramente centrada en todos los grupos claramente centrada en todos los grupos de interés y apoyada por políticas, planes, de interés y apoyada por políticas, planes, objetivos, metas y procesos relevantes. objetivos, metas y procesos relevantes.

SUBCRITERIOS:SUBCRITERIOS:- Recogida de información relevante. - Recogida de información relevante. - Planificación de objetivos de mejora. - Planificación de objetivos de mejora. - Aseguramiento o garantía del logro de - Aseguramiento o garantía del logro de los los objetivos de calidad. objetivos de calidad. - Recursos disponibles. - Recursos disponibles. - Coordinación entre el Servicio y la - Coordinación entre el Servicio y la estrategia estrategia general de la Universidad. general de la Universidad.

2. Política y estrategia2. Política y estrategia

Page 49: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

3. Personas3. Personas

Evalúa cómo se fortalece y desarrolla la Evalúa cómo se fortalece y desarrolla la posición del personal, y cómo se posición del personal, y cómo se promueve su participación en la promueve su participación en la consecución de mejoras mediante la consecución de mejoras mediante la comunicación y la responsabilidad comunicación y la responsabilidad compartida.compartida.

SUBCRITERIOS:SUBCRITERIOS:

- - Planificación de la gestión del personal. Planificación de la gestión del personal.

- Implicación y asignación de - Implicación y asignación de responsabilidades. responsabilidades.

- Comunicación entre el equipo directivo y - Comunicación entre el equipo directivo y el el personal. personal.

Page 50: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Cómo planifica y gestiona el Servicio sus Cómo planifica y gestiona el Servicio sus alianzas externas y sus recursos internos alianzas externas y sus recursos internos en apoyo de su política y estrategia, y del en apoyo de su política y estrategia, y del eficaz funcionamiento de sus procesos.eficaz funcionamiento de sus procesos.

SUBCRITERIOS:SUBCRITERIOS:

- Información disponible para la toma de - Información disponible para la toma de decisiones. decisiones.

- Alianzas estratégicas. - Alianzas estratégicas.

- Asignación, control y optimización de - Asignación, control y optimización de recursos. recursos.

- Nuevas tecnologías. - Nuevas tecnologías.

- Gestión del conocimiento. - Gestión del conocimiento.

4. Alianzas y recursos4. Alianzas y recursos

Page 51: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

5. Procesos5. Procesos

Cómo diseña, gestiona y mejora el Cómo diseña, gestiona y mejora el Servicio sus procesos para apoyar su Servicio sus procesos para apoyar su política y estrategia y para satisfacer política y estrategia y para satisfacer plenamente, generando cada vez mayor plenamente, generando cada vez mayor valor, a sus clientes y otros grupos de valor, a sus clientes y otros grupos de interés. interés.

SUBCRITERIOS:SUBCRITERIOS:

- Identificación de procesos clave. - Identificación de procesos clave.

- Seguimiento y control de los procesos. - Seguimiento y control de los procesos.

- Desarrollo de nuevos servicios. - Desarrollo de nuevos servicios.

- Auditorías y evaluación de los sistemas - Auditorías y evaluación de los sistemas de de gestión. gestión.

Page 52: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Qué logros está alcanzando el Servicio Qué logros está alcanzando el Servicio en relación con sus clientes y usuarios. en relación con sus clientes y usuarios.

SUBCRITERIOS:SUBCRITERIOS:

- Mediciones sistemáticas de la - Mediciones sistemáticas de la satisfacción. satisfacción.

- Difusión y uso de los resultados. - Difusión y uso de los resultados.

- Revisión y mejora de los - Revisión y mejora de los procedimientos. procedimientos.

6. Resultados en los 6. Resultados en los clientesclientes

Page 53: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

7. Resultados en las 7. Resultados en las personaspersonas

Qué logros está alcanzando el Servicio en Qué logros está alcanzando el Servicio en relación con las personas que lo integran.relación con las personas que lo integran.

SUBCRITERIOS:SUBCRITERIOS:

- Mediciones sistemáticas de la - Mediciones sistemáticas de la satisfacción satisfacción del personaldel personal. .

- Difusión y uso de los resultados. - Difusión y uso de los resultados.

- Revisión y mejora de los procedimientos. - Revisión y mejora de los procedimientos.

Page 54: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Qué logros está alcanzando el Servicio Qué logros está alcanzando el Servicio en la sociedad, a nivel local, nacional e en la sociedad, a nivel local, nacional e internacional (según resulte pertinente).internacional (según resulte pertinente).

SUBCRITERIOS:SUBCRITERIOS:

- Análisis de la demanda social. - Análisis de la demanda social.

- Actividades de impacto. - Actividades de impacto.

- Análisis del impacto. - Análisis del impacto.

- Revisión y mejora de los - Revisión y mejora de los procedimientos. procedimientos.

8. Resultados en la 8. Resultados en la sociedadsociedad

Page 55: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

9. Resultados clave9. Resultados clave

Qué logros está alcanzando el Servicio Qué logros está alcanzando el Servicio con relación al rendimiento planificado.con relación al rendimiento planificado.

SUBCRITERIOS:SUBCRITERIOS:

- Resultados de los principales servicios - Resultados de los principales servicios prestados. prestados.

- Resultados de los procesos de soporte. - Resultados de los procesos de soporte.

- Difusión y uso de los resultados. - Difusión y uso de los resultados.

- Revisión y mejora de los - Revisión y mejora de los procedimientos. procedimientos.

Page 56: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Guía de evaluación Guía de evaluación

Ayuda para la elaboración del Informe de Ayuda para la elaboración del Informe de Autoevaluación por parte del Comité de Autoevaluación por parte del Comité de Autoevaluación. Autoevaluación.

Para cada uno de los 9+1 criterios:Para cada uno de los 9+1 criterios:- Explicación general y definición.- Explicación general y definición.- Subcriterios. Preguntas y cuestiones de - Subcriterios. Preguntas y cuestiones de interés.interés.- Valoración crítica: puntos fuertes, débiles y - Valoración crítica: puntos fuertes, débiles y sugerencias de mejora. sugerencias de mejora. - Documentación de referencia. - Documentación de referencia.

Page 57: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Tabla de administración 1Tabla de administración 1TABLAS DE ADMINISTRACIÓN

Universidad de Granada

TABLA 1. DATOS GENERALES DE LA UNIVERSIDAD

DATOS DE LA UNIVERSIDAD 2001 2002Nº de Centros de Enseñanza 28 (*) 28 (*)Nº de Departamentos 102 109Nº de Servicios Universitarios 29 29Nº de Unidades Administrativas 47 47

Total estudiantes en titulaciones de ciclo corto 17879 17465Total estudiantes en titulaciones de ciclo largo 40554 39458Total estudiantes en titulaciones de 2º ciclo 2626 2789Total estudiantes de doctorado 2530 2816

Total Personal Académico 3249 3320Total Personal Administración y Servicios 1974 2004Total de superficie construida en la Universidad

Ingresos de la Universidad (presupuesto liquidado a 31 Diciembre) 252.054.072 258.146.664

Inversiones anuales de la Universidad 33.850.654

a x = datos del curso anterior al que se realiza la evaluación; x-1 = datos de dos cursos anteriores al que se realiza la evaluaciónb Los datos de este apartado se darán por año natural, no por curso escolar

CURSOS ACADEMICOS a

TITULACIONES HOMOLOGADAS

RECURSOS

GASTOS b ( a 31 de diciembre )

Page 58: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Tabla de Tabla de administración 2administración 2Nombre del Servicio

TABLA2. DATOS GENERALES DEL SERVICIO

UNIDADES DEL SERVICIONº de unidades o subunidadesNº de puntos de servicio

FuncionariosLaboralesContratados temporalesBecarios y otrosCoste del Personal del Servicio

Nº de usuarios potencialesNº de usuarios activos

Tipo de usuarios b

(a) Alumnos de 1º ciclo (b) Alumnos de 2º ciclo (c) Alumnos de 3º ciclo (d) Personal de administración y servicios (e) Personal docente e investigador (e) Otros (especificar)

Total de ingresos propios generados por el Servicio

Total de ingresos de aportación externa al Servicio c

(a) Donaciones (b) Subvenciones (c) Presupuesto de la Universidad (d) Otros conceptos

Gasto en personalGasto corriendoGasto de inversionesGasto de mantenimientoOtros gastos

a x, x-1 tienen el mismo significado que en la tabla 1b Nº total de usuarios, sumando el desglose de los apartados (a) a (f).c Cuantía total de ingresos, sumando el desglose de los apartados (a) a (d).

TOTAL INGRESOS

PRESUPUESTO DE GASTO DEL SERVICIO

TOTAL GASTOS

CURSOS ACADEMICOS a

PERSONAL DEL SERVICIO

USUARIOS

PRESUPUESTO DE INGRESOS DEL SERVICIO

Page 59: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Tabla de administración 3Tabla de administración 3TABLA3. PERSONAS DEL SERVICIO

PERSONAL POR CATEGORIASFuncionarios AFuncionarios BFuncionarios CFuncionarios DFuncionarios ELaborales ILaborales IILaborales IIILaborales IVLaborales VOtros (sin especificar)

DirectivasTécnicasTécnicas/AuxiliaresAuxiliares

Con contrato temporalNº de horas en contratos temporalesCon contrato fijoCon contrato a tiempo parcialCon dedicación en jornada partida

Inferior o igual a 5 añosEntre 6 y 10 añosEntre 11 y 15 añosIgual o superior a 16 años

Mayor de 50 añosEntre 30 y 50 añosMenor de 30 años

PERSONAL POR ANTIGÜEDAD EN EL SERVICIO

TOTAL GASTOS

PERSONAL POR FUNCIONES

CURSOS ACADEMICOS a

TOTAL DE PERSONAL ADSCRITO AL SERVICIO

PERSONAL POR TIPO DE CONTRATO Y DEDICACIÓN

Page 60: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Tabla de administración 3bTabla de administración 3bNIVEL DE TITULACIÓN DEL PERSONAL LicenciadosDiplomadosFormación ProfesionalBachiller / COUGraduado Escolar

Nº total de cursos ofertados al personal del ServicioNº total de asistentes a cursosNº de cursos específicos ofertados al personal del ServicioNº de asistentes a cursos de formación específicosNº de cursos generales ofertados al personal del ServicioNº de asistentes a cursos de formación generalesNº total de tipos de cursos diferentes impartidosNº total de horas de formación recibida

Nº total de cursos a los que se ha asistidoNº total de asistentes a cursosNº de tipos cursos diferentes a los que se ha asistidoNº total de horas de formación recibida

x

x-1

a x, x-1 tienen el mismo significado que en la tabla 1

SISTEMAS DE RECONOCIMIENTO DEL DESEMPEÑO (descripción y año de implantación)

CURSOS ACADEMICOS a

FORMACIÓN INTERNA DEL PERSONAL

FORMACIÓN EXTERNA DEL PERSONAL

Page 61: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Tabla de administración 4Tabla de administración 4TABLA4. ALIANZAS Y RECURSOS

ALIANZAS (acuerdos de colaboración interna y externa, descripción y año de comienzo)

Superficie útil total (m2)Superficie destinada al personal (m2)Superficie destinada al usuario (m2)Superficie de almacenamiento de materiales (m2)

DespachosSala de reunionesSalas de seminariosOtros (especificar)

Superficie destinada al personal / Nº personasSuperficie destinada al ususario / Nº usuariosNº de personal / Nº de ordenadoresNº de usuarios / Nº de audiovisualesTiempo de pago a proveedores

a x, x-1 tienen el mismo significado que en la tabla 1

EQUIPAMIENTOS (MOVILIARIOS Y OTROS)

RECURSOS INFORMÁTICOS Y AUDIOVISUALES

INDICADORES

CURSOS ACADEMICOS a

ESPACIOS

INSTALACIONES (LAS QUE PROCEDAN)

Page 62: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Tabla de administración 5Tabla de administración 5

Nombre del Servicio:Nombre de la Unidad:

TABLA5. MAPA DE PROCESOS DEL SERVICIO

Proceso:¿Existe un manual? SI NO

Cuando se ejecuta la etapa

Etapas de la ejecución o de la

prestación

Quién decide

Quién ejecuta

Quién es responsable

Medio de ejecución

Tiempo de ejecución

Método de evalución del desempeño

Método de evaluación de la

satisfación del usuario

Page 63: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Tabla de administración 6Tabla de administración 6

TABLA6. RESULTADOS EN LOS CLIENTES

INDICADORESNº de días de apertura (anual)Nº de días de apertura (semanal)Nº de clientes o usuariosNº de bajas voluntarias (si procede)Nº de felicitaciones recibidasPremios o distinciones conseguidasNº de entrevistas personales con clientes o usuariosNº de incidencias, quejas y reclamacionesTiempo de respuesta medio a las quejas y reclamacionesNº de rectificaciones realizadas / Nº quejasNº de sugerencias puestas en marca / Total sugerencias

a x, x-1 tienen el mismo significado que en la tabla 1

CURSOS ACADEMICOS a

Page 64: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Informe de Autoevaluación Informe de Autoevaluación (I)(I)

Contiene la valoración de la calidad de la Contiene la valoración de la calidad de la gestión y el rendimiento del Servicio. gestión y el rendimiento del Servicio.

Basado en evidencias, participación, Basado en evidencias, participación, consenso y publicidad.consenso y publicidad.

EstructuraEstructura

- Índice.- Índice.

- Presentación del Servicio y del CA.- Presentación del Servicio y del CA.

- Epígrafe para cada criterio (PF, PD y PM).- Epígrafe para cada criterio (PF, PD y PM).

- Anexos (tablas, encuestas, otros - Anexos (tablas, encuestas, otros documentos).documentos).

- Tabla resumen con PF, PD y PM. - Tabla resumen con PF, PD y PM.

Page 65: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Tablas de administración.Tablas de administración.

Tablas EFQM (según criterios y Tablas EFQM (según criterios y subcriterios)subcriterios)

Tablas resumen EFQM. Tablas resumen EFQM. Tablas sobre la madurez del Servicio. Tablas sobre la madurez del Servicio. Modelos de encuesta.Modelos de encuesta.

- Satisfacción del usuario. - Satisfacción del usuario.

- Satisfacción del personal. - Satisfacción del personal.

Informe de Autoevaluación Informe de Autoevaluación (II)(II)

Page 66: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Informe Final de EvaluaciónInforme Final de Evaluación

Síntesis del Informe de Autoevaluación Síntesis del Informe de Autoevaluación y del Informe de Evaluación Externa. y del Informe de Evaluación Externa.

Estructura:Estructura:

- Introducción: descripción general del - Introducción: descripción general del proceso de evaluación y proceso de evaluación y

descripción descripción breve de los resultados breve de los resultados de cada criterio. de cada criterio.

- Valoración del proceso de evaluación. - Valoración del proceso de evaluación.

- Puntos fuertes y débiles. - Puntos fuertes y débiles.

- Acciones estratégicas de mejora. - Acciones estratégicas de mejora.

Page 67: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Explicitar y Definir el Sistema de Gestión

PROCESOS ESTRATÉGICOS

PROCESOS CLAVE

PROCESOS DE SOPORTE

MEDICIÓN, ANÁLISIS Y

MEJORA

SISTEMA GESTION CALIDAD

EVALUACIÓN PROVEEDORES MANTENIMIENTO

PROCESO TÉCNICO

CONSULTA EN SALA O RED

PRESTAMOTELEPRESTAMO

ADQUISICIONES - INGRESOS

FORMACION PERSONAL

GESTIÓN ECONÓMICA

Page 68: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

¿EN QUÉ MEDIDA ESTÁN IMPLICADAS LAS BIBLIOTECAS UNIVERSITARIAS EN LA

CONSTRUCCIÓN DEL NUEVO EEES?

Los nuevos métodos de enseñanza y aprendizaje impuestos por la Declaración de

Bolonia repercutirán directamente en un mayor uso de la Biblioteca por parte de profesores y alumnos y en la demanda de

nuevos servicios de Biblioteca.

Bolonia y las Bibliotecas. Adecuación de los servicios a los cambios externos del Contexto

Page 69: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Estudios contemporáneos de Estudios contemporáneos de uso, comportamiento y uso, comportamiento y asesoramientoasesoramiento

Cuando se hacen búsquedas en Cuando se hacen búsquedas en Revistas con fines de investigación:Revistas con fines de investigación:

Fuente. Digital Library Federation and Council on Library and InformationResources. (2002). Dimensions and Use of the Scholarly Information Environment.

• Only Only 13.9%13.9% ask a librarian for assistance ask a librarian for assistance• Only Only 3.2%3.2% consider consulting a librarian a preferred consider consulting a librarian a preferred way of identifying information way of identifying information

Page 70: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Facilities Usage: University of Facilities Usage: University of TexasTexas

Entrance Statistics - UT Austin Libraries 1991-Entrance Statistics - UT Austin Libraries 1991-20032003

0

1.000.000

2.000.000

3.000.000

4.000.000

5.000.000

6.000.000

Page 71: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Printed Book Circulation:Printed Book Circulation:

Fuente. M. Kyrillidou and M. Young. (2002).ARL Statistics 2000-01. Washington, D.C.: ARL, p.7.

Page 72: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Disminución de CatalogacionesDisminución de Catalogaciones

Fuente. M. Kyrillidou and M. Young. (2002).ARL Statistics 2000-01. Washington, D.C.: ARL, p.7.

Page 73: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Searches for Online Journals: Searches for Online Journals: University of TexasUniversity of Texas

UT Austin Libraries 2002-2004 MonthlyUT Austin Libraries 2002-2004 Monthly

0

10.000

20.000

30.000

40.000

50.000

60.000

Page 74: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Web Usage: University of Web Usage: University of TexasTexas

Total File Requests - UT Austin Libraries 2000-Total File Requests - UT Austin Libraries 2000-20032003

0

100.000.000

200.000.000

300.000.000

400.000.000

500.000.000

600.000.000

700.000.000

800.000.000

900.000.000

2000 2001 2002 2003

Total Hits

Page 75: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Aplicar Sistemas de Garantía y Aplicar Sistemas de Garantía y

Aseguramiento de la CalidadAseguramiento de la Calidad

ISO

EFQM

GUÍA PARA LA MENCIÓN DE

CALIDAD DE LA ANECA

GUÍA DE EVALUACIÓN

DE BIBLIOTECAS

MEC /ANECA

AGENCIAS REGIONALES DE

CALIDAD

UNIVERSIDADES

BIBLIOTECAS UNIVERSITARIAS

GUÍA DE EVALUACIÓN

DE BIBLIOTECAS DE LA ACUA

BIBLIOTECA en el

Contexto

de Cambio de la Sociedad

del Conocimiento

Page 76: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Por qué el modelo EFQM??Por qué el modelo EFQM??

MODELO EFQM:Examen global, sistemático y regular de las actividades y resultados de una organización, comparándolos con un Modelo de Referencia (EFQM Excellence Model)

Diagnóstico de la excelencia en la gestión Identificación de Puntos Fuertes y Áreas de Mejora Soporte a la definición de Planes de Acción Base objetiva de comparación con otras organizaciones externas a la Universidad o internas Medida de la progresión en el tiempo Formación e Implicación del personal de la Biblioteca Opción a presentación a un Reconocimiento externo (Sellos CGC, EFQM Levels of Excellence, etc.)

Page 77: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Por qué algunas bibliotecas se Por qué algunas bibliotecas se han apoyado en Herramientas han apoyado en Herramientas Externas y Empresas Externas Externas y Empresas Externas El caso del Proyecto PERFIL?El caso del Proyecto PERFIL? Programa automatizado de gestión de evaluaciones de servicios universitarios Avalado por el Club de Gestión de Calidad Posibilita recopilar los datos de la evaluación conforme al

modelo EFQM en modo de base de datos sin necesidad de elaborar un informe de manera conjunta

Posibilita la participación –si se desea- de todo el personal de la biblioteca

Permite asignar puntuaciones a cada uno de los subcriterios y criterios conforme al modelo EFQM

Gestiona el consenso entre los participantes de la evaluación Homologado por el CGC como herramienta de evaluación

conducente al reconocimiento de sello de excelencia europeo

Page 78: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

¿Cómo funciona el Programa ¿Cómo funciona el Programa PERFIL?PERFIL?

Correlación Preguntas - Criterios y SubcriteriosCada Subcriterio se subdivide a su vez en una o varias preguntas

Cada pregunta está específicamente dirigida a averiguar el grado de aplicación en la organización de alguna de las recomendaciones del Modelo en dicho Subcriterio específico

Criterios de PonderaciónAdicionalmente a los propios criterios de ponderación establecidos en el Modelo para cada uno de los Criterios (1,0 para Liderazgo, 0,8 para Política y Estrategia, etc.), cada pregunta puede tener una ponderación específica dentro del Subcriterio en que se encuentra

SugerenciasLa aplicación aporta sugerencias ilustrando las preguntas del Cuestionario, facilitan la contestación del mismo, y permiten incorporar términos sectoriales sin mermar la objetividad ni la universalidad de las preguntas

Evaluación basada en un cuestionario y en puntuaciones: Respuesta a una relación de preguntas (50 o 120) clasificadas según los Criterios del Modelo EFQM de Excelencia, de acuerdo a unos baremos preestablecidos

Page 79: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Evaluador

Evaluador

Evaluador

Evaluador

Coordinador AdministradorPERFIL

EVALUACIÓN DE LA BIBLIOTECA

GESTIÓN DEL CONSENSO

GESTIÓN DE LA APLICACIÓN PERFIL

Page 80: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación
Page 81: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación
Page 82: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación
Page 83: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación
Page 84: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación
Page 85: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación
Page 86: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación
Page 87: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación
Page 88: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

1 2 3

Page 89: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

1 2 3 4 5 6 7 8 9

Page 90: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

1 ∞

Page 91: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Quality Measure

Qua

ntit

y M

easu

re

+

+

– Quality Measure

Qua

ntit

y M

easu

re

+

+

– –

Modelos Híbridos Cuanti-Modelos Híbridos Cuanti-CualitativosCualitativos

Page 92: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Desarrollo del Proyecto

Fases de implantación del Sistema de Gestión de la Calidad de la Biblioteca

• Fase I. Liderazgo de la dirección y diagnóstico previo

• Fase II. Formación

• Fase III. Desarrollo del Sistema de Gestión de la Calidad

• Fase IV. Certificación

• Fase V. Mantenimiento de la Certificación.

Page 93: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Fase I. Liderazgo de la dirección y diagnóstico previo.

• Definición Grupo liderazgo y Grupo base

• Diagnóstico situación actual y plan de actividades

• Definición de la matriz de responsabilidades y cronogramas

Desarrollo del Proyecto

Page 94: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Desarrollo del Proyecto

Fase III. Desarrollo del Sistema de Gestión de la Calidad

• Preparación de la documentación: Manual, procedimientos generales, fichas de proceso y documentos propios.

• Implantación de la actividad operativa.

• Auditoria interna.

• Revisión del Sistema.

Page 95: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Fase IV. Certificación

• Petición de Certificación y envío de la documentación

• Visita previa y ajustes del Sistema de Gestión de la Calidad

• Auditoria y ajustes del Sistema de Gestión de la Calidad

• Obtención del certificado (Marzo de 2005)

Desarrollo del Proyecto

Page 96: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Fase V. Mantenimiento de la Certificación.

• Plan de mejora 2005-06

• Programación de actividades mediante calendario con instrumentos de seguimiento sistemático

Desarrollo del Proyecto

Page 97: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

¿Por qué hemos optar por la norma ISO 9001:2000?

• Involucra al personal, la dirección y los proveedores en la definición de un sistema de gestión.

• Garantiza que los procesos son medidos, analizados y mejorados.

• Evalúa sistemáticamente los proveedores y la satisfacción de clientes.

• Certifica con una norma internacional un sistema de gestión.

• Se crea un sistema de información estable en el que se documentan todos los procesos.

Conclusiones

Page 98: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Proyectos de Mejora-Contratos Proyectos de Mejora-Contratos Programa. ¿Qué son?Programa. ¿Qué son?

Son instrumentos de participación Son instrumentos de participación constante de la calidadconstante de la calidad

Su actuación se sustenta en el Su actuación se sustenta en el reconocimiento de que la calidad reconocimiento de que la calidad es competencia de todoses competencia de todos

Quienes mejor conocen los Quienes mejor conocen los procesos de trabajo son quienes procesos de trabajo son quienes los realizanlos realizan

Page 99: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

GRUPOS DE MEJORA GRUPOS DE MEJORA Reglas de Reglas de funcionamientofuncionamiento

CONSENSOCONSENSO ESCUCHAR ACTIVAMENTEESCUCHAR ACTIVAMENTE PREPARAR LAS REUNIONESPREPARAR LAS REUNIONES PUNTUALIDAD INICIAL Y FINALPUNTUALIDAD INICIAL Y FINAL TODOS PARTICIPANTODOS PARTICIPAN CREATIVIDAD E INNOVACIÓNCREATIVIDAD E INNOVACIÓN ABIERTOS A NUEVAS IDEASABIERTOS A NUEVAS IDEAS TODO SE REFELEJA EN ACTASTODO SE REFELEJA EN ACTAS DEBE HABER UN LIDERAZGODEBE HABER UN LIDERAZGO

Page 100: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

GRUPOS DE MEJORA. GRUPOS DE MEJORA. Método de trabajoMétodo de trabajo

Responsabilidad del GRUPOResponsabilidad del GRUPO Definición clara del objetivo Definición clara del objetivo Entrevistas a usuarios y recogida de datosEntrevistas a usuarios y recogida de datos Dibujo detallado del proceso-mapasDibujo detallado del proceso-mapas Análisis de las causas y desarrollo de Análisis de las causas y desarrollo de

solucionessoluciones Comparación con líderesComparación con líderes Presentación de conclusiones a Equipo de Presentación de conclusiones a Equipo de

Gestión del Centro y ComunidadGestión del Centro y Comunidad Informe final y plan de acciónInforme final y plan de acción Responsabilidad de la UNIDADResponsabilidad de la UNIDAD Implementación de las solucionesImplementación de las soluciones Evaluación y ajustesEvaluación y ajustes

Page 101: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

GRUPOS DE GRUPOS DE MEJORA. MEJORA.

Programa de calidad institucionalPrograma de calidad institucional Grupos de mejora tras Grupos de mejora tras

AutoevaluaciónAutoevaluación 2 ó 3 por año 2 ó 3 por año Coordinados por la Unidad de Coordinados por la Unidad de

CalidadCalidad Formación a cargo de la Institución Formación a cargo de la Institución Reconocimiento institucional a Reconocimiento institucional a

participantesparticipantes

Page 102: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

GRUPOS DE MEJORA. GRUPOS DE MEJORA. Algunos ejemplos (1)Algunos ejemplos (1)

Mejora del PréstamoMejora del Préstamo Atención de incidencias de mantenimiento Atención de incidencias de mantenimiento Información en aularios Información en aularios Pago de proyectos de investigaciónPago de proyectos de investigación Pago de conferencias, dietas y traslados Pago de conferencias, dietas y traslados Información previa a la matrículaInformación previa a la matrícula Difusión de programas de doctoradoDifusión de programas de doctorado Tramitación de convalidacionesTramitación de convalidaciones Compras con fondos de ProyectosCompras con fondos de Proyectos Gestión del correo electrónicoGestión del correo electrónico Gestión de Erasmus a la cartaGestión de Erasmus a la carta

Page 103: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

GRUPOS DE MEJORA. GRUPOS DE MEJORA. Algunos ejemplos (2)Algunos ejemplos (2)

Organización y gestión de PrácticasOrganización y gestión de Prácticas Mejora del Servicio de ReprografíaMejora del Servicio de Reprografía Solapamiento de contenidos de Solapamiento de contenidos de

asignaturasasignaturas Resolución de incidencias en Aulas Resolución de incidencias en Aulas

InformáticasInformáticas ::::::::::::::::::::::::::::

Page 104: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

GRUPOS DE TRABAJO GRUPOS DE TRABAJO EN BIBLIOTECAEN BIBLIOTECA

1.1. Mejora de Proceso Mejora de Proceso técnico-Web/Prestamostécnico-Web/Prestamos

2.2. Mejora de envío de documentación Mejora de envío de documentación electrónica a profesoreselectrónica a profesores

3.3. Mejora de la IntranetMejora de la Intranet4.4. Mejora de la integración del Mejora de la integración del

sistema de gestión contablesistema de gestión contable5.5. Evaluación de proveedoresEvaluación de proveedores…………………………………………....

Page 105: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

¿Qué se consigue con la ¿Qué se consigue con la autoevaluación?autoevaluación?¿Cuáles son las funciones de la ¿Cuáles son las funciones de la evaluación de Servicios?evaluación de Servicios?

La participación del personal del Servicio en la evaluación La participación del personal del Servicio en la evaluación ayuda a comprender mejor el funcionamiento de la ayuda a comprender mejor el funcionamiento de la organización y a definir su situación laboral. Esto aumenta las organización y a definir su situación laboral. Esto aumenta las posibilidades de contribuir al perfeccionamiento y las posibilidades de contribuir al perfeccionamiento y las oportunidades de desarrollo personal, emocional y oportunidades de desarrollo personal, emocional y profesional. profesional.

La autoevaluación persigue de manera operativa la La autoevaluación persigue de manera operativa la elaboración de un plan global de mejoras para el Servicio. elaboración de un plan global de mejoras para el Servicio.

El objetivo fundamental es contribuir al perfeccionamiento. La El objetivo fundamental es contribuir al perfeccionamiento. La evaluación sirve para señalar áreas de debilidad, reconocer evaluación sirve para señalar áreas de debilidad, reconocer errores y realizar cambios racionales dentro de la gestión. errores y realizar cambios racionales dentro de la gestión. – Diagnóstica. Reconocimiento de errores o problemas de Diagnóstica. Reconocimiento de errores o problemas de

funcionamiento y establecimiento de estrategias adecuadas para funcionamiento y establecimiento de estrategias adecuadas para iniciar acciones. iniciar acciones.

– Formativa. El personal participante comprende qué significa Formativa. El personal participante comprende qué significa trabajar con un modelo de calidad, qué exigencias requiere y qué trabajar con un modelo de calidad, qué exigencias requiere y qué nuevos procesos se necesitan. nuevos procesos se necesitan.

– Sumativo. El Servicio expone públicamente su situación actual, Sumativo. El Servicio expone públicamente su situación actual, sus logros y las actividades que realiza para que se vea que sus logros y las actividades que realiza para que se vea que intenta alcanzar la excelencia del Servicio.intenta alcanzar la excelencia del Servicio.

Page 106: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Acciones post-evaluaciónAcciones post-evaluación

Difusión del Informe Final de Evaluación del Servicio Difusión del Informe Final de Evaluación del Servicio entre los grupos implicados en su funcionamiento.entre los grupos implicados en su funcionamiento.

Constitución del Comité de Calidad del Servicio Constitución del Comité de Calidad del Servicio responsable del seguimiento de acciones de mejora.responsable del seguimiento de acciones de mejora.

Negociación con los responsables de gobierno Negociación con los responsables de gobierno universitario para concretar las acciones de mejora.universitario para concretar las acciones de mejora.

Elaboración del Plan de Calidad del Servicio Elaboración del Plan de Calidad del Servicio Elaboración del plan de seguimiento.Elaboración del plan de seguimiento. Implantación del plan de seguimiento.Implantación del plan de seguimiento. Elaboración de informes semestrales sobre la marcha del Elaboración de informes semestrales sobre la marcha del

proceso. proceso. Revisión periódica por expertos externos, tomando como Revisión periódica por expertos externos, tomando como

base el plan de mejoras y los informes semestrales. base el plan de mejoras y los informes semestrales. Nueva evaluación del Servicio (autoevaluación y Nueva evaluación del Servicio (autoevaluación y

evaluación externa) tras un período de cinco a seis años. evaluación externa) tras un período de cinco a seis años.

Page 107: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

EvaluaciónTitulacionesEvaluaciónTitulaciones

Page 108: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

La titulaciónLa titulación::• Planificación de la Planificación de la

titulación: objetivos y titulación: objetivos y competencias competencias

• Programa de formaciónPrograma de formación• RecursosRecursos• Desarrollo de la enseñanzaDesarrollo de la enseñanza• Calidad de los ResultadosCalidad de los Resultados

• Puntos fuertes y débilesPuntos fuertes y débiles• Plan de mejoraPlan de mejora

• AutoevaluaciónAutoevaluación

Evaluación de Titulaciones

titulacionesINTERNA

FACILITADORES DE ENTRADA

PROCESOS

RESULTADOS

Page 109: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Tiene establecidos explícita y claramente los Tiene establecidos explícita y claramente los objetivos, definido el perfil profesional de los objetivos, definido el perfil profesional de los egresados y planificados los procesos de egresados y planificados los procesos de dirección. dirección.

Cuenta con un programa formativo coherente y Cuenta con un programa formativo coherente y bien organizado.bien organizado.

Cuenta con los recursos adecuados para Cuenta con los recursos adecuados para desarrollar el programa, lograr los objetivos y desarrollar el programa, lograr los objetivos y alcanzar los resultados deseados.alcanzar los resultados deseados.

Logra los resultados esperados.Logra los resultados esperados. Tiene establecidos procedimientos de análisis y Tiene establecidos procedimientos de análisis y

revisión que permiten asegurar la calidad de la revisión que permiten asegurar la calidad de la misma.misma.

•Un titulación es de calidad si:

Page 110: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

PLANIFICACIÓN

1. Objetivos2. Perfil

profesional

3. Dirección y planificación

1. Estructura Plan de Estudios

2. Programa de asignaturas

3. Dimensión práctica

4. Planificación docente

1. Humanos: Alumnado2. Humanos: Profesorado3. Humanos: PAS4. Físicos5. Financieros

1. Metodología docente

2. Trabajo del alumnado

3. Evaluación de los aprendizajes

4. Orientación y acción tutorial

5. Coordinación de la enseñanza

1. Resultados del programa formativo

2. Resultados por asignaturas

3. Resultados de los egresados

4. Satisfacción con los resultados

•Unidades de análisis- Titulaciones

PROGRAMA FORMACIÓN

RECURSOS

DESARROLLO

ENSEÑANZA

CALIDAD

RESULTADOS

Page 111: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

DIMENSIONES, DIMENSIONES, UNIDADADES UNIDADADES Y CRITERIOSY CRITERIOS

PREGUNTAPREGUNTASS

EVIDENCIASEVIDENCIAS FUENTESFUENTES

1. PLANIFICACIÓN DE LA TITULACIÓN: OBJETIVOS 1. PLANIFICACIÓN DE LA TITULACIÓN: OBJETIVOS DIMENSIÓNDIMENSIÓN

1.1 Objetivos 1.1 Objetivos UNIDAD DE ANÁLISISUNIDAD DE ANÁLISIS

1.1.1 La titulación 1.1.1 La titulación tiene tiene establecidos establecidos de forma de forma concreta y concreta y pública sus pública sus objetivos. objetivos.

CRITERIOCRITERIO

1.1. ¿La Titulación ¿La Titulación tiene tiene establecidos sus establecidos sus objetivos? objetivos? ¿Cuáles son los ¿Cuáles son los objetivos? ¿Son objetivos? ¿Son coherentes con coherentes con los fines de la los fines de la Enseñanza Enseñanza Superior? ..... Superior? .....

2.2. ¿Se ¿Se corresponden corresponden con los con los establecidos en establecidos en el Espacio el Espacio Europeo de Europeo de Enseñanza Enseñanza Superior?Superior?

1.1. Existencia y Existencia y contenido del contenido del documento documento público en el público en el que se que se constatan constatan metas y metas y objetivos de la objetivos de la Titulación.Titulación.

2.2. Nivel de Nivel de concordancia concordancia entre los entre los objetivos de la objetivos de la Titulación y la Titulación y la misión y misión y características características de la de la Universidad. Universidad.

3.3. ........

1.1. Directrices sobre Directrices sobre Planes de Planes de Estudio: Estudio: normativa de la normativa de la Universidad, Universidad, directrices directrices propias de la propias de la Titulación Titulación

2.2. Plan de estudios Plan de estudios publicado en el publicado en el Boletín Oficial del Boletín Oficial del Estado.Estado.

3.3. ........

•Estructura de la Guía Titulaciones

Page 112: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

1. Planificación de la titulación: objetivos

1.1 Objetivos. Su grado de definición y concreción. Los sistemas de revisión de los mismos.

•¿Qué se evalúa? titulaciones

INTERNA

1.2 Perfil profesional. Su grado de especificación. Los sistemas de revisión de los mismos.

1.3 Dirección, planificación y mejora. La existencia de una planificación estratégica, su grado de desarrollo y el compromiso de la dirección en su ejecución.

Page 113: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Valoración semicuantitativaValoración semicuantitativaEl CIE valorará en la escala indicada, cada uno de los criterios incluidos El CIE valorará en la escala indicada, cada uno de los criterios incluidos

en la dimensión, teniendo en cuenta la descripción y valoración en la dimensión, teniendo en cuenta la descripción y valoración cualitativa efectuada en el cuadro anterior.cualitativa efectuada en el cuadro anterior.

1: Ausencia o muy deficiente 4: Muy 1: Ausencia o muy deficiente 4: Muy satisfactorio satisfactorio

2: Deficiente NE: 2: Deficiente NE: Evidencias insuficientesEvidencias insuficientes

3: Satisfactoria 3: Satisfactoria 11 22 33 44 NENE

MediMediaa

SUFICIENCIA/SUFICIENCIA/INSUFICIENCIINSUFICIENCI

AA

1. PLANIFICACIÓN DE LA TITULACIÓN: 1. PLANIFICACIÓN DE LA TITULACIÓN: OBJETIVOSOBJETIVOS                     

1.1 Objetivos1.1 Objetivos     

1111

  11

      33 SUFICIENCIA SUFICIENCIA 

1.1 La titulación tiene establecidos 1.1 La titulación tiene establecidos de forma concreta y pública sus de forma concreta y pública sus objetivos. objetivos.   

XX       

1.1.2 Las metas y objetivos son 1.1.2 Las metas y objetivos son concretos y realistas en función de concretos y realistas en función de los recursos disponibles y están los recursos disponibles y están formulados de manera que permiten formulados de manera que permiten su evaluación periódicasu evaluación periódica   

XX          

1.1.3 La titulación no cuenta con 1.1.3 La titulación no cuenta con obstáculos internos o externos obstáculos internos o externos insalvables para el logro de sus insalvables para el logro de sus objetivos.objetivos.         

XX     

Page 114: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

EVALUACIÓN DE departamentos

¿Qué se puede evaluar en los Departamentos?

1. Perfil del departamento

2. Enseñanzas de primer y segundo ciclo

3. Estudios de tercer ciclo

4. Maestrías y Estudios propios

5. Investigación

6. Prestación de servicios

7. Gestión

INTERNA Nueva Guía

Plan experim.

Guía titulaciones

Guía EFQM

Page 115: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Evaluación Doctorados Evaluación Doctorados de Calidad-Modelo de Calidad-Modelo

AcreditaciónAcreditación CRITERIOS CONTEMPLADOSCRITERIOS CONTEMPLADOS

A) Criterios referidos a los A) Criterios referidos a los antecedentesantecedentes del programa: 40% del programa: 40%

B) Criterios referidos a la propuesta B) Criterios referidos a la propuesta del del programaprograma: 60%: 60%

Page 116: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Criterios apartado A: ANTECEDENTES DEL PROGRAMACriterios apartado A: ANTECEDENTES DEL PROGRAMA PONDERACIÓNPONDERACIÓN

A.1. Historial docente, referido exclusivamente a programas de A.1. Historial docente, referido exclusivamente a programas de doctorado, e investigador durante los últimos cinco años del doctorado, e investigador durante los últimos cinco años del grupo o grupos que desarrollan el programa. grupo o grupos que desarrollan el programa.

16%16%

A.2. Relación de publicaciones de resultados de investigación A.2. Relación de publicaciones de resultados de investigación relacionados directamente con las tesis doctorales defendidas en relacionados directamente con las tesis doctorales defendidas en los últimos cinco años. los últimos cinco años.

6%6%

A.3. Porcentaje de alumnos que han alcanzado el Diploma de A.3. Porcentaje de alumnos que han alcanzado el Diploma de Estudios Avanzados (DEA) en ese periodo Estudios Avanzados (DEA) en ese periodo

4%4%

A.4. Número de tesis defendidas en ese mismo periodo. A.4. Número de tesis defendidas en ese mismo periodo. 4%4%

A.5. Porcentaje de las tesis defendidas que han incluido la mención A.5. Porcentaje de las tesis defendidas que han incluido la mención “doctorado europeo” en los últimos cinco años. “doctorado europeo” en los últimos cinco años.

4%4%

A.6. Número de becarios y de profesores y doctores visitantes con A.6. Número de becarios y de profesores y doctores visitantes con becas y ayudas obtenidas en convocatorias competitivas de becas y ayudas obtenidas en convocatorias competitivas de ámbito nacional o comunitario en ese mismo periodo. ámbito nacional o comunitario en ese mismo periodo.

2%2%

A.7. Relación de convenios de colaboración del programa con A.7. Relación de convenios de colaboración del programa con empresas e instituciones nacionales o internacionales empresas e instituciones nacionales o internacionales establecidos para la realización del programa. establecidos para la realización del programa.

2%2%

A.8. Procedimiento para el seguimiento de los doctores egresados A.8. Procedimiento para el seguimiento de los doctores egresados del programa en los últimos cinco años. del programa en los últimos cinco años.

2%2%

Page 117: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

Criterios apartado B: PROPUESTA DE PROGRAMACriterios apartado B: PROPUESTA DE PROGRAMA PONDERACIÓNPONDERACIÓN

B.1. Articulación y coherencia de los contenidos y estructura B.1. Articulación y coherencia de los contenidos y estructura general del programa: antecedentes, justificación de su general del programa: antecedentes, justificación de su necesidad, objetivos generales, metodología utilizada para el necesidad, objetivos generales, metodología utilizada para el proceso de enseñanza-aprendizaje, y criterios de evaluación. proceso de enseñanza-aprendizaje, y criterios de evaluación.

24%24%

B.2. Afinidad de su contenido con las líneas de investigación de los B.2. Afinidad de su contenido con las líneas de investigación de los profesores que los imparten. profesores que los imparten.

8%8%

B.3. Historial docente e investigador de los profesores que B.3. Historial docente e investigador de los profesores que imparten el programa. imparten el programa.

8%8%

B.4. Participación de otros grupos o departamentos de la misma o B.4. Participación de otros grupos o departamentos de la misma o de otras instituciones de Educación Superior tanto nacionales de otras instituciones de Educación Superior tanto nacionales como extranjeras. como extranjeras.

6%6%

B.5. Estimación razonada del número de alumnos de otras B.5. Estimación razonada del número de alumnos de otras universidades distinta de la responsable del programa. universidades distinta de la responsable del programa.

6%6%

B.6. Financiación procedente de otras entidades públicas y B.6. Financiación procedente de otras entidades públicas y privadas. privadas.

4%4%

B.7. Informe de la Universidad o Institución que avale el B.7. Informe de la Universidad o Institución que avale el programa. programa.

4%4%

Page 118: Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

¡ Gracias por su atención !¡ Gracias por su atención !

Universidad de Granada Universidad de Granada