procedimiento evaluacion.pdf

Procedimiento general para la evaluacin de programas y funciones

1

Procedimiento general para la

evaluacin de programas y funciones en

la educacin superior


2

Procedimiento general para la evaluacin de

programas y funciones en la educacin superior


3

Procedimiento general para la evaluacin de Programas y funciones en la educacin superior D. R. .2014. Comits Interinstitucionales para la Evaluacin de la Educacin Superior, A. C. (CIEES). Av. San Jernimo # 120, Col. La Otra Banda, C. P. 01090, Delegacin lvaro Obregn, Mxico, D. F. Noviembre de 2014 www.ciees.edu.mx


4

Procedimiento general para la evaluacin de

programas y funciones en la educacin superior

ndice

Introduccin

1. Breve descripcin del origen de los CIEES y su organizacin

2. Evaluacin de programas y evaluacin de funciones

3. Universo de trabajo de los CIEES

4. Grandes etapas en la evaluacin de un programa o una funcin

5. Figuras que participan en cada proceso de evaluacin

6. Ejes y categoras de evaluacin

7. Autoevaluacin y visita de los evaluadores externos

8. Reconocimientos que otorgan los CIEES y su vigencia

9. Informes, recomendaciones y seguimiento

10. Inicio del proceso de evaluacin de una institucin o un programa


5

Introduccin

l presente documento es una descripcin de los aspectos ms relevantes de la

metodologa que siguen los Comits Interinstitucionales para la Evaluacin de

la Educacin Superior (CIEES) para llevar a cabo la evaluacin de programas

y funciones en las instituciones de educacin superior en Mxico. Este documento

tiene, sobre todo, un carcter informativo y por ello no incluye los formatos u otro tipo

de documentacin que deben llenar las instituciones de educacin superior que

solicitan ser evaluadas. Si lo que se desea son dichos formatos o dar inicio a un

proceso de evaluacin (autoevaluacin y visita), stos deben ser solicitados a los

CIEES al telfono de la Ciudad de Mxico: 5616 5210.


6

1. Breve descripcin del origen de los CIEES y su

organizacin

os Comits Interinstitucionales para la Evaluacin de la Educacin Superior

A.C. (CIEES) es un organismo que se estableci a partir de 1991. Los CIEES

fueron creados primero como un programa dependiente de la Asociacin

Nacional de Universidades e Instituciones de Educacin Superior (ANUIES) y, a partir

de 2009, se constituy como un organismo independiente de la ANUIES con la figura

legal de asociacin civil (sin fines de lucro).

En 1991 la Coordinacin Nacional para la Planeacin de la Educacin Superior

(CONPES) propuso la creacin de los CIEES como un programa no gubernamental al

que se le asignaron las funciones de evaluacin diagnstica de los programas

educativos y las funciones institucionales, la acreditacin de los programas y unidades

acadmicas, la dictaminacin de proyectos y la asesora a las instituciones de

educacin superior. Los CIEES estn organizados en nueve comits disciplinares,

siete comits evalan programas educativos (carreras) y los otros dos evalan

funciones institucionales. Estos son:

Comits de programas:

Arquitectura, diseo y urbanismo

Artes, educacin y humanidades

Ciencias agropecuarias

Ciencias naturales y exactas

Ciencias de la salud

Ciencias sociales y administrativas

Ingeniera y tecnologa

Comits de funciones institucionales:

Administracin y gestin institucional

Difusin, vinculacin y extensin de la cultura


7

Cada uno de los nueve comits est integrado por acadmicos distinguidos que

fungen como docentes, investigadores o altos funcionarios de las instituciones de

educacin superior (IES) del pas. Cada comit funciona de manera colegiada y

honorfica (sin pago) y es coordinado por un vocal ejecutivo. El organismo CIEES, en

su conjunto, est dirigido por un coordinador general que es nombrado por la

Asamblea General de Asociados (mximo rgano de gobierno). Los comits

interactan regularmente, comparten informacin, revisan los marcos de referencia,

complementan las evaluaciones de los programas o funciones y dictaminan los niveles

que deben ser asignados a cada programa o funcin evaluada. En lo general, todos los

comits utilizan los mismos instrumentos y procedimientos generales de evaluacin,

aunque cada uno de ellos establece y aplica un marco de referencia con las

particularidades propias de cada rea disciplinar.

Para llevar a cabo la evaluacin de cada programa o funcin, los comits se

auxilian con pares acadmicos evaluadores (personal acadmico de las IES de los

diferentes subsistemas de educacin superior del pas) quienes son capacitados

previamente por los CIEES en los procesos de evaluacin correspondientes. Para

realizar las visitas in situ, los pares acadmicos externos se integran en comisiones

(generalmente de tres personas) afines a los programas o funciones evaluadas. Estas

comisiones son llamadas Comisiones de Pares Acadmicos Externos (CPAE)

Los CIEES son el organismo que inici la evaluacin externa de las IES de

Mxico. Los Comits elaboraron y pusieron a disposicin de la comunidad acadmica

los primeros instrumentos con ese propsito, mismos que se han modificado,

adecuado y actualizado. Con el objeto de que las IES de Mxico aceptaran la

evaluacin externa, a partir de 1991 los CIEES propusieron a las IES llevar a cabo

evaluaciones diagnsticas, esto contribuy significativamente a arraigar entre ellas la

cultura de la evaluacin acadmica externa y fue la base sobre la que, poco a poco, se

impuls la creacin y consolidacin de organismos acreditadores de la educacin

superior en Mxico.


8

2. Evaluacin de programas y evaluacin de funciones

os CIEES estn facultados (por su acta constitutiva y sus estatutos) a evaluar y

reconocer por su calidad tanto a los programas educativos que imparten las

IES como a las funciones de administracin y gestin institucional y las

funciones de difusin, vinculacin y extensin de la cultura.

Evaluacin de programas

Como se muestra en el apartado 1 de este documento, los CIEES cuentan con

siete comits dedicados a la evaluacin de programas de educacin superior. Por la

variedad de los comits y por la metodologa que stos siguen, se puede afirmar que

en principio cualquier programa de educacin superior es susceptible de ser evaluado

por alguno de los comits mencionados.

Tabla 1. Tipos de programas que pueden ser evaluados

Tcnico superior (2 aos)

Tcnico superior universitario o profesional asociado

Licenciatura (pregrado)

Educacin superior universitaria escolarizada

Profesionales de la educacin (educacin normal)

Educacin superior no escolarizada

Mixta

Posgrado

Escolarizado

No escolarizado

Mixto


9

Evaluacin de funciones

Asimismo, como ya se dijo en el apartado 1, los CIEES evalan dos tipos de

funciones institucionales de las IES que no corresponden con la atencin de programas

acadmicos:



Evaluacin institucional

Los CIEES no tienen atribuciones para llevar a cabo evaluaciones de este tipo y, por lo

tanto, no pueden acreditar a una institucin en su conjunto.


10

3. Universo de trabajo de los CIEES

l universo de trabajo de los CIEES es el conjunto de instituciones , programas

acadmicos y funciones de las instituciones pblicas y privadas de educacin

superior de Mxico. Los programas acadmicos susceptibles de ser evaluados

por los CIEES son todos aquellos que requieren, para ser cursados, el haber aprobado

el bachillerato mexicano (educacin media superior) y corresponden a los niveles 5 a 8

de la Clasificacin Internacional Normalizada de la Educacin de la UNESCO.

Tabla 2. Nmero de programas y matrcula por subsistema de educacin superior

Subsistema de Educacin Superior Programas Matrcula Instituciones

Educacin Normal 979 104,428 232

IES Profesionales de la Educacin 501 66,611 62

Instituciones Particulares 23,132 1,286,196 2,421

Institutos Tecnolgicos 3,158 491,157 258

Otras Instituciones Pblicas 1,770 161,406 188

Universidades Interculturales 127 10,525 10

Universidades Politcnicas 337 61,655 56

Universidades Pblicas Estatales 5,289 1,036,923 34

Universidades Pblicas Estatales de Apoyo Solidario 464 56,044 23

Universidades Pblicas Federales 983 407,447 17

Universidades Tecnolgicas 1,411 188,572 107

Total 38,151 3,870,964 3,408

Fuente: Universo de Educacin Superior 2013-2014, DGESU-SEP


11

Tabla 3. Programas y funciones evaluados por los CIEES de 1992 a 2014

Ao Nmero de programas

1992 13

1993 14

1994 57

1995 33

1996 120

1997 105

1998 194

1999 125

2000 264

2001 136

2002 379

2003 150

2004 299

2005 314

2006 555

2007 334

2008 289

2009 346

2010 299

2011 328

2012 364

2013 257

2014 218

Total 5,193


12

4. Grandes etapas en la evaluacin de un programa o

una funcin

1. Solicitud formal a la Coordinacin General de los CIEES (por escrito) para que un

programa o unas funciones institucionales sean evaluados.

2. Elaboracin de la autoevaluacin (autoestudio) por parte del programa o funcin a

ser evaluado.

3. Visita in situ de una Comisin de Pares Acadmicos Externos (CPAE) designada

por los CIEES a la sede del programa o institucin evaluado.

4. Elaboracin del informe de la visita por parte de los integrantes de la CPAE

5. Revisin del informe de la visita por parte de los integrantes del Comit

Interinstitucional (CI) respectivo y dictamen final.

6. Entrega del informe de recomendaciones y dictamen a la institucin y al responsable

del programa o funcin.

Figura1. Grandes etapas de la evaluacin.

Solicitud formal a los CIEES, para que un programa o una funcin

sean evaluados.

Elaboracin de la

autoevaluacin por parte del programa o

funcin a ser evaluado.

Visita in situ de una Comisin

de Pares Acadmicos

Externos (CPAE)

Elaboracin del informe de la

visita por parte de los

integrantes de la CPAE.

Revisin del informe de la

visita por parte de los

integrantes del CI respectivo y dictamen final.

Entrega del informe de

recomendaciones y dictamen a la institucin y al

responsable del programa o

funcin


13

5. Figuras que participan en los procesos de evaluacin

y sus funciones principales

Por parte de la institucin o programa evaluado

Coordinador, jefe o encargado del programa o funcin evaluada. En general,

esta figura es el principal responsable de la elaboracin e integracin de la

autoevaluacin o autoestudio. Asimismo, suele ser la persona que coordina

todos los trabajos relacionados con la logstica de la visita in situ de la CPAE.

Encargados de la planeacin, de la evaluacin y de los servicios a los

estudiantes (biblioteca, laboratorios o prcticas, actividades deportivas y

servicios escolares) los responsables de las reas centrales de la IES y los

encargados de las funciones de difusin, vinculacin y extensin universitarias.

La elaboracin de la autoevaluacin (auto estudio) es un trabajo colaborativo en

el que generalmente deben participar varias personas, reas y dependencias

de una IES. No es posible elaborar una buena autoevaluacin sin la

intervencin de las reas que atienden y ofrecen servicios a los estudiantes

(biblioteca, laboratorios, actividades deportivas y recreativas, servicios

escolares, etc.). Al momento de la visita, todas o casi todas estas figuras deben

ser entrevistadas por la CPAE.

Estudiantes, docentes, egresados y empleadores. La evaluacin del programa

o funcin implica la entrevista con los representantes de estos cuatro grupos.

Dependiendo del programa o funcin evaluada puede ser o no pertinente la

entrevista con los egresados y con los empleadores.


14

Por parte de los CIEES

Vocal ejecutivo del comit correspondiente y sus asistentes. La Vocala

Ejecutiva es responsable de coordinar, desde los CIEES, los trabajos para

llevar a cabo la evaluacin del programa o funcin institucional. Adicionalmente,

la Vocala Ejecutiva debe revisar el informe de autoevaluacin, integrar la

CPAE, convenir con la institucin la visita in situ, recibir el informe de la CPAE y

entregarlo al comit respectivo, as como enviar el informe y el dictamen a la

institucin. En ningn caso los integrantes de la Vocala Ejecutiva deben

participar como evaluadores en la visita, ya que su funcin es apoyar a la CPAE

y al comit respectivo.

Integrantes de la CPAE. Para realizar la visita in situ a la sede del programa o

funcin evaluados, los CIEES deben integrar una comisin de al menos tres

pares acadmicos evaluadores externos a la institucin evaluada, uno de los

cuales debe pertenecer a una institucin del subsistema por evaluar.

En ningn caso un docente, investigador o personal de la institucin evaluada

puede ser integrante de la CPAE ni intervenir en modo alguno a nombre de los

CIEES en las sesiones de evaluacin del programa.

La CPAE debe realizar la visita de acuerdo con la metodologa y protocolos de

los CIEES y producir un informe.

Integrantes del comit interinstitucional respectivo. El comit interinstitucional

respectivo debe conocer el informe de la CPAE, deliberar sobre l y emitir un

dictamen.


15

6. Ejes y categoras de evaluacin

Para los programas acadmicos

El proceso de evaluacin de un programa contempla la revisin de numerosos

aspectos que son agrupados en cuatro ejes, diez categoras y numerosos indicadores.

Los ejes y categoras son los siguientes:

Intencionalidad

1. Normativa y polticas generales

2. Planeacin-evaluacin

Contexto y procesos

1. Modelo educativo y plan de estudios

2. Alumnos

3. Personal acadmico

4. Servicios de apoyo a los estudiantes

Infraestructura

1. Instalaciones, equipo y servicios

Resultados e impacto

1. Productividad acadmica (docencia e investigacin)

2. Vinculacin con los sectores de la sociedad

3. Trayectoria, perspectivas e impacto social del programa


16

Cada categora contempla diversos indicadores. Algunos de los indicadores ms

utilizados en los procesos de evaluacin son los siguientes: marco normativo

institucional, clima organizacional, modelo educativo, plan de estudios, perfil de egreso,

evaluacin del proceso de enseanza-aprendizaje, trayectoria escolar, personal

acadmico, aulas, laboratorios y talleres, biblioteca, programa de infraestructura y

mantenimiento de instalaciones y equipos, seguimiento de egresados, eficiencia

terminal y de titulacin, etc.

En el caso de la educacin a distancia o no escolarizada y la mixta, se incluye

una categora ms, la categora 11 denominada: plataforma tecnolgica, que

contempla otros indicadores entre los que se encuentran: manuales de organizacin y

procedimientos para la educacin a distancia, infraestructura informtica y de

telecomunicaciones, protocolos de seguridad de telecomunicaciones, portal,

introduccin al programa educativo, curso de induccin a la plataforma tecnolgica,

redaccin y presentacin, diseo de la interfaz, evaluaciones en lnea,

retroalimentacin a los estudiantes, ayuda operacional y otros.


17

Para las funciones institucionales


Marco normativo

Estructura de gobierno

Clima organizacional

Planeacin y evaluacin

Procesos acadmicos

Investigacin*

Procesos administrativos

Finanzas

*Si la IES declara realizar esta funcin


Difusin

Vinculacin

1. Programa de servicio social

2. Programa de prcticas profesionales

3. Seguimiento de egresados

4. Convenios con el sector productivo

Extensin de la cultura


18

7. Autoevaluacin y visita de los evaluadores externos

as dos etapas ms importantes del proceso de evaluacin de un programa o

una funcin son: la elaboracin del estudio de autoevaluacin que debe llevar

a cabo la institucin evaluada y la visita in situ que realizan los pares

evaluadores externos (CPAE) en representacin de los CIEES.

Autoevaluacin

La autoevaluacin (tambin llamada autoestudio) de un programa o una funcin

es el corazn del proceso de evaluacin. La IES debe elaborar un documento amplio,

claro y profuso para responder con verdad y precisin a todos los requerimientos de

informacin establecidos en los formatos proporcionados por los CIEES; asimismo, la

IES debe recopilar y organizar los comprobantes necesarios para respaldar lo que se

haya reportado, as como hacer los comentarios y juicios de valor pertinentes. Al final

de cada una de las categoras es necesario identificar las fortalezas del programa y las

acciones que realiza la IES para mantener esas fortalezas, as como las reas de

oportunidad del programa y las acciones actuales y futuras para atenderlas. Toda la

informacin proporcionada por la IES a los CIEES es confidencial y solo se maneja

pblicamente como datos estadsticos agregados.

Cuando la autoevaluacin de una IES est completa, los CIEES integran una

Comisin de Pares Evaluadores Externos (CPAE) y organizan la visita in situ.


19

Visita in situ de los evaluadores externos

La visita a la sede del programa o funcin institucional es el punto ms

importante de todo el proceso de evaluacin. De hecho, este aspecto (la visita) es, en

ltima instancia, la nica manera que tiene la sociedad de garantizar o cerciorarse que

un programa acadmico o una funcin institucional tienen buena calidad. Para los

CIEES, la visita in situ es un acto que conlleva gran responsabilidad y debe ser

conducido con todo rigor, cuidado y apegado al mximo a la metodologa y al protocolo

de actuacin definidos por los propios CIEES.

El sentido de la visita es conocer de primera mano los propsitos del programa o

funcin evaluados y verificar que las condiciones de operacin de los mismos permitan

que se cumpla con dichos propsitos. Por otra parte, la visita permite cotejar la

informacin plasmada en la autoevaluacin y tambin conocer la percepcin y el

desempeo de la comunidad acadmica durante el desarrollo de sus actividades

cotidianas, as como verificar la existencia, pertinencia y suficiencia de algunos

aspectos declarados en la autoevaluacin, principalmente con relacin a la

infraestructura y produccin acadmica. La apreciacin de los evaluadores es muy

importante, pues entre otras cosas se consideran aspectos que no pueden ser

expresados por escrito en la autoevaluacin, como: los ambientes laboral y acadmico,

las actitudes de los sectores de la comunidad de la IES, los niveles de comunicacin

humana, el liderazgo de las diversas jerarquas de autoridad y algunas otros que

pueden hacer la diferencia entre los resultados de un programa acadmico o del

funcionamiento institucional.

Previo a la visita, las IES convienen con la Vocala Ejecutiva del Comit el

programa, fechas y horario de actividades. Todas las actividades programadas deben

llevarse a cabo en tiempo y forma de acuerdo con la agenda de la visita.


20

Durante la visita, los evaluadores realizan entrevistas por separado con

diferentes sectores relacionados con el programa evaluado, entre los que destacan:

autoridades acadmicas, profesores, estudiantes, instancias de apoyo, egresados, y

empleadores. Durante las entrevistas, los pares evaluadores corroboran la informacin

recibida en la gua de autoevaluacin y procuran identificar las fortalezas y las reas de

oportunidad para cada programa, siempre con actitud respetuosa y constructiva.

Tambin realizan visitas a las instalaciones o infraestructura de apoyo y conocen

y analizan documentacin diversa relacionada con el propsito de la evaluacin. La

informacin que los evaluadores obtienen antes y durante la visita, es la base para la

elaboracin del diagnstico y recomendaciones fundamentadas que se presentarn en

el informe correspondiente y del nivel de calidad que el Comit asigne al programa o

funcin. A continuacin, en la siguiente tabla, se presenta la agenda tipo de una visita

de evaluacin.

Tabla 4. Agenda tipo de una visita

Da previo de la visita Duracin

Sesin de integracin de la CPAE 1 hora

Primer da de visita Duracin

Sesin de apertura 30 min.

Entrevista con el responsable del programa educativo 1.30 min.

Receso 30 min.

Entrevista con los funcionarios del nivel inmediato superior 1 hora

Entrevista con alumnos 1.30 min.

Comida 2 horas

Recorrido por instalaciones dentro y/o fuera del campus 3 horas

Entrevista con egresados 1 hora

Segundo da de visita Duracin

Entrevista con empleadores 1.30 min.

Entrevista con profesores 1 hora

Reunin con las reas de servicios generales, planeacin y control escolar

1 hora

Entrevista (segunda) con responsable del programa educativo 1 hora

Sesin de cierre 30 min


21

8. Reconocimientos que otorgan los CIEES y su vigencia

obre la base de las evaluaciones realizadas y los informes de las CPAE, los

nueve comits interinstitucionales otorgan a los programas y funciones

evaluadas diversos reconocimientos. Estos reconocimientos se denominan

Niveles 1 y 2 de los CIEES y Acreditaciones*.

Reconocimientos que los CIEES otorgan a los programas acadmicos

Nivel 1** (vigencia de cinco aos)

Se otorga a programas educativos que a juicio de las CPAE y del Comit

respectivo, cumplen a satisfaccin con todos o la mayora de los indicadores

establecidos en los Marcos de Referencia de los CIEES. Por ejemplo, planta

acadmica adecuada a los propsitos del programa, planes y programas de estudio

actualizados, infraestructura suficiente, entre otros.

Nivel 2 (vigencia de cinco aos)

Se otorga a programas educativos que a juicio de las CPAE no satisfacen los

requisitos establecidos en los marcos tericos del comit y que requieren entre uno y

dos aos para cumplir satisfactoriamente con esos indicadores de un programa de

buena calidad.

Reconocimientos que los CIEES otorgan a las funciones de gestin y vinculacin

y a los programas acadmicos de las escuelas normales

Acreditacin (vigencia de cinco aos)


22

* Los CIEES otorgan los reconocimientos denominados Nivel 1 y Nivel 2 a los

programas acadmicos de las IES. Asimismo, los CIEES solo otorgan reconocimientos

con el nombre de acreditaciones a las funciones institucionales (no a la institucin) y a

los programas acadmicos de las escuelas normales. Estos reconocimientos, su

denominacin y su vigencia fueron autorizados por la Asamblea General de Asociados

de los CIEES en su sesin extraordinaria celebrada el 12 de septiembre de 2014

** El Nivel 1 de los CIEES cuenta para las estadsticas de matrcula inscrita en

programas de buena calidad de la Secretara de Educacin Pblica (SEP).


23

9. Informe, recomendaciones y seguimiento

Informe y recomendaciones

osterior a la visita in situ, los CIEES preparan un informe especfico por cada

programa o funcin evaluada; en l, se describen las condiciones del

programa o funcin tal y como fueron percibidas por los integrantes de la

CPAE ad hoc durante la visita. En general, este informe solo se refiere a los

indicadores ms relevantes y no de manera exhaustiva a todos los aspectos

evaluados. Asimismo, el informe contiene un conjunto de recomendaciones cuyo

propsito es que la IES, despus de conocerlo y analizarlo y con base en las

consideraciones que hizo previamente durante su autoevaluacin, defina la forma ms

conveniente para mantener las fortalezas que hayan sido encontradas y resolver o

solventar los problemas detectados.

Seguimiento

En caso de que una IES aspire a que algn programa o funcin institucional

que haya sido clasificado ya sea en el Nivel 2 o en su caso como no acreditado,

cambie a Nivel 1 o acreditado, deber solventar los problemas o debilidades

reportadas en el informe de los CIEES y, despus de haber atendido a dichas

recomendaciones, deber reiniciar el proceso solicitando un seguimiento a la

evaluacin realizada. Las acciones para un seguimiento son similares a las de la

primera evaluacin y los integrantes de la CPAE ponen especial cuidado de observar

que las recomendaciones efectivamente han sido solventadas.


24

10. Inicio del proceso de evaluacin de una institucin o

un programa

ara iniciar el proceso de evaluacin de un programa o una funcin, se requiere

que la mxima autoridad de la IES dirija una solicitud por escrito al

coordinador general de los CIEES, en la cual la institucin manifieste el tipo de

evaluacin que requiere (programas acadmicos o funciones institucionales) y, en su

caso, cul(es) programa(s) o funcin desea que sean evaluados, as como el nombre y

datos de contacto de la persona que estar encargada por parte de la IES para

coordinar la relacin con los CIEES durante el proceso de evaluacin. A partir de dicha

solicitud los CIEES entrarn en contacto con la persona indicada por la IES para

coordinar toda la logstica del proceso.


25

Referencias bibliogrficas

UNIESCO (2013). Clasificacin Internacional Normalizada de la Educacin CINE 2011. Montreal, Quebec. Instituto de Estadstica de la UNESCO.

procedimiento evaluacion.pdf

Documents