evaluacion especifica transporte informe final

7/25/2019 Evaluacion Especifica Transporte Informe Final

1/116

Indexa de Mxico, S.C.

Evaluacin especfica del programa de apoyo altransporte para estudiantes

Informe final

Investigador responsable de la evaluacin:

Alfonso Hernndez Valdez

Investigadora:

Cristina Crdenas Daz

Guadalajara, Jal., a 17 de diciembre de 2013


2/116

2

ndice

Introduccin..

Objetivos y metodologa. Captulo 1. Evaluacin de diseo.

1.1. Justificacin de la creacin y diseo del programa 1.2. Reglas de operacin 1.3. Contribucin a los objetivos estatales de desarrollo......... 1.4. Anlisis de consistencia del programa en funcin de su poblacin potencial y

objetivo.......... 1.5. Anlisis de consistencia del programa en funcin de la matriz de indicadores de

resultados (MIR)...

Captulo 2. Evaluacin de operacin 2.1. Anlisis de procesos y descripcin de la operacin del programa.. 2.2. Anlisis de la administracin financiera y de gasto del programa... 2.3. Sistematizacin de la informacin. 2.4. Cumplimiento y avance de indicadores 2.5. Rendicin de cuentas, difusin y satisfaccin con el programa..

Captulo 3. Evaluacin de procesos.

3.1. Descripcin y anlisis de procesos... 3.2. Valoracin general de procesos

3.3. Anlisis de opinin sobre procesos.. Captulo 4. Anlisis FODA y recomendaciones.....

Conclusiones

Referencias...

Anexo 1. Directorio de participantes.

Anexo 2. Instrumentos de evaluacin..

Anexo 3. Listado de entrevistas a funcionarios y entrevistas grupales a beneficiariosy no beneficiarios del programa..

4

616

172123

25

29

424355586163

66

6780

8493

99

102

103

104

116


3/116

3

Siglas

Acrnimoo sigla Descripcin

Bienevales Programa de apoyo al transporte para estudiantes en la ZMG

CI Coordinacin de Informtica de la SEDIS

Coneval Consejo Nacional de Evaluacin de la Poltica Social de Desarrollo Social

DGP Direccin General de Poltica Social de la SEDIS

DGPS Direccin General de Programas Sociales de la SEDIS

FPU Formato de Padrn nico

MIR Matriz de indicadores de resultados del programa

MOM Manual de Operacin de Mdulos del programa

MP Manual de Procesos de la SEDIS

PED Plan Estatal de Desarrollo Jalisco 2013-2033

PIBV Portal de Internet del programa Bienevales

POA Programa Operativo Anual

Programa Programa de apoyo al transporte para estudiantes de la SEDIS

PUB Padrn nico de BeneficiariosROP Reglas de operacin del programa de apoyo al transporte para estudiantes

Rutas Sistema de informacin del padrn de beneficiarios del programa

Secretara Secretara de Desarrollo e Integracin Social

SEDIS Secretara de Desarrollo e Integracin Social

SEPAF Secretara de Planeacin, Administracin y Finanzas

TDR Trminos de referencia de la evaluacin del programa

TISA Tarjetas Integrales, S.A. de C.V.

ZMG Zona Metropolitana de Guadalajara


4/116

4

Introduccin

La evaluacin de programas sociales es una prctica que se ha venidoinstitucionalizando durante la ltima dcada en Mxico. Desde la aprobacin en 2004 dela Ley General de Desarrollo Social, cuando se estableci el marco jurdico para evaluarla poltica social a nivel federal, este proceso no ha dejado de avanzar, y ahora seencuentra con nuevos ritmos en el nivel estatal de gobierno. En el Estado de Jalisco enparticular, la medicin y evaluacin se han convertido en ejes fundamentales de laestrategia de gobierno para mejorar el desempeo de los programas y los resultados delas intervenciones de tipo gubernamental.

En este contexto se plantea la evaluacin especfica del programa de apoyo altransporte para estudiantes, promovida por la Secretara de Desarrollo e IntegracinSocial del Gobierno del Estado de Jalisco (SEDIS) con la finalidad de proveer informacinque realimente la toma de decisiones en tres grandes aspectos: su diseo, operacin y lagestin de sus procesos.

El programa de apoyo al transporte es uno de los ms nuevos en materia dedesarrollo social en el Estado. Est a cargo de la SEDIS, aunque en su operacinparticipan otras instancias del Ejecutivo del Estado. Se empez a disear en la etapa detransicin del gobierno estatal, previo a marzo de 2013. Las Reglas de Operacin delprograma (ROP) fueron publicadas en el Peridico Oficial del Estado de Jalisco el 30 demarzo de 2013, con sus respectivas modificaciones los das 18 de abril y 25 de mayo delmismo ao, e inici operaciones formales durante el verano de 2013. El programa estdirigido a estudiantes de los niveles medio (secundaria), medio superior (preparatoria) ysuperior (licenciaturas y carreras tcnicas). Cuenta con diversas capacidadesinstitucionales, normativas y presupuestales que lo convierten en un referente en elejercicio de la accin pbica por parte del gobierno estatal. Su objetivo general es facilitary promover la movilidad de los estudiantes a los centros escolares a travs de laimplementacin de un mecanismo de subsidio al transporte que contribuya a la economade los hogares y la permanencia de los estudiantes en el sistema educativo (TDR, p. 2).

Durante su primer ao de operaciones cont con tres modalidades de apoyo (TDR,

p. 2): Para la zona metropolitana de Guadalajara (ZMG), los apoyos consistieron en el

subsidio de dos pasajes diarios por cada da lectivo del ciclo escolar. Losestudiantes que necesitasen ms de dos pasajes por da podan acudir a unmdulo especial a presentar una solicitud de ampliacin y debida acreditacin. Enesta zona del Estado al programa se le denomina de manera comn comoBienevales.

Para estudiantes regionales, entendidos como aquellos que residen en unmunicipio distinto al de su sede educativa, pero su origen y destino se encuentranen la demarcacin geogrfica de una misma regin, el apoyo consisti en 1,800pesos por trimestre.

Para estudiantes interregionales, entendidos como aquellos que residen en unmunicipio distinto al de su sede educativa, donde su origen y destino seencuentran en regiones diferentes, el apoyo consisti en 2,500 pesos portrimestre. Tanto esta modalidad como la anterior son referidas en este estudio demanera genrica como del interior del Estado.

El presente estudio muestra los resultados de la evaluacin especfica delprograma de apoyo al transporte para estudiantes, la cual se sustent en trabajos tanto degabinete como de campo, siguiendo para ello los parmetros de los modelos de


5/116

5

evaluacin que ha propuesto el Consejo Nacional de Evaluacin de la Poltica deDesarrollo Social (Coneval). Como se explica en el siguiente apartado de objetivos ymetodologa, resultaron fundamentales para la evaluacin los distintos trminos dereferencia que establece Coneval para las evaluaciones de diseo, operacin y procesos.Siguiendo este mismo orden, el estudio que nos ocupa se divide en tres captulos,respectivamente, y cierra con un cuarto captulo de anlisis FODA y las recomendacionesque se desprenden de los hallazgos encontrados durante el reporte de resultados de lostres tipos de evaluacin realizados.


6/116

6

Objetivos y metodologa

De conformidad con el anexo tcnico de los Trminos de Referencia (TDR) emitidopor el Gobierno del Estado de Jalisco para la evaluacin del programa de apoyo altransporte para estudiantes, a travs de la Secretara de Desarrollo e Integracin Social, acontinuacin se presentan los objetivos de la evaluacin del programa (vase TDR, p. 3).

Objetivo general.

Evaluar el Programa de Apoyo al Transporte para Estudiantes con la finalidad de proveerinformacin que retroalimente la toma de decisiones sobre su diseo, operacin y lagestin de sus procesos.

Objetivos especficos.

Evaluacin de diseo: analizar la consistencia interna del programa e identificarajustes a las reglas de operacin del siguiente ejercicio.

Evaluacin de operacin: verificar la observancia de las reglas de operacin ygenerar informacin relativa a indicadores financieros relacionados a su operacin.

Evaluacin de procesos: realizar un anlisis sistemtico de la gestin operativa delprograma que permita valorar si dicha gestin cumple con lo necesario para ellogro de las metas y objetivo del programa.

Temas de evaluacin.

Los TDR elaborados por la Secretara incluyen, para cada tipo de evaluacinenumerado en los objetivos especficos, los siguientes temas de evaluacin, a los cualesse procur atender y contestar en este estudio.

a) En relacin con la evaluacin de diseo:

Si el programa identific correctamente el problema o necesidad prioritaria al queva dirigido y si est diseado para solventarlo.

La contribucin del programa a los objetivos estratgicos del Plan Estatal deDesarrollo a travs de la Secretara de Desarrollo e Integracin Social.

Si existe evidencia cientfica estatal, nacional o internacional que muestre que eltipo de apoyo que brinda el programa contribuye positivamente a la consecucinde su Fin y su Propsito.

La lgica vertical y horizontal de la matriz de indicadores del programa. La definicin de poblacin potencial y objetivo con base en la distribucin de la

necesidad que busca solventar el programa y si cuenta con mecanismos deseleccin de dicha poblacin.

La justificacin por la cual los beneficios se dirigen especficamente a dichapoblacin potencial y objetivo. Los criterios y mecanismos aplicados para seleccionar a los beneficiarios. La estructura del padrn de beneficiarios del programa conforme a las

disposiciones aplicables. Las reglas de operacin o normativa que explique el funcionamiento y operacin

del programa.


7/116

7

b) En relacin con la evaluacin de operacin:

La observancia de las reglas de operacin y otras disposiciones normativasaplicables al programa.

Los mecanismos de organizacin y gestin del programa. La administracin financiera de los recursos.

La eficacia, eficiencia y economa operativa del programa. La sistematizacin de la informacin. Los mecanismos de actualizacin y depuracin del padrn de beneficiarios. El cumplimiento y avance en los indicadores de gestin y de productos. La rendicin de cuentas y difusin de informacin estratgica.

c) En relacin con la evaluacin de procesos:

Actividades, componentes y actores que integran el desarrollo de cada uno de losprocesos: 1) planeacin, 2) difusin, 3) solicitud de apoyos, 4) seleccin debeneficiarios, 5) produccin de bienes y servicios, 6) distribucin de bienes yservicios, 7) entrega de apoyos y 8) seguimiento a beneficiarios y monitoreo deapoyos.

Identificacin y descripcin de los principales cuellos de botella y buenas prcticaso fortalezas.

Determinar los lmites de cada proceso y su articulacin con otros. Suficiencia de los insumos y los recursos disponibles para el funcionamiento de

cada proceso. Indagar si los sistemas de informacin en las distintas etapas del programa

funcionan como una fuente de informacin para los sistemas de monitoreo a nivelcentral y para los ejecutores.

Coordinacin entre los actores, rdenes de gobierno o dependencias involucradases adecuada para la implementacin del proceso.

Evaluar la pertinencia del proceso en el contexto y condiciones en que se

desarrolla. Identificar las caractersticas relacionadas con la importancia estratgica del

proceso. Opinin de los actores usuarios y/o beneficiarios sobre la eficiencia y calidad del

proceso, producto o servicio, as como percepciones y valoraciones de solicitantesinscritos que no resultaron seleccionados como beneficiarios y poblacin objetivoque no se enter del programa.

La existencia de mecanismos para conocer la satisfaccin de los beneficiariosrespecto de los bienes y servicios que ofrece el programa.


8/116

8

Metodologa.

En este apartado se presenta la metodologa desarrollada por el equipo evaluadorpara evaluar el diseo, la operacin y los procesos del programa de apoyo al transportepara estudiantes. Se divide en dos secciones. En la primera seccin se describe el diseometodolgico para evaluar el programa, en funcin de los objetivos general y especficosantes descritos. En una segunda seccin se establece la justificacin de este diseometodolgico.

Desc rip ci n del diseo meto do lgic o.

El diseo metodolgico propuesto establece como punto de partida los objetivosespecficos del estudio, los cuales proponen evaluar el programa en relacin con tresaspectos fundamentales: diseo, operacin y procesos.

Evaluacin de diseo.

El objetivo especfico de la evaluacin de diseo es analizar la consistenciainterna del programa e identificar ajustes a las reglas de operacin del siguiente ejercicio,y para ello se establecen varios temas de evaluacin (vase el cuadro 1 as como losTDR, p. 4). Para contribuir al logro de dicho objetivo se sigui el modelo de trminos dereferencia para evaluar el diseo de un programa social, elaborado por el ConsejoNacional de Evaluacin de la Poltica de Desarrollo Social (Coneval). Dicho modelo estbasado en la inclusin de distintas preguntas cuyas respuestas se fundamentan en unanlisis de gabinete realizado con la informacin de que disponga la dependenciaresponsable del programa, entre otra. Si bien esta metodologa no puede trasladarse demanera ntegra al caso del Programa de apoyo al transporte para estudiantes, por tratarseste de un programa estatal, s se tom de base para el cumplimiento del objetivoespecfico de la evaluacin de diseo. En este sentido se dividi esta evaluacin en cincoapartados:

Justificacin de la creacin y diseo del programa. Reglas de operacin. Contribucin a los objetivos estatales de desarrollo. Anlisis de consistencia del programa en funcin de su poblacin potencial y

objetivo. Anlisis de consistencia del programa en funcin de la matriz de indicadores de

resultados (MIR, o su equivalente).

La evaluacin de cada uno de estos apartados se realiz de acuerdo con lametodologa propuesta en el cuadro 1. Como se puede apreciar, a cada apartadocorresponde una serie de temas de evaluacin (propuestos en los TDR), los cuales fueron

abordados a partir de preguntas o indicadores especficos tomados, en su mayora, de losTDR de la evaluacin de diseo de Coneval (vase Coneval Diseo). Asimismo, el cuadro1 tambin especifica los insumos principales que fueron utilizados en el trabajo degabinete para responder las preguntas o buscar los datos para los indicadorespropuestos.


9/116


10/116

10

Apartado Temas de evaluacin(segn TDR) Preguntas o indicadores*Insumos y/oinstrumentos

caractersticas del propsito de la MIR

Anlisis decaractersticas del fin dela MIR

Anlisis del resumennarrativo de la MIR en eldocumento normativo

Anlisis de indicadores para medir desempeoen funcin de cada unode los niveles deobjetivos de la MIR

Existencia y anlisis defichas tcnicas de losindicadores del

programa Anlisis de

caractersticas de lasmetas de los indicadoresde la MIR

Anlisis decaractersticas de losmedios de verificacinde los indicadores de laMIR

Valoracin final de laMIR

* Los indicadores y/o preguntas en cursivas se incluyen en los trminos de referencia de la evaluacin dediseo de Coneval (Coneval Diseo), y en esta propuesta son tomadas como referencia metodolgica para

la evaluacin de diseo, sin que ello implique, necesariamente, que se aplicaron de manera similar a comopropone el Coneval.** Segn los TDR, el trabajo o anlisis de gabinete incluye actividades de acopio, organizacin,

sistematizacin y valoracin de la informacin contenida en registros administrativos, bases de datos,documentos oficiales, documentos normativos, sistemas de informacin, entre otros (TDR, p. 5). Entre losdocumentos a consultar se encuentran la normatividad aplicable, los diagnsticos y estudios relacionadoscon la problemtica del programa y su marco de operacin, los sistemas de informacin, las bases de datosdel padrn de beneficiarios, los documentos de trabajo e institucionales y los informes de avances delprograma (TDR, pp. 5-6).

En general, para evaluar cada tema de evaluacin (segunda columna del cuadro1), la metodologa de Coneval plantea una pregunta especfica para dicho tema, la cualdebe responderse con un s o un no. La temtica de dichas preguntas se esboza en latercera columna del cuadro 1. Cuando la respuesta es afirmativa se solicita que elevaluador seleccione un cierto nivel (generalmente va del 1 al 4) de acuerdo condiferentes criterios para cada nivel, presentados en tablas. La metodologa para laevaluacin de diseo procedi en funcin de cada tema de evaluacin, a partir depreguntas especficas inspiradas, en la medida de las posibilidades y congruencia demtodos, en los trminos de referencia de la evaluacin de diseo de Coneval (ConevalDiseo). As por ejemplo, para el tema de evaluacin Verificar si el programa identific elproblema o necesidad prioritaria al que va dirigido y si est diseado para solventarlo(segunda columna del cuadro 1), se plante una pregunta relativa al Problema onecesidad prioritaria a resolver (tercera columna del cuadro 1), la cual se traduce, en la


11/116

11

metodologa de Coneval, en la siguiente pregunta especfica: El problema o necesidadprioritaria que busca resolver el programa est identificado en un documento que cuentacon la siguiente informacin: a) el problema o necesidad se formula como un hechonegativo o como una situacin que puede ser revertida; b) se define la poblacin que tieneel problema o necesidad (Coneval Diseo, p. 6). Dicha pregunta tiene los siguientesniveles y criterios para el caso de una respuesta afirmativa:

Nivel Criterios

1 El programa tiene identificado el problema o necesidad que busca resolver, y El problema no cumple con las caractersticas establecidas en la pregunta.

2 El programa tiene identificado el problema o necesidad que busca resolver, y El problema cumple con al menos una de las caractersticas establecidas en la

pregunta.

3 El programa tiene identificado el problema o necesidad que busca resolver, y El problema cumple con todas las caractersticas establecidas en la pregunta.

4

El programa tiene identificado el problema o necesidad que busca resolver, y

El problema cumple con todas las caractersticas establecidas en la pregunta, y El programa actualiza peridicamente la informacin para conocer la evolucin del

problema.Fuente: Coneval Diseo, p. 6.

La metodologa de este estudio tom cada pregunta de Coneval como punto departida para evaluar los distintos temas incluidos en el cuadro 1. Es importante sealarque la ejecucin de un programa estatal presenta realidades muy distintas a la operacinde los programas federales que contempla Coneval. Por esta razn, en algunos casos fuenecesario seguir los lineamientos de los mtodos de esta dependencia federal slo comouna gua que facilitara la evaluacin, y no como el elemento fundador de una metodologaque est pensada para una realidad distinta a la del Estado de Jalisco.

Evaluacin de operacin.

El objetivo especfico de la evaluacin de operacin es verificar la observancia delas reglas de operacin y generar informacin relativa a indicadores financierosrelacionados a su operacin, y para ello se establecen varios temas de evaluacin (vaseel cuadro 2 as como los TDR, p. 3). Al igual que en la evaluacin de diseo, el Conevalha elaborado un modelo de trminos de referencia para evaluar la operacin de unprograma social, incluido en las denominadas evaluaciones de consistencia y resultados(Coneval Operacin). Se tom como base este modelo, el cual est centrado tambin enpreguntas y la bsqueda de evidencias para contestarlas, generalmente a partir deltrabajo de gabinete. Como sucedi con la evaluacin de diseo, la metodologa no setraslad de forma ntegra al programa que nos ocupa, si bien result un referente til parael cumplimiento del objetivo especfico de la evaluacin de operacin. En este sentido sedividi esta evaluacin en cinco apartados:

Anlisis de procesos y descripcin de la operacin del programa. Anlisis de la administracin financiera y de gasto del programa. Sistematizacin de la informacin. Cumplimiento y avance de indicadores. Rendicin de cuentas, difusin y satisfaccin con el programa


12/116

12

La evaluacin de cada uno de estos apartados se realiz de acuerdo con lametodologa propuesta en el cuadro 2, de manera similar a como se procedi en laevaluacin de diseo (vase el cuadro 1).

Cuadro 2. Propuesta de evaluacin de operacin del Programa de apoyo altransporte para estudiantes

Apartado Temas de evaluacin(segn TDR) Actividades o indicadoresInsumos y/oinstrumentos

Anlisis deprocesos ydescripcin dela operacin delprograma

La observancia de lasreglas de operacin yotras disposicionesnormativas aplicablesal programa

Los mecanismos deorganizacin y gestindel programa

Anlisis de las ROP y losdocumentos normativos delprograma

Descripcin del procesogeneral del programa mediantediagrama de flujo (estaactividad ser importante parala evaluacin de procesos)

Anlisis e identificacin demecanismos de los distintosaspectos del programa enrelacin con las solicitudes deapoyo, la seleccin debeneficiarios, los tipos deapoyos y la ejecucin de obrasy/o acciones

ROP Normatividad

existente Padrn de

beneficiariosdel programa

Trabajo degabinete apartir de losTDR deConeval(ConevalOperacin)

Anlisis de laadministracinfinanciera y degasto

La administracinfinanciera de losrecursos

La eficacia, eficiencia yeconoma operativa del

programa

Identificacin y cuantificacinde los gastos en que incurre elprograma para generar losbienes y servicios que ofrece,desglosados en distintos

rubros de gasto Fuentes de financiamiento parala operacin del programa yproporcin que representancada una de las fuentesrespecto del presupuesto totaldel programa

ROP Fuentes

presupuestalesdel programa

Trabajo de

gabinete

Sistematizacinde lainformacin

La sistematizacin dela informacin

Anlisis de caractersticasdiversas de las aplicacionesinformticas o sistemasinstitucionales del programa

Bases de datos Trabajo de

gabinete

Cumplimiento yavance deindicadores

El cumplimiento yavance en losindicadores de gestiny de productos

Avance de los indicadores deservicios y de gestin y deresultados de la MIR respectode sus metas

Matriz deindicadores Trabajo de

gabinete

Rendicin decuentas,difusin ysatisfaccin conel programa

La rendicin decuentas y difusin deinformacin estratgica

Existencia demecanismos para

Existencia de mecanismos detransparencia y rendicin decuentas con diversascaractersticas

Existecia de mecanismos de

ROP Trabajo de

gabinete Informes


13/116

13


conocer la satisfaccinde los beneficiariosrespecto de los bienesy servicios que ofreceel programa

opinin

Al igual que en la evaluacin de diseo, la metodologa que se plantea para lostemas de evaluacin de operacin del cuadro 2 tom como referencia los indicadores ypreguntas contenidos en los trminos de referencia de la evaluacin de consistencia yresultados de Coneval (Coneval Operacin), adaptados al contexto estatal.

Evaluacin de procesos.

El objetivo especfico de la evaluacin de procesos es realizar un anlisissistemtico de la gestin operativa del programa que permita valorar si dicha gestincumple con lo necesario para el logro de las metas y objetivo del programa, y al igual que

en las evaluaciones de diseo y operacin, se establecen diversos temas de evaluacin(vase el cuadro 3 as como los TDR, p. 3). En este caso la evaluacin de operacin seconvirti en uno de los insumos clave de la evaluacin de procesos. Adems, sta tomcomo punto de partida, de manera similar a las evaluaciones anteriores, el modelo detrminos de referencia de Coneval para evaluar los procesos de un programa social(Coneval Procesos 2013). Este se basa en un anlisis alrededor de ocho procesoscentrales con los que debera contar todo programa (vase la nota al pie del cuadro 3). Eneste sentido se dividi esta evaluacin en tres apartados:

Descripcin y anlisis de procesos (para cada proceso del modelo Coneval). Valoracin general de procesos. Anlisis de opinin sobre procesos.

La evaluacin de cada uno de estos apartados se realiz de acuerdo con lametodologa propuesta en el cuadro 3, de manera similar a como se procedi en lasevaluaciones de diseo y operacin (vanse los cuadros 1 y 2).

Cuadro 3. Propuesta de evaluacin de procesos del Programa de apoyo altransporte para estudiantes


Descripciny anlisis deprocesos(para cadaproceso delmodeloConeval)*

Descripcin del proceso:identificar las actividades,componentes y actores queintegran el desarrollo de cadauno de los procesos

Determinar los lmites de cadaproceso y su articulacin conotros

Determinar si los insumos y losrecursos disponibles sonsuficientes y adecuados para elfuncionamiento de cada proceso

Identificar si los productos del

Revisar la normatividadaplicable y la evaluacinde operacin

Entrevistas a losresponsables de losprocesos

Evaluacin deoperacin

ROP

Normatividadexistente Trabajo de

campo conguion deentrevistasemi-estructurada


14/116

14


proceso sirven de insumo paraejecutar el proceso subsecuente

Indagar si los sistemas deinformacin en las distintasetapas del programa funcionancomo una fuente de informacinpara los sistemas de monitoreo anivel central y para losejecutores.

Identificar si la coordinacin entrelos actores, rdenes de gobiernoo dependencias involucradas esadecuada para laimplementacin del proceso

Evaluar la pertinencia delproceso en el contexto ycondiciones en que se desarrolla

Identificar las caractersticasrelacionadas con la importanciaestratgica del proceso

Valoracingeneral deprocesos

Identificacin y descripcin de losprincipales cuellos de botella

Identificacin y descripcin de lasbuenas prcticas o fortalezas dela operacin del programa

Anlisis de la operacindel programa paradetectar cuellos debotella, buenas prcticaso fortalezas

Identificacin de causasy consecuencias decuellos de botella

Entrevistas a los actoresclave del programa

Trabajo decampo conguion deentrevistasemi-estructurada

Anlisis deopininsobreprocesos

Opinin de los actores (usuariosy/o beneficiarios) sobre laeficiencia y calidad del proceso,producto o servicio

Opinin de los no beneficiariossobre el programa y las razonespor las que no terminaron elproceso de inscripcin

Entrevistas a los actoresclave del programa Entrevistas a una

muestra reducida debeneficiarios delprograma

Entrevista a una muestrareducida de personasque no recibieron elservicio

Trabajo decampo conguion deentrevistasemi-estructurada ycuestionariosa beneficiariosy nobeneficiarios

* El modelo Coneval consiste en ocho procesos, mismos que se incluyen en los TDR de esta evaluacin: 1)planeacin, 2) difusin, 3) solicitud de apoyos, 4) seleccin de beneficiarios, 5) produccin de bienes yservicios, 6) distribucin de bienes y servicios, 7) entrega de apoyos y 8) seguimiento a beneficiarios ymonitoreo de apoyos. (Coneval Procesos 2013, p. 14).

De los tres tipos de evaluacin llevados a cabo en este estudio, la de procesos esla que ms se basa en el trabajo de campo para obtener evidencias y establecerhallazgos. El programa de apoyo al transporte para estudiantes atendi a ms de 75 milbeneficiarios en la ZMG y a ms de 7 mil en el interior del Estado1 durante 2013 (Informe

1 Segn se establece en los TDR (p. 2), el programa cuenta con tres modalidades de

apoyo: zona metropolitana de Guadalajara; estudiantes regionales; y estudiantes interregionales.


15/116

15

anual, p. 4). Para obtener opiniones sobre el programa se dise un trabajo de campodividido en cuatro grupos de entrevistados. Los dos primeros correspondieron asolicitantes de los apoyos en la ZMG. El anlisis se llev a cabo mediante dos grupos deenfoque, uno para los beneficiarios de los bienevales y otro para los solicitantes que,habiendo iniciado el proceso de inscripcin, no lo terminaron y por tanto no se convirtieronen usuarios finales de los apoyos. Por otro lado, los dos grupos restantes de entrevistadoscorrespondieron a los usuarios del interior del Estado. El anlisis se llev a cabo medianteentrevistas telefnicas, utilizando un cuestionario para quienes recibieron los beneficios yotro para quienes, al igual que en la ZMG, iniciaron los trmites de inscripcin pero no losconcluyeron. La seleccin de todos los entrevistados se realiz de manera aleatoria,utilizando la informacin proporcionada por la Direccin General de Poltica Social (DGP)de la Secretara. Sin embargo, es importante mencionar que debido a que estos gruposde beneficiarios y no beneficiarios no representan una muestra vlida de todos losinvolucrados dentro del programa, los resultados deben tomarse slo como unaaproximacin a los distintos aspectos incluidos en las entrevistas, los cuales giraronalrededor de la calidad y satisfaccin con los servicios del programa. As, en modo algunopodra generalizarse la opinin de estos entrevistados a la opinin que pudiera tener unamuestra ms amplia y representativa de los estudiantes que utilizan el transporte pblico.

An as y como se ver en los anlisis de opinin sobre los procesos del programa, lospuntos de vista obtenidos a travs de este ejercicio resultaron muy reveladores en cuantoa la manera en que es valorado el programa y arrojan luz sobre su operacin general.

Jus tific acin d el di seo m etodo lgico.

La metodologa que plante el equipo evaluador se sustent en dos pilares.Primero, la atencin puntual a cada tema de evaluacin contemplado para las fases dediseo, operacin y procesos del programa, a partir de preguntas, indicadores oactividades concretas que midieron o aportaron la informacin necesaria para evaluarlos.Y segundo, la fundamentacin de estas preguntas e indicadores en metodologas que hansido puestas a prueba por parte de Coneval en la evaluacin de los programas sociales

federales. Ello permiti realizar, de manera ms slida, no slo la evaluacin delprograma en sus distintas fases, sino el anlisis FODA que se solicit en los TDR y lapropuesta de recomendaciones. Ambos elementos analticos (FODA y recomendaciones)se derivan de la lgica de medicin de cada tema de evaluacin a partir de indicadores yaprobados en gabinete y campo por parte de la dependencia federal, y que se presentanen el captulo 4 de este estudio.

Sin embargo, en este estudio se agrupan en la zona interior del Estado a los estudiantes de lasdos ltimas modalidades.


16/116

16

Captulo 1. Evaluacin de diseo

La evaluacin de diseo del programa de apoyo al transporte para estudiantestoma como base metodolgica los trminos de referencia de la evaluacin de diseo deConeval (Coneval Diseo). Como se mencion en el apartado metodolgico de esteestudio, stos consisten en evaluar un programa a partir de la respuesta a preguntasespecficas mediante un esquema binario (S/No), sustentado en evidencia documental yexplicitando los argumentos empleados en el anlisis (Coneval Diseo, p. 3). Existenpreguntas donde la respuesta S d ebe seleccionar uno de cuatro niveles de respuestadefinidos para cada pregunta, donde el nivel 1 representa el menor nmero decaractersticas presentes en dicha pregunta y el 4 el mayor nmero. Debe comentarseque dentro de la metodologa de Coneval existen algunas preguntas que no admiten unarespuesta binaria, y por tanto se responden a partir de argumentos sustentados en elanlisis documental.

La evaluacin de diseo se compone de cinco apartados (con sus respectivostemas de evaluacin en funcin de los TDR) y 18 preguntas. En el siguiente cuadro sepresentan los apartados de evaluacin y las preguntas que les corresponden.

Apartado de evaluacin Preguntas1.1. Justificacin de la creacin y diseo del programa 1 a 31.2. Reglas de operacin 41.3. Contribucin a los objetivos estatales de desarrollo 51.4. Anlisis de consistencia del programa en funcin de su poblacin

potencial y objetivo 6 a 81.5. Anlisis de consistencia del programa en funcin de la matriz de

indicadores de resultados (MIR) 9 a 18


17/116

17

1.1. Justificacin de la creacin y diseo del programa.Tema de evaluacin Pregunta

Verificar si el programa identific el problema o necesidad prioritaria alque va dirigido y si est diseado para solventarlo 1, 2Verificar si existe evidencia cientfica estatal, nacional o internacionalque muestre que el tipo de apoyo que brinda el programa contribuyepositivamente a la consecucin de su Fin y Propsito

3


18/116

18

1. El problema o necesidad prioritaria que busca resolver el programa estidentificado en un documento que cuenta con la siguiente informacin:a) El problema o necesidad se formula como un hecho negativo o como una

situacin que puede ser revertida.b) Se define la poblacin que tiene el problema o necesidad.

El programa cuenta con una matriz de indicadores de resultados (MIR), elaboradapor la Secretara, donde se define el problema o necesidad prioritaria a atender:Contribuir a la disminucin de la desercin escolar para que ningn estudiante deje deasistir a la escuela por falta de recursos, apoyando la economa familiar e incentivando eltransporte pblico sobre el privado. En otros documentos se establece de manera msprecisa que el principal problema que busca atender el programa es la disminucin de ladesercin escolar de las personas en edad escolar. As, en el diagnstico del programa sepuede leer que el reto ms importante del programa es Disminuir la desercin escolar porno contar con los recursos econmicos para trasladarse a la escuela, es decir, por faltade dinero para solventar los gastos de transporte (Diagnstico, pp. 7-8). De manerasimilar, en las ROP se establece que una gran proporcin de los estudiantes de nivelesmedio, medio superior y superior de la ZMG no pueden cubrir la totalidad de los viajesrelacionados con transporte escolar, lo cual se convierte en una preocupacin grandepara las familias, derivando en muchas ocasiones en uno de los principales motivos dedesercin escolar (pp. 22-23). En este sentido, puede decirse que el programa tieneidentificado el problema o necesidad que busca resolverSin embargo, debe comentarse que en ocasiones el programa no clarifica que ladesercin escolar sea el principal problema a atender, y en algunas porciones de susdocumentos normativos identifica otros problemas como susceptibles de ser atendidos,tales como apoyar la economa familiar (que es parte del Fin de la MIR) o facilitar lamovilidad de los estudiantes a los centros escolares (que es parte del objetivo general delprograma contenido en las ROP).

Por otro lado, el programa tambin define a la poblacin que presenta lanecesidad. Como se ha mencionado, las ROP la refieren como los estudiantes de nivelesmedio, medio superior y superior, aunque slo de la ZMG.

Respuesta Nivel Criterios

S 3

El programa tiene identificado el problema o necesidad que buscaresolver, y

El problema cumple con todas las caractersticas establecidas en lapregunta.


19/116

19

2. Existe justificacin terica o emprica documentada que sustente el tipo deintervencin que el programa lleva a cabo?


S 1

El programa cuenta con una justificacin terica o emprica

documentada que sustente el tipo de intervencin que el programalleva a cabo en la poblacin objetivo, y La justificacin terica o emprica documentada no es consistente

con el diagnstico del problema.

Existe una justificacin terica del programa que est sustentada en dos hechosque se presentan en la poblacin jalisciense en particular y mexicana en general y que sedocumentan en las ROP. Por un lado, 36.1% de los estudiantes de niveles medio, mediosuperior y superior de la ZMG utilizan transvales (los cuales constituyen un instrumento deapoyo econmico para el transporte en la actualidad). Y por el otro, el ingreso real de loshogares mexicanos se ha reducido en 12.3% de 2008 a 2010, y ello ha significado paraJalisco que el porcentaje de personas con un ingreso inferior a la lnea de bienestar

mnimo (canasta alimentaria) pasara de 9.6% a 14.4% en el mismo periodo (p. 23). Enotras palabras, se establece que una proporcin importante del estudiantado de Jalisco(en particular de la ZMG) utiliza el transporte pblico como medio de movilidad y que lapoblacin del Estado en general ha sufrido una prdida de su ingreso. A partir de estosdos hechos se realiza un supuesto terico que constituye la pieza principal de la

justificacin del programa. Consiste en plantear que el costo del transporte representa,para los estudiantes y sus familias, una proporcin (y preocupacin) importante del gastofamiliar (hasta un 30%), y que de no apoyarse constituira uno de los principales motivosde desercin escolar (ROP, p. 23).

Sin embargo, no se ofrece evidencia emprica adicional que establezca que elaumento en la desercin escolar puede estar motivado por el aumento o la falta de apoyoen el pago del transporte. Si bien esta posibilidad existe, no hay una conexin ms

consistente entre ambos fenmenos, y por tanto se necesitara mayor evidencia quecorroborara los factores que impactan en mayor medida la desercin escolar en losniveles medio, medio superior y superior del Estado de Jalisco.


20/116

20

3. El programa cuenta con evidencia de estudios o investigaciones cientficasestales, nacionales y/o internacionales que muestren que el tipo de servicios oproductos que brinda el programa es adecuado para la consecucin del Fin yPropsito que persigue el programa?

No.

Si bien el programa plantea su justificacin a partir de cifras concretas del contextosocioeconmico estatal y nacional, no cuenta con evidencia de estudios o investigacionesnacionales y/o internacionales que muestren que los apoyos al transporte que otorga sonadecuados para la consecucin del Fin y Propsito del programa, es decir, para ladisminucin de la desercin escolar y para que los estudiantes de Jalisco cuenten conincentivos que les faciliten permanecer y concluir sus estudios mediante apoyos altransporte, respectivamente.

Sin embargo, debe destacarse que en el documento titulado Transporte Escolar.Hacia una movilidad urbana integral, el programa hace una referencia breve al Programade Transporte Escolar del Distrito Federal (PROTE), de la siguiente manera: Laimplementacin en febrero del 2009 del Programa de Transporte Escolar Obligatorio en elDistrito Federal, mediante un Decreto oficial; ha producido hallazgos importantes en suoperacin, como la reduccin de la emisin de contaminantes que producen el efectoinvernadero, liberacin de espacio pblico al disminuir el parque vehicular que acceden alas escuelas en las horas de entrada y salida, menor consumo de combustibles al migrarde auto particular al transporte escolar en los viajes de los alumnos, el incremento en 5.5Km/Hr la velocidad promedio de circulacin, entre otros efectos (Diagnstico movilidad, p.14).


21/116

21

1.2. Reglas de operacin.

Tema de evaluacin PreguntaVerificar que las reglas de operacin o normativa expliquen elfuncionamiento y operacin del programa 4


22/116

22

4. Las ROP establecen el funcionamiento u operacin del programa en el estado?

S.

Las ROP cuentan con tres captulos que establecen el funcionamiento y laoperacin general del programa: el 4 relativo a Lineamientos Generales, el 5 relativo alos Beneficiarios y el 6 titulado De la operacin o instrumentacin del programa. En loslineamientos generales se detallan la cobertura, la poblacin objetivo, los tipos de apoyo ylos montos y topes mximos de apoyo del programa. Por su parte, en el captulo debeneficiarios se detallan los criterios de elegibilidad y requisitos as como los criterios deseleccin y las causales de baja de los beneficiarios. Todos estos elementos constituyenuna parte importante del funcionamiento del programa. Por otro lado, en el captulorelativo a la operacin e instrumentacin del programa se especifican quines son lasautoridades responsables y cules son los instrumentos de la operacin (tales como elpadrn nico de beneficiarios y la tarjeta de usuario). Asimismo, se especifican los perfilesde los solicitantes y la instancia normativa que regular el programa. Por ltimo tambinaparece la relacin que guardar el programa respecto a la comprobacin de recursosante la Secretara de Planeacin, Administracin y Finanzas (SEPAF) as como lacoordinacin interinstitucional que habr de cumplir.En este sentido, estos tres captulos refieren la manera en que el programa tendraque funcionar y operar dentro del Estado.


23/116

23

1.3. Contribucin a los objetivos estatales de desarrollo.

Tema de evaluacin PreguntaIdentificar la contribucin del programa a los objetivos estratgicos delPlan Estatal de Desarrollo a travs de la Secretara de Desarrollo eIntegracin Social

5


24/116

24

5. A qu ejes temticos y objetivos estratgicos del Plan Estatal de Desarrollovigente contribuye el objetivo del programa?

El programa contribuye a realizar el objetivo de desarrollo 18 del PED (OD18),relativo a Promover una sociedad incluyente que garantice el respeto a la diversidadsocial y los derechos de las personas en situacin de vulnerabilidad, as como fomentar eldesarrollo de los pueblos indgenas respetando su identidad cultural ( PED, p. 15), el cualse encuentra dentro de la temtica 18 del Plan, Grupos prioritarios, perteneciente a ladimensin de Equidad de oportunidades. Dicho objetivo de desarrollo se realiza a travsdel objetivo sectorial 3 (OD18O3), que consiste en Promover la integracin de los

jvenes a la educacin, a la economa y al desarrollo personal (PED, p. 416), enparticular por medio de la estrategia 1 (O3E1), a saber, Coordinar un transporte gratuitopara estudiantes de la ZMG (PED, p. 416).

La siguiente tabla muestra, siguiendo el orden jerrquico establecido en el PED(de mayor a menor orden), los contenidos a los que contribuye el programa en el marcodel PED.

Elementodel PED

ContenidoDimensin Equidad de oportunidadesTemtica 18 Grupos prioritarios

Objetivo dedesarrollo 18

Promover una sociedad incluyente que garantice el respeto a ladiversidad social y los derechos de las personas en situacin devulnerabilidad, as como fomentar el desarrollo de los pueblos indgenasrespetando su identidad cultural

Objetivosectorial 3

Promover la integracin de los jvenes a la educacin, a la economa yal desarrollo personal

Estrategia 1 Coordinar un transporte gratuito para estudiantes de la ZMG


25/116

25

1.4. Anlisis de consistencia del programa en funcin de su poblacin potencialy objetivo.

Tema de evaluacin PreguntaVerificar que la definicin de poblacin potencial y objetivo est conbase en la distribucin de la necesidad que busca solventar elprograma y si cuenta con mecanismos de seleccin de dicha poblacin

6

Sustentar la justificacin por la cual los beneficios se dirigen de maneraespecfica a dicha poblacin potencial y objetivo 6, 7Verificar los criterios y mecanismos aplicados para seleccionar a losbeneficiarios 7Verificar la estructura del padrn de beneficiarios del programaconforme a las disposiciones aplicables 8


26/116


27/116

27

7. Existe informacin que permita conocer quines reciben los apoyos delprograma (padrn de beneficiarios) que:a) Incluya las caractersticas de los beneficiarios establecidas en su documento

normativo.b) Incluya el tipo de apoyo otorgado.c) Est sistematizada.d) Cuente con mecanismos documentados para su depuracin y actualizacin.


S 2 La informacin de los beneficiarios cumple con do de lascaractersticas establecidas.

El programa cuenta con un padrn de beneficiarios que permite conocer quinesreciben los apoyos y que cumple con los siguientes criterios:

a) Incluye las caractersticas de los beneficiarios: a partir del Formato de Padrnnico (FPU) de los Programas Sociales de la Secretara de Desarrollo e

Integracin Social es posible identificar los datos de los estudiantes que recibenlos apoyos en relacin con indicadores como escolaridad, estado civil, gnero,rutas de transporte que utiliza, estructura familiar, salud, ingresos y gastos delhogar y tecnologas de informacin y comunicacin que utilizan. Esta informacin,sin embargo, no se obtuvo de primera mano para los beneficiarios de la ZMG (noas para los del interior del Estado), sino que fue transmitida a la Secretara por lasempresas proveedoras que colaboran con el programa: Masfusin y TISA(Tarjetas Integrales, S.A. de C.V.).

b) Contiene el tipo de apoyo otorgado: las personas que llenan el FPU se encuentranen una base de datos del programa y reciben el apoyo al transporte estipulado enlas ROP. De manera adicional, los beneficiarios pueden solicitar una ampliacin delos apoyos, lo cual tambin se registra dentro del padrn a partir de un formato

que se denomina Programa de apoyo al transporte. Solicitud de ampliacin.Por otro lado, si bien la informacin recabada en el FPU se encuentra en una base

de datos disponible en un sistema informtico, no se puede decir que est sistematizada.Ello debido a que durante 2013 la informacin de los beneficiarios transit entre distintasbases de datos de al menos tres agentes: Masfusin (la empresa que dise el portal deInternet del programa), TISA (la empresa que entrega los bienevales) y la SEDIS.

Asimismo, el programa no cuenta todava con mecanismos documentados paradepurar y actualizar la informacin de los beneficiarios. Durante 2013 se implementarondiversos procesos para realizar dicha depuracin, debido a que la Secretara obtena deterceros (Masfusin y TISA) la informacin de los beneficiarios, la cual no siemprecoincida entre s.


28/116

28

8. La estructura del padrn de beneficiarios del programa se encuentra apegada ala normatividad aplicable.

S.

Las ROP contienen un captulo de beneficiarios donde se establecen los criteriosde elegibilidad y los requisitos para acreditarlos. Los criterios ms importantes son el serestudiante de nivel medio, medio superior o superior, ser residente del Estado de Jalisco yacreditar la necesidad de uso del transporte pblico, lo cual se verifica a partir de tener eldomicilio particular a una distancia mayor de un kilmetro lineal del centro escolar al queest adscrito (ROP, pp. 25-26). El FPU y por tanto el padrn de beneficiarios recaba datosque estn apegados a esta normatividad, como los siguientes:

Nombre y domicilio de la institucin educativa a la que asiste el beneficiario. Cdigo de alumno. Rutas de transporte que utiliza el beneficiario para trasladarse a su escuela. Domicilio detallado del beneficiario.

Sin embargo, debe comentarse que si bien se cuenta con un padrn debeneficiarios para el programa, ste no est disponible en una sola base de datos a lacual pueda accederse de manera uniforme. Durante 2013 el padrn cont con variasversiones, lo cual contribuy a que no se contase con informacin homologada y establesobre los beneficiarios del programa.


29/116

29

1.5. Anlisis de consistencia del programa en funcin de la matriz de indicadoresde resultados (MIR).

Tema de evaluacin PreguntaVerificar la lgica vertical y horizontal de la matriz de indicadores delprograma. 9 a 18


30/116

30

1.5.1. De la lgica vertical de la m atriz de ind icado res.


31/116

31

9. Para cada uno de los Componentes de la MIR del programa existe una o ungrupo de Actividades que:a) Estn claramente especificadas, es decir, no existe ambigedad en su

redaccin.b) Estn ordenadas de manera cronolgica.c) Son necesarias, es decir, ninguna de las Actividades es prescindible para

producir los Componentes.d) Su realizacin genera junto con los supuestos en ese nivel de objetivos losComponentes.


S 3 Del 70 al 84% de las Actividades cumplen con todas lascaractersticas establecidas en la pregunta.

El programa cuenta con dos Componentes, uno para cada tipo de apoyo altransporte segn se determina en las ROP, a saber, en la ZMG y el interior del estado. Sedefinieron, respectivamente, como sigue: Apoyos a los estudiantes de nivel medio, medio

superior y superior de la Zona Metropolitana de Guadalajara para el pago de transporteentregados, y Apoyos a los estudiantes de n ivel medio, medio superior y superior delinterior del Estado para el pago de transporte entregados.a) Las Actividades para cada uno de los Componentes estn especificadas, ya que cada

una se constituye en una tarea o insumo que se diferencia de las otras. Para elComponente 1, por ejemplo, la actividad de difundir el programa es claramente distintaa la de firmar el contrato con la empresa operadora del servicio, y sta a su vez estseparada de las Actividades de empadronamiento y validacin de beneficiarios,entrega de apoyos y comprobacin de recursos.

b) Todas estas Actividades estn ordenadas de manera cronolgica: se inicia con ladifusin del programa y se termina con la comprobacin del gasto. Sin embargo, no sepuede decir lo mismo del orden cronolgico de las actividades del Componente 2,

donde primero aparece la actividad relativa al empadronamiento y despus la que tieneque ver con la firma de convenio (en ese caso, con los municipios y/o planteleseducativos).

c) Las Actividades que se plantean son todas necesarias para producir ambosComponentes. Esto puede apreciarse a travs de la nica Actividad que resulta distintaente los dos Componentes. En el caso de la ZMG se refiere a la firma del contrato conla empresa operadora de transvales, mientras que en el interior del estado se refiere ala firma de convenios con municipios y entidades educativas. Ello resulta comprensibletoda vez que en la ZMG exista una empresa que apoyaba los subsidios al transporteescolar y cuya lgica de operacin dentro de toda la ciudad (sin tomar enconsideracin las divisiones municipales) resultaba en una mayor eficiencia en laprovisin del servicio. Esto no resulta posible con el resto de los municipios del estado,

donde tiene que procederse de acuerdo con las realidades regionales y decoordinacin que permitan la operacin del programa fuera de la ZMG.d) Finalmente, se considera que la realizacin de las Actividades producirn los

Componentes propuestos, tomando en cuenta las restricciones que se plantean en lossupuestos de cada Actividad. En efecto, las Actividades de difusin, firma deconvenios, empadronamiento y validacin de beneficiarios, entrega de apoyos ycomprobacin del recurso lograran producir la entrega de apoyos escolares a lapoblacin objetivo, tanto en la ZMG como fuera de sta.


32/116

32

10. Los Componentes sealados en la MIR cumplen con las siguientescaractersticas:a) Son los bienes o servicios que produce el programa.b) Estn redactados como resultados logrados, por ejemplo becas entregadas.c) Son necesarios, es decir, ninguno de los Componentes es prescindible para

producir el Propsito.d) Su realizacin genera junto con los supuestos en ese nivel de objetivos elPropsito.


S 4 Del 85 al 100% de los Componentes cumplen con todas lascaractersticas establecidas en la pregunta.

Los Componentes del programa son los siguientes: Apoyos a los estudiantes denivel medio, medio superior y superior de la Zona Metropolitana de Guadalajara para elpago de transporte entregados, y Apoyos a los estudiantes de nivel medio, mediosuperior y superior del interior del Estado para el pago de transporte entregados. Ambos

especifican las caractersticas planteadas en los cuatro incisos de la pregunta: a) losbienes o servicios producidos son los apoyos entregados a los estudiantes de los nivelesmedio, medio superior y superior, tanto de la ZMG como del interior del estado; b) estnredactados como resultados logrados, en este caso, apoyos entregados; c) sonnecesarios para producir el Propsito, el cual se centra en la entrega de apoyos oincentivos en las dos divisiones territoriales marcadas en las ROP y que se correspondencon cada Componente (ZMG e interior del estado); y d) la realizacin de ambosComponentes genera el Propsito planteado si se toman en cuenta los Supuestos destos.

Sin embargo, debe comentarse que dichos Componentes son suficientes para larealizacin del Propsito (ltimo inciso de la pregunta) slo bajo el supuesto de que ladesercin escolar puede disminuirse de manera importante a travs del otorgamiento de

apoyos al transporte escolar, lo cual no resulta necesariamente cierto, ya que la desercinescolar puede darse por razones fuera del alcance de un apoyo al transporte (vasetambin la respuesta a la siguiente pregunta).


33/116

33

11. El Propsito de la MIR cuenta con las siguientes caractersticas:a) Es consecuencia directa que se espera ocurrir como resultado de los

Componentes y los supuestos a ese nivel de objetivos; b) su logro no estcontrolado por los responsables del programa; c) es nico, es decir, incluye unsolo objetivo; d) est redactado como una situacin alcanzada, por ejemplo:morbilidad en la localidad reducida; e) Incluye la poblacin objetivo.


S 1 El Propsito cumple con dos de las caractersticas establecidasen la pregunta.

El Propsito de la MIR es el siguiente: Los estudiantes del estado de Jaliscocuentan con incentivos que les faciliten permanecer y concluir sus estudios medianteapoyos al transporte que reducen la desercin escolar y respaldan la economa familiar.

A partir de esta redaccin, el Propsito slo cumple con dos caractersticas de lapregunta. En primer lugar, es consecuencia directa de lo que ocurrir como resultado delos Componentes, ya que stos se enfocan en la entrega de apoyos para el transporteescolar, y el Propsito establece que los estudiantes contarn con apoyos al transporte.Y en segundo lugar incluye a la poblacin objetivo, en este caso los estudiantes deJalisco, aunque dicha poblacin bien pudo especificarse de manera ms acorde a loestablecido en las ROP, es decir, los estudiantes de los niveles medio, medio superior ysuperior del estado de Jalisco.

Sin embargo, las otras tres caractersticas no estn presentes en el Propsito de laMIR. No puede decirse que el logro del Propsito no est controlado por los responsablesdel programa, ya que ste se enfoca en el otorgamiento a la poblacin objetivo deincentivos que faciliten permanecer y concluir sus estudios mediante apoyos altransporte, lo cual puede ocurrir de manera relativamente controlada por parte de quien oquienes operan el programa. Asimismo, el Propsito parece incluir ms de un soloobjetivo. De acuerdo con el enfoque de marco lgico, el Propsito es una hiptesis de

algo que debe ocurrir a consecuencia de producir y utilizar los Componentes, es elresultado esperado al final del pe riodo de ejecucin (BID, p. 69). Su construccin sederiva del problema central especificado en el rbol de objetivos que sirve de base para laconstruccin de la MIR. El problema central del programa se identifica en variosdocumentos (Diagnstico, pp. 4, 8; PE, p. 6; ROP, p. 23) como la existencia de ladesercin escolar en la poblacin estudiantil del estado de Jalisco. En este sentido, eltraslado de este problema a un solo objetivo del programa podra haberse relacionado condisminuir la desercin escolar en el estado, el cual podra, a su vez, haberse convertidoen el Propsito del programa. Sin embargo, el Propsito que se plantea en la MIR pareceincluir tanto un proceso (contar con incentivos econmicos para el logro de ciertosobjetivos tales como la permanencia en un plantel escolar) como dos productos oresultados (disminuir la desercin escolar y apoyar la economa familiar). Esto le resta

claridad al Propsito, ya que podra interpretarse que el mismo se deriva de variosobjetivos: otorgar apoyos al transporte, disminuir la desercin escolar, y apoyar laeconoma familiar. Ello podra crear ambigedad ya que la dependencia responsable delprograma podra escoger perseguir el Propsito que percibe como el de mayorimportancia (BID, p. 70).

Finalmente, el Propsito no est redactado como una situacin alcanzada, talcomo desercin escolar reducida, sino como un proceso con objetivos concretos(facilitar que los estudiantes permanezcan y concluyan sus estudios) y dos resultadosfinales (reducir la desercin escolar y respaldar la economa familiar).


34/116

34

12. El Fin de la MIR cuenta con las siguientes caractersticas:a) Est claramente especificado, es decir, no existe ambigedad en su

redaccin.b) Es un objetivo superior al que el programa contribuye, es decir, no se espera

que la ejecucin del programa sea suficiente para alcanzar el Fin.c) Su logro no est controlado por los responsables del programa.d) Es nico, es decir, incluye un solo objetivo.e) Est vinculado con objetivos estratgicos de la dependencia o del programa

sectorial.

No.

El Fin de la MIR es el siguiente: Contribuir a la disminucin de la desercinescolar para que ningn estudiante deje de asistir a la escuela por falta de recursos,apoyando la economa familiar e incentivando el transporte pblico sobre el privado. Apartir de esta redaccin no se identifica una relacin causal entre el Propsito y el Fin delprograma, y por tanto debe considerarse que la informacin relativa a la pregunta esinexistente. Conviene detenerse en cada una de las cinco caractersticas informativas quela pregunta solicita, mostrando la ausencia de stas para poder as fundamentar lanegativa con mayor claridad.

Primero, el Fin incluye dos objetivos parecidos, lo cual abona a la ambigedad ensu redaccin: por un lado, contribuir a la disminucin de la desercin escolar y, por elotro, que ningn estudiante deje de asistir a la escuela por falta de recursos, lo cualequivaldra a contribuir a la disminucin de la desercin escolar provocada por falta derecursos. En este sentido, el primer objetivo estara contenido en el segundo.

Segundo, el Fin no se diferencia de manera clara del Propsito, y por tanto no estredactado como un objetivo superior al cual el programa contribuye. En efecto, tanto Fincomo Propsito incluyen en su redaccin dos objetivos similares: reducir la desercinescolar y apoyar la economa familiar.

Tercero, el logro del Fin, al igual que el del Propsito, tiene elementos de control

que estn al alcance de los responsables del programa. En la medida en que el Fin secentre en contribuir a la disminucin de la desercin escolar a partir del supuesto de quedicha desercin est provocada por falta de recursos, los operadores puedenconcentrarse nicamente en proporcionar tales recursos a los beneficiarios para lograruna disminucin de la desercin escolar y cumplir as con uno de los objetivos principalesdel programa.

Cuarto, el Fin no contiene un nico objetivo, sino varios: disminuir la desercinescolar, apoyar la economa familiar, e incentivar el transporte pblico sobre el privado.

Finalmente, el Fin no se vincula de manera directa a objetivos estratgicos deplaneacin. stos podran relacionarse con la ampliacin de oportunidades educativas delos estudiantes, que es un objetivo de la dependencia, o bien, con uno de los objetivossectoriales del PED: Promover la integracin de los jvenes a la educacin, a la

economa y al desarrollo personal.


35/116

35

13. En el documento normativo del programa es posible identificar el resumennarrativo de la MIR (Fin, Propsito, Componentes y Actividades)?


S 4 Algunas de las Actividades, todos los Componentes, el Propsito y el Fin

de la MIR se identifican en las ROP o documento normativo del programa.

Las ROP son el principal documento normativo del programa, y en el mismo sepueden identificar algunas de las Actividades, los dos Componentes y el Propsito y Finde la MIR. Dentro de las Actividades, las ROP incluyen lo siguiente: los mecanismos dedifusin (captulo 9) y los mecanismos de participacin ciudadana social o comunitaria(captulo 11), ambos relacionados con la Actividad de Difusin del programa; losbeneficiarios (captulo 5), donde se especifican los criterios y acciones relacionados con la

Actividad de Empadronamiento y validacin de beneficiarios; la operacin oinstrumentacin del programa (captulo 6), que incluye acciones relacionadas con las

Actividades de Entrega de apoyos (subcaptulo 6.2 de las ROP, Del solicitante) yComprobacin de recursos (subcaptulo 6.4 de las ROP, Comprobacin de recursosante la Secretara de Planeacin, Administracin y Finanzas).Por su parte, los dos Componentes del programa se establecen tanto en elcaptulo 6 ya mencionado de las ROP como en el 4, relativo a los lineamientos generales,en particular dentro de los subcaptulos 4.3, Tipos de apoyo, y 4.4, Montos y topesmximos de apoyo. En ambos subcaptulos se clarifica la divisin territorial contenida enlos Componentes (ZMG e interior del estado) y se determina la entrega de apoyos a losbeneficiarios, especificndose el monto y los topes mximos para cada divisin delprograma.

Asimismo, el Fin y el Propsito del programa, especialmente los objetivosrelacionados con atacar la desercin escolar y apoyar la economa familiar, se atiendenen las ROP en el captulo introductorio y en el de los objetivos. En particular el objetivogeneral incluye los dos objetivos ya mencionados de Fin y Propsito, como se lee a

continuacin:Objetivo general : Facilitar y promover la movilidad de los estudiantes a los centrosescolares a travs de la implementacin de un mecanismo de subsidio al transporte quecontribuya a la economa de los hogares y a la permanencia de los estudiantes en elsistema educativo.

Por otro lado, los siguientes dos objetivos especficos se relacionan directamentecon el Fin y el Propsito del programa:

a) Promover la permanencia escolar, disminuir la desercin educativa y mejorar laeficiencia terminal de los estudiantes, que por razones econmicas se venimpedidos de realizar o continuar con sus estudios de nivel secundaria, mediosuperior y superior;

b) Apoyar directamente a la economa familiar;

Cabe destacar que el hecho de que las ROP incluyan elementos relacionadostanto con el Fin como el Propsito de la MIR no significa que no haya espacio paramejorar el diseo del programa, ya que como se mencion en preguntas anteriores, sepuede trabajar en diferenciar los objetivos que persiguen el Fin y el Propsito de la MIR.


36/116

36

1.5.2. De la lgic a ho rizont al de la matr iz de indicado res.


37/116

37

14. En cada uno de los niveles de objetivos de la MIR del programa (Fin, Propsito,Componentes y Actividades) existen indicadores para medir el desempeo delprograma con las siguientes caractersticas:a) Claros.b) Relevantes.c) Econmicos.d) Monitoreables.e) Adecuados.


S 4 Del 85% al 100% de los indicadores del programa tienen lascaractersticas establecidas.

La MIR cuenta con 14 indicadores para medir el desempeo del programa: uno anivel de Fin, uno a nivel de Propsito, dos a nivel de Componentes y diez a nivel de

Actividades. Aunque la mayora presenta las cinco caractersticas que se mencionan en lapregunta, hay excepciones, tal como se comenta a continuacin:

a) Claros: todos los indicadores resultaron claros, en virtud de que cuentan con frmulasde clculo precisas e inequvocas. Debe comentarse que los datos de los indicadores anivel de Fin y Propsito se toman de manera directa de fuentes externas a ladependencia, lo cual se especifica en la propia MIR. Sin embargo, valdra la pena quela matriz incluyera las frmulas de dichos indicadores, aun cuando su clculo no searesponsabilidad de la dependencia.

b) Relevantes: la mayora de los indicadores resultaron relevantes, en la medida en quereflejan una dimensin importante del logro del objetivo para cada uno de los nivelesde objetivos de la MIR. La nica excepcin detectada por el equipo evaluador es elindicador del Componente 2, especificado como Nmero de convenios firmados conmunicipios para la puesta en marcha del programa. Este indicador reflejara elesfuerzo realizado por los operadores del programa para lograr que ste penetrara en

los municipios del estado. Sin embargo, el Componente 2 se refiere a los apoyosestudiantiles entregados, y por tanto su unidad de medida tendra que ver ms con losindividuos que con convenios firmados con los municipios.

c) Econmicos: todos los indicadores cuentan con esta caracterstica, debido a que lainformacin que se necesita para generarlos est disponible a un costo mnimo.

d) Monitoreables: los indicadores a nivel de Fin y Propsito resultan monitoreables envirtud de que su clculo est disponible a travs de fuentes externas a la dependencia,y por tanto pueden sujetarse a una verificacin independiente. Lo mismo sucede conlos indicadores a nivel de Componentes y la mayora de los indicadores a nivel de

Actividades. La nica excepcin es el indicador de la Actividad 1 del Componente 1,especificado como Nmero de entradas a la plataforma en Internet del programa.Dicha plataforma no est abierta de manera permanente, y por tanto la verificacin de

este indicador debe realizarse con el apoyo de la dependencia.e) Adecuados: la mayora de los indicadores resultaron adecuados en la medida queaportan una base suficiente para evaluar el desempeo del programa. La excepcin, aligual que sucede con la caracterstica de relevancia, es el indicador del Componente 2,ya que la firma de convenios con los municipios no permite evaluar el desempeo delprograma a partir del nmero de estudiantes que estn siendo beneficiados con elotorgamiento de apoyos para el transporte.


38/116

38

15. Las Fichas Tcnicas de los indicadores del programa cuentan con la siguienteinformacin:a) Nombre.b) Definicin.c) Mtodo de clculo.d) Unidad de Medida.e) Frecuencia de Medicin.f) Lnea base.g) Metas.h) Comportamiento del indicador (ascendente, descendente, regular nominal).

No.

El equipo evaluador no tuvo a su alcance las fichas tcnicas del programa, y portanto debe considerarse que la informacin relativa a esta pregunta es inexistente. Sinembargo, debe mencionarse que la MIR cuenta con la siguiente informacin para cadauno de los indicadores: a) nombre; b) mtodo (frmula) de clculo; c) frecuencia demedicin; y d) metas.


39/116

39

16. Las metas de los indicadores de la MIR del programa tienen las siguientescaractersticas:a) Cuentan con unidad de medida.b) Estn orientadas a impulsar el desempeo, es decir, no son laxas.c) Son factibles de alcanzar considerando los plazos y los recursos humanos y

financieros con los que cuenta el programa.


S 2 Del 50% al 69% de las metas de los indicadores del programa tienenlas caractersticas establecidas.

Las 14 metas establecidas para los 14 indicadores de la MIR presentaninformacin distinta en relacin con las tres caractersticas de la pregunta, como secomenta a continuacin:

a) Unidad de medida: todas las metas cuentan con unidad de medida. Sin embargo,en algunas metas de las Actividades de ambos Componentes se presenta la cifra

que deber alcanzarse al final del ejercicio evaluado, sin mencionarse de maneraexplcita la unidad de medida, aunque sta queda clara en el contexto de lainformacin entregada.

b) Orientadas a impulsar el desempeo: se considera que las metas de losindicadores a nivel de Actividades de la MIR cuentan con esta caracterstica. Sinembargo, no se puede decir lo mismo de las metas a nivel de Fin, Propsito yComponentes (cuatro metas en total). Y no porque dichas metas estn planteadasde manera laxa, sino porque el programa no explica, en ninguno de susdocumentos base, la forma en que establece dichas metas. Sin esta informacinno resulta posible valorar si las metas fueron elaboradas para impulsar eldesempeo del programa, o bien, si se establecieron de manera tal que sucumplimiento no representara complicaciones al final del periodo evaluado.

c) Factibles de alcanzar: las metas a nivel de Actividades son factibles de alcanzar,toda vez que apuntan a las acciones de operacin del programa y estn definidas,en su mayora, en funcin de porcentajes. El resto de las metas adolece de locomentado en la caracterstica anterior, en el sentido de que la falta de explicacinde la manera en que el programa establece sus metas no permite valorar si stasse plantean para impulsar el desempeo o no (y por tanto si resultan factibles dealcanzar o no).


40/116

40

17. Cuntos de los indicadores incluidos en la MIR tienen especificados medios deverificacin con las siguientes caractersticas:a) Oficiales o institucionales.b) Con un nombre que permita identificarlos.c) Permiten reproducir el clculo del indicador.d) Pblicos, accesibles a cualquier persona.


S 4 Del 85% al 100% de los medios de verificacin cumplen con lascaractersticas establecidas en la pregunta.

Las caractersticas que presentan los indicadores son las siguientes:

a) Oficiales o institucionales: todos los indicadores de la MIR cuentan con medios deverificacin de origen oficial o institucional.

b) Nombres de los medios de verificacin: todos los indicadores de la MIRespecifican ya sea el nombre del documento donde puede verificarse lainformacin relativa al indicador, o bien, el nombre del indicador y la fuente oficialde donde puede obtenerse la informacin sobre dicho indicador.

c) Reproduccin del clculo del indicador: los medios de verificacin de losindicadores a nivel de Fin y Propsito provienen de fuentes oficiales confiables(SEP, SEJ, INEA e INEGI), por lo que se considera que esta caracterstica secumple para estos indicadores, aun cuando en la documentacin entregada no sepresenta la frmula de clculo. Para los indicadores a nivel de Componentes y

Actividades se presenta la frmula de clculo y su reproduccin es factible ydirecta una vez que se cuente con los datos oficiales.

d) Pblicos: los medios de verificacin de los indicadores a nivel de Fin y Propsitoson pblicos y pueden obtenerse a travs de Internet. En el caso de los medios deverificacin de los indicadores a nivel de Componentes y Actividades, debeaclararse que estn fundamentados en informacin de la SEDIS cuyadisponibilidad no resulta inmediata, aun cuando es de naturaleza pblica. Tieneque ver con estadsticas que la dependencia debe procesar, con convenios cuyafirma sigue procedimientos que con frecuencia demoran varias semanas, conbitcoras de asistencia que deben validarse, y con informacin financiera quedebe corroborarse. Por tanto su accesibilidad estara sujeta a procedimientos quedemoraran su publicidad inmediata. De cualquier modo, se considera que todaesta informacin resultara asequible para cualquier persona.


41/116

41

18. Sugiera modificaciones en la MIR del programa en cada uno de sus elementos apartir de sus respuestas a las preguntas de este apartado.

Respecto de la lgica vertical de la matriz de indicadores:

Diferenciar los objetivos que persiguen el Fin y el Propsito: la redaccin deambos elementos de la MIR plantea el logro de varios objetivos para cada uno deellos, algunos de los cuales son comunes entre ambos, tales como disminuir ladesercin escolar o apoyar la economa familiar. Conviene dar claridad tanto al Fincomo al Propsito de la MIR en funcin de la definicin de un solo objetivo a nivelde Propsito (derivado del diagnstico del problema y del rbol de objetivos).

Redactar el Fin de manera tal que: a) no exista ambigedad en cuanto a lo quebusca lograr o la contribucin que har a la solucin del problema, para lo cual senecesita centrar en uno y no varios objetivos; b) se diferencie de la redaccin delPropsito; c) su contribucin no est bajo el control de los responsables delprograma; d) se vincule a algn objetivo estratgico de planeacin del desarrollo.

Redactar el Propsito de manera tal que: a) especifique un solo objetivo y seplantee como una nica hiptesis del programa; b) su logro no est determinado obajo el control de los responsables del programa (stos tienen a su cargo laproduccin de los Componentes, pero el logro del Propsito depende de factoresadicionales a la gerencia del programa); c) refleje una situacin alcanzada a partirde la especificacin de un solo objetivo.

Cambiar el orden cronolgico de las Actividades del Componente 2, donde primeroaparece la Actividad relativa al empadronamiento y despus la que tiene que vercon la firma de convenio (en ese caso, con los municipios y/o planteleseducativos). Se considera que habra que intercambiar el orden de estas dos

Actividades.

Respecto de la lgica horizontal de la matriz de indicadores:

Revisar y/o aumentar los indicadores del Componente 2. En este momento existeslo uno y se especifica como Nmero de convenios firmados con municipiospara la puesta en marcha del programa. Este indicador reflejara el esfuerzorealizado por los operadores del programa para lograr su penetracin en losmunicipios del Estado. Sin embargo, el Componente 2 se refiere a los apoyosestudiantiles entregados, y por tanto su unidad de medida tendra que ver ms conlos individuos que con convenios firmados con los municipios. En este sentido, seconsidera que un indicador que nicamente refleje la firma de convenios con losmunicipios no permite evaluar de manera completa el desempeo del programa apartir del nmero de estudiantes que estn siendo beneficiados con elotorgamiento de apoyos para el transporte, en lo cual se centra el Componente 2.

Garantizar el monitoreo del indicador de la Actividad 1 del Componente 1,

especificado como Nmero de entradas a la plataforma en Internet del programa,ya que dicha plataforma no est abierta de manera permanente, y por tanto laverificacin de este indicador debe realizarse con el apoyo de la dependencia.

Elaborar las fichas tcnicas de los indicadores de la MIR. Especificar la forma en que se establecen las metas de los indicadores a nivel de

Fin, Propsito y Componentes, con el nimo de valorar si su propuesta impulsarel desempeo del programa.


42/116

42

Captulo 2. Evaluacin de operacin

La evaluacin de operacin del programa de apoyo al transporte para estudiantestoma como base metodolgica los trminos de referencia de la evaluacin de consistenciay resultados de Coneval (Coneval Operacin), en el apartado correspondiente a laseccin de Operacin. Al igual que en los TDR de la evaluacin de diseo de Coneval,stos consisten en evaluar un programa a partir de la respuesta a preguntas especficasmediante un esquema binario (S/No), sustentado en evidencia documental y explicitandolos argumentos empleados en el anlisis (Coneval Operacin, p. 3). La respuesta nodebera tomar ms de una cuartilla. Existen preguntas donde la respuesta S d ebeseleccionar uno de cuatro niveles de respuesta definidos para cada pregunta, donde elnivel 1 representa el menor nmero de caractersticas presentes en dicha pregunta y el 4el mayor nmero. Debe comentarse que dentro de la metodologa de Coneval existenalgunas preguntas que no admiten una respuesta binaria, y por tanto se responden apartir de argumentos sustentados en el anlisis documental.

La evaluacin de operacin se compone de cinco apartados (con sus respectivostemas de evaluacin en funcin de los Trminos de Referencia) y 15 preguntas. En elsiguiente cuadro se presentan los apartados de evaluacin y las preguntas que lescorresponden.

Apartado de evaluacin Preguntas2.1. Anlisis de procesos y descripcin de la operacin del programa 19 a 282.2. Anlisis de la administracin financiera y de gasto del programa 29 y 302.3. Sistematizacin de la informacin 312.4. Cumplimiento y avance de indicadores 322.5. Rendicin de cuentas, difusin y satisfaccin con el programa 33 y 34


43/116

43

2.1. Anlisis de procesos y descripcin de la operacin del programa.

Tema de evaluacin PreguntaLa observancia de las reglas de operacin y otras disposicionesnormativas aplicables al programa 19Los mecanismos de organizacin y gestin del programa 20 a 28


44/116

44

19. Describa mediante diagrama de flujo el proceso general del programa paracumplir con los bienes y los servicios (Componentes).

Diagrama de flujo del proceso general del programa de transporte paraestudiantes (Componente Bienevales)

SEDIS y comunicacinsocial del gobierno

estatal

Estudiantes

Estudiantes

SEDIS

TISA

Estudiantes

Choferes y TISA

Inicio

Difusin delprograma en

distintos medios decomunicacin

Captura de datosbsicos en laplataforma de

Internet

Entrega de documentose inscripcin en mdulos

NoSe

cumplenlos requisitos

?

S

Validacin y entregade apoyos en puntosde venta y/o mdulos

Utilizacin de losapoyos (bienevales)

en el transporte pblico

Entrega de boletosy recepcin de

pagos

Fin


45/116

45

Cabe destacar que el diagrama de flujo del proceso general del programa en elinterior del Estado es muy similar al que se presenta arriba. Existen dos diferenciasimportantes. La primera tiene que ver con el hecho de que los estudiantes regionales einterregionales no capturan sus datos en una plataforma de Internet, sino que sepresentan directamente en algn mdulo para entregar sus documentos. En tal caso, msque verificar los requisitos, los responsables del programa verifican las condicionessocioeconmicas de los solicitantes, y en funcin de ello elaboran posteriormente una listacon los admitidos al programa. Y la segunda con el hecho de que los choferes no hacenuna entrega de boletos a una empresa intermediaria (en el caso de la ZMG es TISA) pararecibir sus pagos, ya que a los estudiantes del interior se les entrega una tarjeta donde seles depositan los apoyos econmicos.


46/116

46

20. El programa cuenta con informacin sistematizada que permite conocer lademanda total de apoyos y las caractersticas de los solicitantes?(socioeconmicas en el caso de personas fsicas y especficas en el caso depersonas morales)


S 1 El programa cuenta con informacin sistematizada, pero sta no permite

conocer la demanda total de apoyos ni las caractersticas de lossolicitantes.

El programa cuenta con informacin sistematizada a partir de las solicitudes deapoyo recibidas durante el inicio de sus operaciones. Asimismo, tiene tambin informacinsobre la posible demanda de apoyos en funcin de los estudiantes que usan transvales(PE, p. 11). Sin embargo, estos datos no permiten conocer la demanda total de apoyos demanera precisa, ni las caractersticas de los solicitantes. Si bien es cierto que la poblacinque utiliza los transvales podra demandar bienevales, no se cuenta todava con undocumento o base de datos que proporcione mayores datos en este sentido. En los

municipios sucede algo similar. Se cuenta con datos sobre las regiones con mayor rezagoeducativo, pero no existe informacin documental sobre la demanda total que podrahaber en los municipios sobre los apoyos que otorga el programa, ni de las caractersticasde sus posibles solicitantes.


47/116

47

21. Los procedimientos para recibir, registrar y dar trmite a las solicitudes deapoyo cuentan con las siguientes caractersticas:a) Corresponden a las caractersticas de la poblacin objetivo.b) Existen formatos definidos.c) Estn disponibles para la poblacin objetivo.d) Estn apegados al documento normativo del programa.


S 4 El programa cuenta con procedimientos para recibir, registrar y dar trmite

a las solicitudes de apoyo. Los procedimientos cuentan con todas las caractersticas descritas.

Los procedimientos para recibir, registrar y dar trmite a las solicitudes de apoyocuentan con las siguientes caractersticas:

a) Corresponden a las caractersticas de la poblacin objetivo: el programa cuentacon un Manual de operacin de mdulos (MOM), donde se especifican loscriterios y requisitos de elegibilidad en funcin de la poblacin objetivo que seestablece en las ROP, es decir, ser estudiantes residentes del Estado de Jalisco,cursando los niveles de educacin secundaria, media superior y superior eninstituciones pblicas o privadas adscritas de manera oficial al sistema deeducacin pblica (MOM, p. 9).

b) Existen formatos definidos: el programa cuenta con tres formatos relativos a larecepcin, registro y trmite de las solicitudes de apoyo. El primero es el Formatode solicitud, el segundo es la Solicitud de ampliacin y el tercero es el Recibode entrega del be neficio del programa.

c) El programa pone a disposicin de la poblacin objetivo las solicitudes de apoyodurante perodos especficos de apertura de inscripciones y en lugarespreestablecidos.

d) Estn apegados al documento normativo del programa: la normatividad aplicable(ROP) menciona los criterios de elegibilidad y requisitos para inscribirse en elprograma, entre los cuales destacan los relativos a la acreditacin de identidad,edad, calidad de estudiante y residencia (ROP, pp. 25-26). Todos estos requisitosse solicitan en la Solicitud de ampliacin, y de acuerdo con las entrevistas afuncionarios estatales, tambin se solicitaban en el portal de Internet deBienevales (PIBV). De manera adicional, el MOM especifica la entrega dedocumentos donde se tendra que acreditar cada uno de los datos mencionadosen las ROP, tanto para estudiantes de ZMG como del interior. Entre estosdocumentos estn: identificacin oficial, credencial de estudiante vigente,comprobante de domicilio y CURP (MOM, p. 10).


48/116

48

22. El programa cuenta con mecanismos documentados para verificar elprocedimiento para recibir, registrar y dar trmite a las solicitudes de apoyo conlas siguientes caractersticas:a) Son consistentes con las caractersticas de la poblacin objetivo.b) Estn estandarizados, es decir, son utilizados por todas las instancias

ejecutorasc) Estn sistematizados.d) Estn difundidos pblicamente.


S 1 Los mecanismos para verificar el procedimiento para recibir, registrar y dar

trmite a las solicitudes de apoyo tienen una de las caractersticasestablecidas.

Los mecanismos documentados para verificar el procedimiento de recepcin,registro y trmite de las solicitudes de apoyo presentan la siguiente caracterstica:

a) Son consistentes con las caractersticas de la poblacin objetivo: la SEDIS verificalos procedimientos relacionados con las solicitudes de apoyo. Para ello cuenta conun mecanismo de revisin de dichas solicitudes dentro de la Direccin deSistemas, donde se verifica que los solicitantes cumplan con los requisitos deelegibilidad establecidos para la poblacin objetivo que marcan las ROP.

Por otro lado, el programa no ha estandarizado los mecanismos de verificacinrelacionados con los procedimientos para recibir, registrar y dar trmite a las solicitudesde apoyo. La principal razn tiene que ver con que las instancias responsables de laejecucin del programa realizan actividades separadas de verificacin, es decir, seduplican este tipo de actividades. Por ejemplo, adems de la SEDIS (a travs de la DGPSy la CI), la empresa TISA realiza labores de verificacin y cuenta con mecanismos propiospara ello.

Asimismo, no se puede decir que los mecanismos de verificacin relacionados conlas solicitudes de apoyo estn todava sistematizados, ya que si bien la informacinrelacionada con dichas solicitudes se encuentra en bases de datos, stas no sonhomogneas a lo largo de los distintos procesos del programa. Como se ver en laevaluacin de procesos, existieron al menos tres bases de datos distintas para registrar alos solicitantes interesados en recibir los apoyos.

Finalmente, el programa no difunde pblicamente los mecanismos para verificarlos procedimientos alrededor de las solicitudes de apoyo.


49/116

49

23. Los procedimientos del programa para la seleccin de beneficiarios y/oproyectos tienen las siguientes caractersticas:a) Incluyen criterios de elegibilidad claramente especificados, es decir, no

existe ambigedad en su redaccin.b) Estn estandarizados, es decir, son utilizados por todas las instancias

ejecutoras.c) Estn sistematizados.d) Estn difundidos pblicamente.


S 4 Los procedimientos para la seleccin de beneficiarios y/o proyectos tienentodas las caractersticas establecidas.

Los procedimientos del programa para seleccionar beneficiarios presentan lassiguientes caractersticas:

a) Incluyen criterios de elegibilidad claramente especificados: en primera instancia,

tanto las ROP (p. 25) como el MOM (p. 9) contienen los criterios de elegibilidad delprograma, sin que se presten a ambigedad en su redaccin. En efecto, las ROPsealan como

evaluacion especifica transporte informe final

Documents