fondo de aportaciones para la educaciÓn bÁsica y … · temas de evaluación y metodología la...
TRANSCRIPT
FONDO DE APORTACIONES PARA LA EDUCACIÓN BÁSICA Y NORMAL DEL ESTADO DE SONORA Fondo de Aportaciones para la Educación Básica y Normal / Servicios Educativos del Estado de Sonora
En el presente informe se presentan los resultados de la Evaluación en Materia de Consistencia y resultados efectuada al FAEB para el Ejercicio 2014. La evaluación contempla los siguientes aspectos, de acuerdo a los Términos de Referencia emitidos por el Consejo Nacional de la Política de Desarrollo Social (CONEVAL): diseño, planeación y orientación a resultados, cobertura y focalización, operación, percepción de la población atendida y medición de resultados.
Juan Carlos Robles Ríos
Para los Servicios Educativos del Estado de Sonora
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
1
EVALUACIÓN EN MATERIA DE CONSISTENCIA Y RESULTADOS Fondo de Aportaciones para la Educación Básica y Normal / Servicios Educativos del Estado de Sonora
OBJETIVO DE LA CONSULTORÍA
Evaluar la consistencia y orientación a resultados del Fondo de Aportaciones para la Educación Básica y Normal (FAEB) con la finalidad de proveer información que retroalimente su diseño, gestión y resultados.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
2
RESUMEN DE RESULTADOS DE LA EVALUACIÓN1 El Fondo de Aportaciones para la Educación Básica y Normal (FAEB) es un Fondo creado como parte de la descentralización educativa en 1992 en el marco del Acuerdo Nacional para la Modernización de la Educación Básica (ANMEB) de ese año. Dicho Fondo se encuentra constituido con recursos federales que se transfieren a las haciendas públicas de los Estados, a través del ramo 33, condicionando su gasto a la consecución y cumplimiento de los objetivos que establece la Ley de Coordinación Fiscal en lo general y la Ley General de Educación en sus artículos 13 y 16, en lo particular.
En el presente resumen se presentan las principales observaciones y recomendaciones generadas como parte de la Evaluación efectuada bajo los Términos de Referencia de Consistencia y Resultados publicados por el Consejo Nacional de Evaluación de la Política Social (CONEVAL), con el objeto de proveer información que retroalimente su diseño, gestión y resultados.
Diseño
Sobre la MIR
En materia de diseño existen elementos relevantes que esta Evaluación destaca con el fin de convertirlos en oportunidad de mejora para la concepción y operación del FAEB en función de los requerimientos de Educación Básica en el Estado de Sonora. Destacan los siguientes aspectos:
La MIR en cuestión debe guardar una lógica vertical y horizontal que facilite su conocimiento e interpretación. En este sentido, la presente Evaluación hace una serie de recomendaciones para acotar y mejorar su Resumen Narrativo de acuerdo a los aspectos básicos establecidos por la Metodología de Marco Lógico en el sentido de que la MIR debe guardar congruencia y consistencia entre los cuatro niveles de objetivos de su Resumen Narrativo, en sentido vertical y horizontal. Si bien se encontró que la MIR actual es lógica y guarda congruencia en cuanto a su diseño y aplicación, se proponen las siguientes adecuaciones para su mejor integración que son descritas en detalle en el Anexo 19. Valoración Final del FAEB. Entre las recomendaciones principales están propuestas de mejora para la enunciación de los niveles Fin,
1 Ver Anexo 19. Valoración Final del FAEB.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
3
Propósito y Actividades, la incorporación de 2 Actividades, la mejora de los indicadores mediante la inclusión de la variable de Telesecundaria en todos los niveles del Resumen Narrativo, la inclusión de Supuestos factibles. Asimismo, cabe mencionar la relevancia de acotar el objetivo – Propósito como sigue: Los niños y niñas del Estado de Sonora de 3 a 14 años de edad, completan sus estudios en educación básica. En el análisis efectuado se encontró que al considerar que los niños y niñas acceden a la Educación Básica como está establecido en su origen, se está reiterando el logro del Componente que busca precisamente cubrir este aspecto, y por otro lado, al acotar de la manera propuesta el objetivo Propósito, se atiende y entiende de mejor manera el indicador a éste asociado que mide la eficiencia terminal de Educación Básica en el Estado.
Otro aspecto relevante derivado de esta Evaluación se encontró que el FAEB tal como se aplica para la Educación Básica en el Estado de Sonora, se vincula a la meta 2 de los Objetivos de Desarrollo del Milenio (ODM):
Asegurar que, para el año 2015, los niños y niñas de todo el mundo puedan terminar un ciclo completo de enseñanza en primaria.
Así también y dada la caducidad de los ODM en el año 2015, y que en adelante están por entrar en práctica los Objetivos de Desarrollo Sostenible (ODS) que actualmente están en calidad de propuesta y son 17. De ellos, el FAEB podría vincularse con el objetivo número 4:
Garantizar una educación inclusiva, equitativa y de calidad y promover oportunidades de aprendizaje durante toda la vida para todos.
El Sistema de Monitoreo y Evaluación
Dentro de los elementos para el monitoreo y evaluación que ofrece la MIR (indicadores y medios de verificación), revisar la pertinencia de enfatizar la importancia de contar con un Sistema de Evaluación del Desempeño, el cual debe ser uniforme, claro e incorporar de manera ordenada los programas, proyectos, fondos que en aras de la generación de valor público, deben ser evaluados para el aprendizaje y mejora continua y la rendición de cuentas.
Hacer de la evaluación un hábito institucional, tanto aquellas evaluaciones realizadas por un ente o persona externa como aquella que puede realizarse por la misma institución operadora, es decir, una autoevaluación periódica
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
4
Planeación y Orientación a Resultados
El Gobierno del Estado de Sonora cuenta con mecanismos consolidados para llevar a cabo sus procesos de planeación, programación y ejercicio del gasto, y de esta manera dar seguimiento a la MIR del FAEB. Anualmente se integra un Programa Anual, de acuerdo a los lineamientos establecidos en el Manual de Programación y Presupuestación del Estado de Sonora para las estapas de planeación, programación, presupuesto y dimensión del gasto.
Cobertura y Focalización
Derivado de la asignación según el PEF, el Estado anualmente integra un Programa Anual de acuerdo a los lineamientos establecidos en el Manual de Programación y Presupuestación del Estado de Sonora para las estapas de planeación, programación, presupuesto y dimensión del gasto. Este ejercicio está institucionalizado por los responsables de los principales procesos de los programas del Estado.
Operación
Un hecho relevante que se preve impacte en la operación del Fondo es la modificación a la Ley de Coordinación Fiscal el 9 de diciembre de 2013, mediante la cual se crea el Fondo de Aportaciones para la Nómina Educativa y Gasto Operativo (FONE), el cual sustituye al FAEB a partir del año 2015.
Percepción de la Población Atendida
El principal hallazgo respecto a la percepción de la población atendida es que el FAEB no tiene mecanismos para llevar a cabo una medición de la percepción de la población atendida. Hoy en día, el Fondo mide el logro de sus resultados básicamente a través del uso de datos estadísticos y el reporte de indicadores de eficacia tales como los resultados de el Exámen Único para la Calidad Educativa, la eficiencia terminal y la cobertura.
Medición de Resultados
Un aspecto relevante detectado en la revisión es que el indicador EXCALE planteado a nivel de Fin, dejará de aplicarse a partir del año 2015, ya que el INEE continuará cumpliendo con su tarea de evaluar el Sistema Educativo Nacional (SEN ) con una nueva generación de pruebas, según el Plan Nacional para las Evaluaciones de los Aprendizajes (PLANEA ).
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
5
CONTENIDO
RESUMEN DE RESULTADOS DE LA EVALUACIÓN FINAL ......................................... 2
ACRÓNIMOS Y ABREVIACIONES ................................................................................ 6
OBJETIVOS DE LA EVALUACIÓN ................................................................................ 7
ANTECEDENTES .......................................................................................................... 9
APARTADO 1. DISEÑO .............................................................................................. 11 ANÁLISIS DE LA CREACIÓN Y DEL DISEÑO DEL PROGRAMA ............................................. 11 ANÁLISIS DE LA CONTRIBUCIÓN DEL PROGRAMA A LOS OBJETIVOS NACIONALES Y LOS
SECTORIALES ............................................................................................................. 14 ANÁLISIS DE LA POBLACIÓN POTENCIAL Y OBJETIVO ...................................................... 17 ANÁLISIS DE LA MATRIZ DE INDICADORES PARA RESULTADOS ......................................... 20
APARTADO 2. PLANEACIÓN Y ORIENTACIÓN A RESULTADOS ............................ 24 INSTRUMENTOS DE PLANEACIÓN ................................................................................. 24 14. LA UNIDAD RESPONSABLE DEL PROGRAMA CUENTA CON UN PLAN ESTRATÉGICO CON
LAS SIGUIENTES CARACTERÍSTICAS: .............................................................................. 24 DE LA ORIENTACIÓN HACIA RESULTADOS Y ESQUEMAS O PROCESOS DE EVALUACIÓN ...... 26 DE LA GENERACIÓN DE INFORMACIÓN ........................................................................ 30
APARTADO 3. COBERTURA Y FOCALIZACIÓN ........................................................ 32 ANÁLISIS DE COBERTURA ............................................................................................ 32
APARTADO 4. OPERACIÓN ...................................................................................... 35 ANÁLISIS DE LOS PROCESOS ESTABLECIDOS EN LAS ROP O NORMATIVIDAD APLICABLE ... 35 SELECCIÓN DE BENEFICIARIOS Y/O PROYECTOS ............................................................ 39 MEJORA Y SIMPLIFICACIÓN REGULATORIA ..................................................................... 43 ECONOMÍA ................................................................................................................ 46 SISTEMATIZACIÓN DE LA INFORMACIÓN ....................................................................... 47 CUMPLIMIENTO Y AVANCE DE LOS INDICADORES DE GESTION Y PRODUCTOS ................. 48 RENDICIÓN DE CUENTAS Y TRANSPARENCIA .................................................................. 49
APARTADO 6. MEDICIÓN DE LOS RESULTADOS .................................................... 51
ANÁLISIS DE FORTALEZAS, OPORTUNIDADES, DEBILIDADES, AMENAZAS Y RECOMENDACIONES ............................................................................................... 58
COMPARACIÓN CON LOS RESULTADOS DE LA EVALUACIÓN DE CONSISTENCIA Y RESULTADOS .......................................................................................................... 60
CONCLUSIONES ........................................................................................................ 60
PERFIL Y EQUIPO DE LA INSTANCIA EVALUADORA ............................................... 65
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
6
ACRÓNIMOS Y ABREVIACIONES
ANMEB Acuerdo Nacional para la Modernización de la Educación Básica
ASF Auditoría Superior de la Federación ASM Aspecto Susceptible de Mejora CONAPO Consejo Nacional de Población
CONEVAL Conasejo Nacional de Evaluación de la Política de Desarrollo Social
DOF Diario Oficial de la Federación EB Educación Básica EXCALE Exámenes de la Calidad y el Logro Educativos FAEB Fondo de Aportaciones para la Educación Básica y Normal INEE Instituto Nacional para la Evaluación de la Educación INEGI Instituto Nacional de Estadística Geografía e Informática LCF Ley de Coordinación Fiscal LGCG Ley General de Contabilidad Gubernamental LGE Ley General de Educación
MIR Matriz de Indicadores para Resultados o Matriz de Marco Lógico
PASH Portal Aplicativo de la SHCP PEF Presupuesto de Egresos de la Federación PND Plan Nacional de Desarrollo 2013 - 2018 PSE Plan Sectorial de Educación 2013 - 2018 ROP Reglas de Operación SEES Servicios Educativos del Estado de Sonora SFU Sistema de Formato Único SHCP Secretaría de Hacienda y Crédito Público SEP Secretaría de Educación Pública
SEC Secretaría de Educación y Cultura del Gobierno del Estado de Sonora
SNIEE Sistema Nacional de Estadística Educativa
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
7
OBJETIVOS DE LA EVALUACIÓN Este documento presenta la Evaluación en Materia de Diseño Consistencia y Resultados del Fondo de Aportaciones para la Educación Básica y Normal (en adelante FAEB) en el Estado de Sonora, realizada conforme a los Términos de Referencia (TdR) emitidos por el Consejo Nacional de Evaluación de la Política de Desarrollo Social (CONEVAL), con la finalidad de proveer información que retroalimente su diseño, gestión y resultados.
Objetivos Específicos
• Analizar la lógica y congruencia en el diseño del programa, su vinculación con la planeación sectorial y nacional, la consistencia entre el diseño y la normatividad aplicable, así como las posibles complementariedades y/o coincidencias con otros programas federales;
• Identificar si el programa cuenta con instrumentos de planeación y orientación hacia resultados;
• Examinar si el programa ha definido una estrategia de cobertura de mediano y de largo plazo y los avances presentados en el ejercicio fiscal evaluado;
• Analizar los principales procesos establecidos en las Reglas de Operación del Programa (ROP) o en la normatividad aplicable; así como los sistemas de información con los que cuenta el programa y sus mecanismos de rendición de cuentas;
• Identificar si el programa cuenta con instrumentos que le permitan recabar información para medir el grado de satisfacción de los beneficiarios del programa y sus resultados, y
• Examinar los resultados del programa respecto a la atención del problema para el que fue creado.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
8
Temas de evaluación y Metodología
La evaluación de consistencia y resultados se divide en seis temas y 51 preguntas de acuerdo con el siguiente cuadro:
APARTADO PREGUNTAS TOTAL
1. Diseño 1-13 13
2. Planeación y Orientación a Resultados
14-22 9
3. Cobertura y Focalización 23-25 3
4. Operación 26-42 17
5. Percepción de la Población Atendida 43 1
6. Medición de Resultados 44-51 8
TOTAL 51 51
La evaluación se realiza mediante un análisis de gabinete con base en información proporcionada por la dependencia o entidad responsable del FAEB en el Estado de Sonora, así como información adicional que la instancia evaluadora considere necesaria para justificar su análisis. En este contexto, se entiende por análisis de gabinete al conjunto de actividades que involucra el acopio, la organización y la valoración de información concentrada en registros administrativos, bases de datos, evaluaciones internas y/o externas y documentación pública. Sin embargo, de acuerdo con las necesidades de información y tomando en cuenta la forma de operar de cada programa, se podrán programar y llevar a cabo entrevistas con responsables de los programas y/o personal de la unidad de evaluación y/o planeación de la dependencia coordinadora.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
9
ANTECEDENTES2 Como parte de la descentralización educativa iniciada en 1992, surgió
el Fondo de Aportaciones para la Educación Básica y Normal (FAEB), que está constituido con recursos que la Federación transfiere a las haciendas públicas de los Estados, a través del ramo 33, condicionando su gasto a la consecución y cumplimiento de los objetivos que establece la Ley de Coordinación Fiscal en lo general y la Ley General de Educación en sus artículos 13 y 16, en lo particular. Los recursos del FAEB se transfieren a las autoridades educativas locales con el fin de cumplir con el mandato del artículo 13 de Ley General de Educación, que señala: "Corresponden de manera exclusiva a las autoridades educativas locales, en sus respectivas competencias, las atribuciones siguientes:
I Prestar los servicios de educación inicial, básica incluyendo la indígena, especial, así como la normal y demás para la formación de maestros.
II Proponer a la Secretaría los contenidos regionales que hayan de incluirse en los planes y programas de estudio para la educación preescolar, la primaria, la secundaria, la normal y demás para la formación de maestros de educación básica; Fracción reformada DOF 10-12-2004.
III Ajustar, en su caso, el calendario escolar para cada ciclo lectivo de la educación preescolar, la primaria, la secundaria, la normal y demás para la formación de maestros de educación básica, con respeto al calendario fijado por la Secretaría; Fe de erratas a la fracción DOF 29-07-1993. Reformada DOF 10-12-2004.
IV Prestar los servicios de formación, actualización, capacitación y superación profesional para los maestros de educación básica, de conformidad con las disposiciones generales que la Secretaría determine.
V Revalidar y otorgar equivalencias de estudios de la educación preescolar, la primaria, la secundaria, la normal y demás para la formación de maestros de educación básica, de acuerdo con los lineamientos generales que la Secretaría expida; Fracción reformada DOF 10-12-2004.
2 Información en línea, tomada de la página de la Secretaría de Educación Pública (SEP): http://cumplimientopef.sep.gob.mx/que_es_el_faeb/. Última consulta: 23 de agosto de 2015.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
10
VI Otorgar, negar y revocar autorización a los particulares para impartir la educación preescolar, la primaria, la secundaria, la normal y demás para la formación de maestros de educación básica; Fracción reformada DOF 10-12-2004, 28-01-2011.
VII Coordinar y operar un padrón estatal de alumnos, docentes, instituciones y centros escolares; un registro estatal de emisión, validación e inscripción de documentos académicos y establecer un Sistema Estatal de Información Educativa coordinado con el Sistema Nacional de Información Educativa; Fracción adicionada DOF 28-01-2011.
VIII Participar con la autoridad educativa federal en la operación de los mecanismos de ingreso y promoción en el servicio docente y de administración escolar, y Fracción adicionada DOF 28-01-2011.
IX Las demás que con tal carácter establezcan esta Ley y otras disposiciones aplicables." Fracción recorrida DOF 28-01-2011.
Los elementos y método de distribución de los recursos del FAEB para cada entidad se encuentran establecidos en el artículo 27 de la Ley de Coordinación Fiscal. La misma Ley, en su artículo 28 establece la obligación de proporcionar de forma periódica la información financiera y operativa necesaria para la planeación, programación y evaluación del Sistema Educativo Nacional.
En resumen, se puede decir que el FAEB es un Fondo de alcance nacional que otorga la federación a los Estados para la atención de necesidades de educación básica y normal, cuya base de creación data del Acuerdo Nacional para la Modernización de la Educación Básica (ANMEB) de 1992 y operativa - normativa en la Ley General de Educación y La Ley de Coordinación Fiscal3.
3 Nota 047/2007 del Centro de Estudios de Finanzas Públicas de la H. Cámara de Diputados. Disponible en línea en: www.cefp.gob.mx/notas/2007/notacefp0472007.pdf. Última consulta: 23 de agosto de 2015. Ver Anexo 1. Descripción del FAEB.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
11
APARTADO 1. DISEÑO
Análisis de la Creación y del Diseño del Programa 1. El problema o necesidad prioritaria que busca resolver el
programa está identif icado en un documento que cuenta con la siguiente información: a) El problema o necesidad se formula como un hecho negativo o
como una situación que puede ser revertida. b) Se define la población que tiene el problema o necesidad. c) Se define el plazo para su revisión y su actualización.
No.
El programa carece de un documento o información que defina el problema o necesidad, concebido de manera negativa, además de la definición de la población objetivo.
Durante la revisión se constató sin embargo que existen elementos para derivar la problemática que pudo dar pie a la creación del FAEB. Por un lado, el Plan Nacional de Desarrollo (PND) y el Sectorial de Educacion (PSE) 2013 – 2018 señalan que la eficiencia terminal de la educación básica es baja. Por otro lado, está la Matriz de Indicadores para Resultados (MIR) enviada por la Secretaría de Educación Pública (SEP), y que a partir de la recepción por parte de la Secretaría de Educación y Cultura (SEC) del Estado de Sonora, el 21 de marzo de 2014, ha sido acogida para su seguimiento formal. Con base en ambos elementos, así como la discusión con los responsables en el Estado, se asume que el problema que da origen a la intervención del FAEB en el Estado de Sonora es que “Los niños y niñas del Estado de Sonora de 3 a 14 años de edad, no completan sus estudios en educación básica”.
Fuentes de información: Información proporcionada por el Organismo Público Descentralizado de Servicios Educativos del Estado de Sonora (SEES). Plan Nacional de Desarrollo y Sectorial de Educación 2013 – 2018 / Lineamientos para el proceso de programación y presupuestación para el ejercicio fiscal 2014 / Oficio No. DFSEPSON/0249/2014 21 de marzo de 2014 de la Oficialía Mayor de la Secretaría de Educación Pública (SEP) a la Secretaría de Educación y Cultura (SEC) del Estado de Sonora.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
12
2. Existe un diagnóstico del problema que atiende el programa que describa de manera específ ica: a) Causas, efectos y característ icas del problema. b) Cuantif icación, característ icas y ubicación terr itorial de la
población que presenta el problema. c) El plazo para su revisión y su actualización.
No.
El FAEB para el Estado de Sonora no cuenta con una definición del problema que atiende, y en consecuencia tampoco cuenta con un análisis de causas, efectos y características del problema. Durante el proceso de acopio y revisión de información, se constató que el FAEB no cuenta con un diagnóstico ni con información o documentos que describan el problema.
En secuencia con la pregunta 1, la idea para intentar ofrecer un acercamiento a la definición del problema y la población objetivo tiene sustento en el diagnóstico del Sistema Educativo Nacional (SEN) del PND 2013 – 2018, de acuerdo al cual “la expansión de la educación básica y el descenso gradual de la población en edad escolar han permitido alcanzar niveles elevados de cobertura. Sin embargo, la eficiencia terminal de la educación básica es baja: por cada 100 niños que ingresan a primaria, sólo 76 concluyen la secundaria en tiempo y forma”. En un posible árbol del problema para el FAEB - Sonora, y de conformidad con su MIR actual la lógica podría indicar que al no contar con los servicios de educación básicos para atender la demanda educativa del Estado, en consecuencia, los niños y niñas del Estado de Sonora de 3 a 14 años de edad, no completan sus estudios en educación básica y por tanto no se está en posibilidad de contribuir a la calidad de los aprendizajes en la educación básica y la formación integral de todos los grupos de la población. Desde esta óptica, el efecto general se encamina hacia un sistema educativo cuyas carencias cualitativas obstaculizan el desarrollo humano.
Fuentes de información: Información proporcionada por el Organismo Público Descentralizado Servicios Educativos del Estado de Sonora (SEES) / Plan Nacional de Desarrollo y Sectorial de Educación 2013 – 2018 / Lineamientos para el proceso de programación y presupuestación para el ejercicio fiscal 2014 / Oficio No. DFSEPSON/0249/2014 21 de marzo de 2014 de la Oficialía Mayor de la Secretaría de Educación Pública (SEP) a la Secretaría de Educación y Cultura (SEC) del Estado de Sonora.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
13
3. ¿Existe justif icación teórica o empírica documentada que sustente el t ipo de intervención que el programa l leva a cabo?
Si.
Existe evidencia de estudios que aportan elementos que son congruentes con las líneas perfiladas en el diagnóstico que ofrece el PND y el PSE 2013 – 2018 sobre educación básica, en el sentido de que México se está acercando a la cobertura universal de la educación básica prevista en el Articulo 3ro. Constitucional que actualmente comprende los niveles de preescolar, primaria y secundaria, siendo este elemento la base para apuntalar un desarrollo educativo de calidad. El PND señala que la expansión de la educación básica y el descenso gradual de la población en edad escolar han permitido alcanzar niveles elevados de cobertura. Sin embargo, la eficiencia terminal de la educación básica es baja: por cada 100 niños que ingresan a primaria, sólo 76 concluyen la secundaria en tiempo y forma. Con base en los elementos recogidos con la revisión documental y las reuniones sostenidas con los funcionarios responsables del FAEB en el Estado de Sonora, se podría justificar la intervención del FAEB a partir del problema descrito anteriormente: Los niños y niñas del Estado de Sonora de 3 a 14 años de edad, no completan sus estudios en educación básica. Esta definición abre la posibilidad de insertar un elemento de mejora en la enunciación del próposito como sigue y como se explica más adelante en esta Evaluación: Los niños y niñas del Estado de Sonora de 3 a 14 años de edad, completan sus estudios en educación básica.
Fuentes de Información (disponibles en línea): ASF. Cámara de Diputados. El Sistema de Evaluación del Desempeño en el Gasto Federalizado. Enero de 2014 / CONEVAL. El Ramo 33 en el desarrollo social en México: evaluación de 8 fondos de política pública. Enero 2011PND y PSD 2013 – 2018 / Education at Glance 2010. OCED Indicators México / The education challenge in Mexico: delivering good quality education to all. Economic department working papers, No. 447. Stephanie Guirard.
Nivel 1
• El programa cuenta con una justificación teórica o empírica documentada que sustente el tipo de intervención que el programa lleva a cabo en la población objetivo, y
• La justificación teórica o empírica documentada no es consistente con el diagnóstico del problema.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
14
Análisis de la contribución del programa a los objetivos nacionales y los sectoriales 4. El Propósito del programa está vinculado con los objetivos del
programa sectorial, especial o institucional considerando que:
a) Existen conceptos comunes entre el Propósito y los objetivos del programa sectorial, especial o institucional, por ejemplo: población objetivo.
b) El logro del Propósito aporta al cumplimiento de alguna(s) de la(s) meta(s) de alguno(s) de los objetivos del programa sectorial, especial o institucional.
Si.
El FAEB se encuentra vinculado con el Objetivo 1. Asegurar la calidad de los aprendizajes en la educación básica y la formación integral de todos los grupos de la población, del PSE 2013 – 2018, lo cual se está establecido en la Matriz de Indicadores para Resultados propuesta por la Dirección General de Presupuesto y Recursos Financieros de la Oficialía Mayor de la Secretaría de Educación Pública (SEP) a la Secretaría de Educación y Cultura (SEC) del Estado de Sonora, mediante el oficio No. DFSEPSON/0249/2014 21 de marzo de 2014. Cabe señalar que dicha propuesta fue aceptada por la SEC del Gobierno del Estado de Sonora, y a partir de ésta se rinde cuentas sobre el desempeño del FAEB.
Fuentes de información: ASF. Cámara de Diputados. El Sistema de Evaluación del Desempeño en el Gasto Federalizado. Enero de 2014 / CONEVAL. El Ramo 33 en el desarrollo social en México: evaluación de 8 fondos de política pública. Enero 2011PND y PSD 2013 – 2018 / Education at Glance 2010. OCED Indicators México / Oficio No. DFSEPSON/0249/2014 21 de marzo de 2014 de la Oficialía Mayor de la Secretaría de Educación Pública (SEP) a la Secretaría de Educación y Cultura (SEC) del Estado de Sonora / The education challenge in Mexico: delivering good quality education to all. Economic department working papers, No. 447. Stephanie Guirard.
Nivel 3
• El programa cuenta con un documento en el que se establece la relación del Propósito con los objetivo(s) del programa sectorial, especial o institucional, y
• Es posible determinar vinculación con todos los aspectos establecidos en la pregunta.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
15
5. ¿Con cuáles objetivos, ejes y temas del Plan Nacional de Desarrollo vigente está vinculado el objetivo sectorial relacionado
con el programa?
Desde el punto de vista de esta Evaluación, el FAEB en el estado de Sonora se encuentra vinculado al PND 2013 – 2018 de la siguiente manera:
De acuerdo al Capítulo II. Alineación a las Metas Nacionales del PSE 2013 – 2018, se establece la vinculación entre la cadena Meta – Objetivo - Estrategia del PND, con el objetivo Fin utilizado en la MIR del FAEB, proveniente del PSE:
Objetivo 1. Asegurar la calidad de los aprendizajes en la educación básica y la formación integral de todos los grupos de la población
Fuentes de Información: PND y PSE 2013 – 2018 / Guía Técnica para la Elaboración de los Programas Derivados del Plan Nacional de Desarrollo 2013 – 2018 / MIR del FAEB.
PND 2013 - 2018
Meta 3. México con Educación de Calidad
Objetivo 3.1. Desarrollar el potencial humano de los mexicanos con educación de calidad.
Estrategia 3.1.5. Disminuir el abandono escolar, mejorar la eficiencia terminal en cada nivel educativo y aumentar las tasas de transición entre un nivel y otro.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
16
6. ¿Cómo está vinculado el Propósito del programa con las Metas del Milenio?
El logro del propósito que está planteado para el FAEB, aporta de manera indirecta al cumplimiento del objetivo 2. Lograr la enseñanza primaria universal de los Objetivos de Desarrollo del Milenio (ODM), y en específico, contribuye al logro de la Meta 2ª:
Asegurar que, para el año 2015, los niños y niñas de todo el mundo puedan terminar un ciclo completo de enseñanza en primaria.
Cabe mencionar que incluso se mira factible la posibilidad de contribuir a la medición mediante los logros del Estado de Sonora a través de los indicadores propuestos para dicha meta:
- Tasa neta de matrícula en educación primaria. - Proporción de alumnos que comienzan el primer grado y llegan al último
grado de educación primaria.
Por otro lado, es importante destacar que la caducidad de los ODM vence en el año 2015, y que en adelante están por entrar en práctica los Objetivos de Desarrollo Sostenible (ODS) que actualmente en calidad de propuesta son 17. De ellos, el FAEB podría vincularse con el objetivo número 4:
Garantizar una educación inclusiva, equitativa y de calidad y promover oportunidades de aprendizaje durante toda la vida para todos.
En el contexto de los ODS, el FAEB podría atender a la meta que se plantea para el año 2030, velar por que todas las niñas y todos los niños tengan una enseñanza primaria y secundaria completa, gratuita, equitativa y de calidad que produzca resultados de aprendizaje pertinentes y efectivos.
Fuentes de Información: Lista Oficial de los Indicadores de los ODM. Disponible en línea: http://mdgs.un.org/unsd/mdg/Host.aspx?Content=indicators/officiallist.htm / Propuesta de los 17 Objetivos de Desarrollo Sostenible. Disponble en línea: http://www.undp.org/content/undp/es/home/mdgoverview/post-2015-development-agenda / MIR del FAEB.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
17
Análisis de la población potencial y objetivo 7. Las poblaciones, potencial y objetivo, están definidas en documentos oficiales y/o en el diagnóstico del problema y cuentan
con la siguiente información y característ icas4:
a) Unidad de medida. b) Están cuantif icadas. c) Metodología para su cuantif icación y fuentes de información. d) Se define un plazo para su revisión y actualización.
No.
El FAEB para el Estado de Sonora no cuenta con un diagnóstico ni con información o documentos que describan el problema, sin embargo, si cuenta con la información relativa a las poblaciones potencial y objetivo obtenidas de fuentes oficiales para el seguimiento del FAEB en el Estado. Las fuentes de información principales que utiliza el Organismo Público Descentralizado Servicios Educativos del Estado de Sonora (SEES) son los datos y proyecciones que publica el Consejo Nacional de Población (CONAPO), el Instituto Nacional de Estadística, Geografía e Informática (INEGI) y las estadísticas generadas por la propia SEP a nivel Federal y la SEC a nivel Estatal. Los segmentos de población bajo los cuales se ha acotado la población potencial y objetivo son los siguientes:
Población de referencia = 2,892,464 habitantes en el Estado de Sonora de acuerdo a la proyección de población a mitad de año de CONAPO para el período 2010 – 2030.
Población Objetivo = 648,721 habitantes (niños entre 3 y 14 años de edad) en el Estado de Sonora de acuerdo a la proyección de población a mitad del año 2014 de CONAPO para el período 2010 – 2030.
Fuentes de información: Sitio web de CONAPO, INEGI, Sistema Nacional de Información Estadística Educativa (SNIEE) de la SEP, y estadísticas de la Dirección de Información y Estadística de la Dirección General de Planeación del Organismo Público Descentralizado Servicios Educativos del Estado de Sonora (SEES).
4 Anexo 2. Metodología para la Cuantificación de la Poblaciones Potencial y Objetivo.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
18
8. Existe información que permita conocer quiénes reciben los apoyos del programa (padrón de beneficiarios) que5:
a) Incluya las característ icas de los beneficiarios establecidas en su documento normativo.
b) Incluya el t ipo de apoyo otorgado.
c) Esté sistematizada e incluya una clave única de identif icación por beneficiario que no cambie en el t iempo.
d) Cuente con mecanismos documentados para su depuración y actualización.
No.
El FAEB no cuenta con padrón de beneficiarios. Los resultados se basan en datos y proyecciones estadísticos provenientes del CONAPO, el INEGI y las estadísticas generadas por la propia SEP a nivel Federal y la SEC a nivel Estatal.
Fuentes de información: PND y PSE 2013 – 2018 / Ley de Coordinación Fiscal 2014 / Ley General de Educación.
5 Anexo 3. Procedimiento para la Actualización de la Base de Datos de Beneficiarios.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
19
9. Si el programa recolecta información socioeconómica de sus
beneficiarios, explique el procedimiento para l levarlo a cabo, las
variables que mide y la temporalidad de las mediciones.
El FAEB no recoge información socioeconómica de sus beneficiarios, ya que como se ha mencionado, los resultados se basan en datos y proyecciones estadísticos provenientes del CONAPO, el INEGI y las estadísticas generadas por la propia SEP a nivel Federal y la SEC a nivel Estatal.
A nivel de propósito, la MIR establece la medición de la eficiencia terminal mediante la aplicación de la siguiente fórmula:
Número de alumnos egresados de la educación primaria y secundaria de escuelas apoyadas por FAEB en el ciclo escolar N / Alumnos de nuevo ingreso a primer grado de primaria y secundaria en escuelas apoyadas por FAEB) X 100.
A nivel de Componente, está establecida la cobertura de atención en el nivel de Educación Básica mediante la aplicación de la siguiente fórmula:
Número de alumnos registrados en escuelas apoyadas por FAEB en el ciclo escolar del año N / Población de 3 a 14 años de edad en el año N) X 100.
Fuentes de información: MIR del FAEB / PND y PSE 2013 – 2018 / Ley de Coordinación Fiscal 2014 / Ley General de Educación.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
20
Análisis de la Matriz de Indicadores para Resultados 10. ¿En el documento normativo del programa es posible
identif icar el resumen narrativo de la Matriz de Indicadores para Resultados (Fin, Propósito, Componentes y Actividades)?6
Si.
No existe un documento normativo que establezca el Resumen Narrativo de la MIR del FAEB, sin embargo, la MIR enviada por la Secretaría de Educación Pública (SEP) a la Secretaría de Educación y Cultura (SEC) del Estado de Sonora, el 21 de marzo de 2014, ha sido acogida para su seguimiento formal. Sin embargo, se ha observado que dicha MIR es congruente con lo establecido en el PND y PSE 2013 – 2018, con los cuales guarda vinculación a través del Fin. La MIR en comento establece los diferentes niveles del Resumen Narrativo de la herramienta con base en los cuales asimismo, se presenta la siguiente propuesta de mejora. De la revisión efectuada mediante la presente Evaluación se han
encontrado elementos de mejora que a continuación se enuncian:
Nivel de Fin. Se sugiere agregar la frase inicial: “Contribuir a…”. Nivel de Propósito. Se propone agregar ubicación, y acotar el logro esperado a la culminación de los estudios de niños y niñas en el nivel que corresponda de Educación Básica para adecuarlo con el indicador de eficacia actual que mide la eficiencia terminal. Desde el punto de vista de esta Evaluación el acceso a la educación forma parte del efecto del Componente que mide la cobertura en cada ciclo escolar. Nivel de Componente. Sin elemento de mejora. Nivel de Actividad. Se sugiere iniciar la enunciación de las actividades como un sustantivo derivado de un verbo y que refleje una acción que coadyuva al logro del Componente. Además, se sugiere incluir dos actividades adicionales que incluyan la parte correspondiente a educación especial, indígena e Instituto de Formación Docente del Estado de Sonora (IFODES). Supuestos. Esta Evaluación sugiere mejorarlos ya que los planteados no responden a los objetivos planteados en los diferentes niveles del Resumen Narrativo. Fuentes de información: MIR del FAEB.
6 Anexo 4. Resumen Narrativo de la Matriz de Indicadores para Resultados.
Nivel 4 • Algunas de las Actividades, todos los Componentes, el Propósito y el Fin de
la MIR se identifican en las ROP o documento normativo del programa.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
21
11. Las Fichas Técnicas de los indicadores del programa cuentan con la siguiente información7:
a) Nombre. b) Definición. c) Método de cálculo. d) Unidad de Medida. e) Frecuencia de Medición. f ) Línea base. g) Metas.
h) Comportamiento del indicador (ascendente, descendente, regular ó nominal) .
Si.
La ficha técnica a la que da seguimiento los SEES incluye 5 de los 8 datos requeridos. Es decir, el 62.5%. Sin embargo, cabe destacar que a través del Sistema de Fomato Único (SFU), Los SEES, controlan también la Meta Programada en el ejercicio.
La MIR que maneja actualmente el FAEB podría incoporar los elementos descritos y responder sin problema a la información mínima solicitada por el presente reactivo, es decir, incorporar: línea de base, metas y definir el comportamiento que se espera observar en los indicadores.
Cabe destacar que el indicador del nivel de Fin es: Porcentaje de estudiantes que obtienen el nivel de logro educativo insuficiente en los dominios de español y matemáticas por EXCALE en educación básica.La ficha técnica de este indicador es muy completa (incluye todos los elementos señalados en el reactivo) y se encuentra establecida en el PSE 2013 – 2018 y es responsabilidad del Instituto Nacional para la Evaluación de la Educación (INEE), su seguimiento e integración.
Fuentes de información: INEE. Panorama Educativo 2014. Educación Básica y Media Superior / MIR del FAEB / PSE 2013 - 2018.
7 Anexo 5. Indicadores.
Nivel 2 • Del 50% al 69% de las Fichas Técnicas de los indicadores del programa
tienen las características establecidas.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
22
12. Las metas de los indicadores de la MIR del programa tienen las siguientes característ icas8:
a) Cuentan con unidad de medida.
b) Están orientadas a impulsar el desempeño, es decir, no son laxas.
c) Son factibles de alcanzar considerando los plazos y los recursos humanos y f inancieros con los que cuenta el programa.
Si.
Las metas establecidas cuentan con las características requeridas en el reactivo. Cabe mencionar que el 25% de las metas no están contempladas aún, ya que forman parte de la propuesta de mejora que deriva de esta Evaluación donde se propone incorporar dos actividades y en consecuencia 2 metas e indicadores que midan el porcentaje de recursos empleados en el sistema de Educación Básica para educación especial e indígena e IFODES.
Un aspecto relevante detectado en la revisión es que el indicador EXCALE planteado a nivel de Fin, se dejará de aplicar a partir del año 2015, ya que el INEE continuará cumpliendo con su tarea de evaluar el Sistema Educativo Nacional (SEN ) con una nueva generación de pruebas, según el Plan Nacional para las Evaluaciones de los Aprendizajes (PLANEA ), el cual concentra los nuevos instrumentos que sustituyen a las pruebas de EXCALE y a la Evaluación Nacional de Logro Académico en Centros Escolares (ENLACE).
En el Anexo 6, se presentan las metas de cada nivel del Resumen Narrativo del FAEB.
Fuentes de información: INEE. Panorama Educativo de México 2014. / MIR del FAEB / PSE 2013 - 2018.
8 Anexo 6. Metas del Programa.
Nivel 4 Del 85% al 100% de las metas de los indicadores del programa tienen las características establecidas.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
23
13. ¿Con cuáles programas federales y en qué aspectos el programa evaluado podría tener complementariedad y/o coincidencias?9
En el análisis efectuado para la selección de los programas y fondos, se considera que los presentados son coincidentes y complementarios en el logro de un México con Educación de Calidad (Meta 3 del PND 2013 – 2018). Por otro lado, se observa que en los programas y fondos mencionados aparte de complementarse, funcionan y benefician en términos generales a la población de Educaión Básica depositaria de los efectos del FAEB.
Los siguientes son los programas y fondos considerados para contestar este reactivo. Sin embargo, es menester señalar que en su mayoría, los programas del Sector Educativo Nacional (SEN) convergen, se complementan y coinciden en la meta nacional antes mencionada.
1. Programa de Fortalecimiento de la Educación Básica.
2. Programa de Escuela de Tiempo Completo.
3. Programa de Escuelas de Escuelas de Excelencia..
4. Programa Nacional de Becas.
5. Programa de Escuelas de Calidad.
6. Programa para la Inclusión y Equidad Educativa.
7. Programa Escuela Segura.
8. Fondos para la Infraestructura Social.
9. Fondo de Aportaciones Múltiples.
Fuentes de Información: Ley de Coordinación Fiscal 2014. / Reglas de Operación de los Programas citados.
9 Anexo 7. Complementariedad y Coincidencias entre Programas Federales.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
24
APARTADO 2. PLANEACIÓN Y ORIENTACIÓN A RESULTADOS
Instrumentos de Planeación 14. La Unidad Responsable del programa cuenta con un plan estratégico con las siguientes característ icas:
a) Es resultado de ejercicios de planeación institucionalizados,
es decir, s igue un procedimiento establecido en un
documento.
b) Contempla el mediano y/o largo plazo.
c) Establece los resultados que quieren alcanzar, es decir, el Fin
y Propósito del programa.
d) Cuenta con indicadores para medir los avances en el logro de
sus resultados.
Si.
El FAEB se opera bajo la responsabilidad del Organismo Público Descentralizado Servicios Educativos del Estado de Sonora (SEES). Anualmente se integra un Programa Anual, de acuerdo a los lineamientos establecidos en el Manual de Programación y Presupuestación del Estado de Sonora para las estapas de planeación, programación, presupuesto y dimensión del gasto. Por otro lado, en su Estrategia Local para el Desarrollo de la Educación Básica del Ejercicio Fiscal 2014, el Estado presenta un diagnóstico de la situación y plantea las estrategias para atenderlo señalando sus principales ejes de acción, en apego a lo establecido en el Plan Sectorial de Educación y Cultura 2010 – 2015 del Estado de Sonora el cual plantea las metas y objetivos a alcanzar en el mediano y largo plazos. Cabe mencionar, sin embargo, que al ser el FAEB un fondo constituido con recursos federalizados su seguimiento si se contempla e integra al sistema presupuestario federal, el cual es informado por la entidad de manera trimestral a través del SFU en el PASH.
Fuentes de información: Manual de programación y presupuestación 2014 del Estado de Sonora / Estrategia Local para el Desarrollo de la Educación Básica 2014 de Sonora / Programa Sectorial de Educación y Cultura 2010 – 2015.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
25
15 . El programa cuenta con planes de trabajo anuales para alcanzar sus objetivos que:
a) Son resultado de ejercicios de planeación institucionalizados, es decir, s iguen un procedimiento establecido en un documento.
b) Son conocidos por los responsables de los principales procesos del programa.
c) Tienen establecidas sus metas.
d) Se revisan y actualizan.
Si.
Al ser un Fondo constituido por recursos Federales, la Ley de Coordinación Fiscal establece que su asignación se determinará cada año en el Presupuesto de Egresos de la Federación (PEF) y establece los criterios para su suscripción y asignación. Por otro lado, y derivado de la asignación que le corresponde según el PEF, el Estado anualmente integra un Programa Anual, de acuerdo a los lineamientos establecidos en el Manual de Programación y Presupuestación del Estado de Sonora para las estapas de planeación, programación, presupuesto y dimensión del gasto. Este ejercicio está institucionalizado por los responsables de los principales procesos de los programas del Estado. En la Estrategia Local para el Desarrollo de la Educación Básica del Ejercicio Fiscal 2014, el Estado presenta un diagnóstico de la situación y plantea las estrategias para atenderlo señalando sus principales ejes de acción, en apego a lo establecido en el Plan Sectorial de Educación y Cultura 2010 – 2015 del Estado de Sonora el cual plantea las metas y objetivos a alcanzar en el mediano y largo plazos. Las metas del FAEB y su seguimiento forman parte pues de los logros del Estado en materia de Educación Básica, establecidos en su Estrategia Local para el Desarrollo de la Educación Básica, cuyas metas se revisan de forma trimestral, semestral y anual. El objetivo de la Estrategia Local es: Elevar el logro académico en las instituciones educativas del Estado, en materia de calidad, inclusión y equidad educativa, a partir de la articulación de los recursos de los programas federales y locales atendiendo las necesidades y prioridades de los centro educativos.
Fuentes de información: Estrategia Local para el Desarrollo de la Educación Básica Ejercicio Fiscal 2014 / Informes Trimestrales de Avance Programático SEES 2014 / Ley de Coordinación Fiscal / Manual de programación y presupuestación 2014 del Estado de Sonora.
Nivel 4 • El plan estratégico tiene todas las características establecidas.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
26
De la orientación hacia resultados y esquemas o procesos de evaluación 16. El programa uti l iza informes de evaluaciones externas:
a) De manera regular, es decir, uno de los elementos para la toma de decisiones sobre cambios al programa son los resultados de evaluaciones externas.
b) De manera institucionalizada, es decir, s igue un procedimiento establecido en un documento.
c) Para definir acciones y actividades que contribuyan a mejorar su gestión y/o sus resultados.
d) De manera consensada, participan operadores, gerentes y personal de la unidad de planeación y/o evaluación.
Si.
El FAEB se encuentra sujeto a las disposiciones del Sistema de Evaluación del Desempeño (SED) a nivel federal y estatal, donde en este último, el Manual de programación y presupuestación 2014 del Estado de Sonora, contempla el seguimiento, la evaluación y la rendición de cuentas como fases clave en el proceso presupuestario.
Se constató la existencia de una Evaluación para el Ejercicio 2013: Evaluación al Desempeño de los Recursos del Fondo de Aportaciones para la Educación Básica y Normal (FAEB) en el Estado de Sonora.
Fuentes de Información: Estrategia Local para el Desarrollo de la Educación Básica Ejercicio Fiscal 2014 / Evaluación al Desempeño de los Recursos del Fondo de Aportaciones para la Educación Básica y Normal (FAEB) en el Estado de Sonora, Año 2013 / Manual de programación y presupuestación 2014 del Estado de Sonora.
Nivel 1
• El programa utiliza informes de evaluación externa y tiene una de las características establecidas.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
27
17. Del total de los Aspectos Susceptibles de Mejora (ASM) clasif icados como específ icos y/o institucionales de los últ imos tres años, ¿qué porcentaje han sido solventados acorde con lo establecido en los documentos de trabajo y/o institucionales?10
No.
No se observaron Aspectos Susceptibles de Mejora (ASM) derivados de la Evaluación de Desempeño practicada al FAEB para el año 2013.
Si se observan 4 recomendaciones del evaluador que sin embargo, desde el punto de vista de esta Evaluación, no explican cómo podrían incidir en la lógica de logros de la MIR vigente del FAEB:
1. Reforzar las acciones implementadas para aumentar el logro educativo en la asignatura de español, para los niveles primaria y secundaria.
2. Implementar acciones pedagógicas preventivas, sustentadas en sistemas de evaluación formativas que permitan subsanar las fallas del aprendizaje.
3. Tomar acciones para otorgar servicios dirigidos a la población en situación de vulnerabilidad y establecer un nuevo marco de responsabilidades para asegurar mejores niveles de cobertura y logro educativo.
4. Generar acuerdos con las autoridades sobre condiciones pedagógicas e infraestructura para el ingreso a preescolar de población infantil de 3 años.
No existen ASM, que respondan a la lógica de la MIR del FAEB adoptada a partir del 21 de marzo de 2014.
Cabe mencionar que la MIR para el año 2013, es diferente a la del 2014.
Fuente de información: Evaluación al Desempeño de los Recursos del Fondo de Aportaciones para la Educación Básica y Normal (FAEB) en el Estado de Sonora, Año 2013.
10 Anexo 8. Anexo de las Acciones para atender los ASM.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
28
18. ¿Con las acciones definidas en los documentos de trabajo e institucionales, que a la fecha se han implementado, provenientes de los Mecanismos para el seguimiento a los Aspectos Susceptibles de Mejora derivados de informes y evaluaciones a los programas presupuestarios de la Administración Pública Federal de los últ imos tres años, se han logrado los resultados establecidos?11
No existen ASM, que respondan a la lógica de la MIR del FAEB adoptada a partir del 21 de marzo de 2014.
Fuentes de información: Evaluación al Desempeño de los Recursos del Fondo de Aportaciones para la Educación Básica y Normal (FAEB) en el Estado de Sonora, Año 2013 / Oficio No. DFSEPSON/0249/2014 21 de marzo de 2014 de la Oficialía Mayor de la Secretaría de Educación Pública (SEP) a la Secretaría de Educación y Cultura (SEC) del Estado de Sonora.
19. ¿Con las acciones definidas en los documentos de trabajo e institucionales, que a la fecha se han implementado, provenientes de los Mecanismos para el seguimiento a los Aspectos Susceptibles de Mejora derivados de informes y evaluaciones a los programas presupuestarios de la Administración Pública Federal de los últ imos tres años, se han logrado los resultados establecidos?12
No existen ASM, que respondan a la lógica de la MIR del FAEB adoptada a partir del 21 de marzo de 2014.
Fuentes de información: Evaluación al Desempeño de los Recursos del Fondo de Aportaciones para la Educación Básica y Normal (FAEB) en el Estado de Sonora, Año 2013 / Oficio No. DFSEPSON/0249/2014 21 de marzo de 2014 de la Oficialía Mayor de la Secretaría de Educación Pública (SEP) a la Secretaría de Educación y Cultura (SEC) del Estado de Sonora.
11 Anexo 9. Resultados de las Acciones para Atender el Seguimiento de las ASM derivados de Informes y Evaluaciones Externas. 12 Anexo 10. Análisis de Recomendaciones No atendidas Derivadas de Evaluaciones Externas.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
29
20. A partir del anális is de las evaluaciones externas realizadas al programa y de su experiencia en la temática ¿qué temas del programa considera importante evaluar mediante instancias externas?
No existen ASM, que respondan a la lógica de la MIR del FAEB adoptada a partir del 21 de marzo de 2014.
Desde el punto de vista de esta Evaluación se deben tomar en cuenta los siguientes aspectos:
1. Revisar la consistencia de la MIR, a partir de su diseño. La MIR en cuestión debe guardar una lógica vertical y horizontal que facilite su conocimiento e interpretación.
2. Dentro de los elementos para el monitoreo y evaluación que ofrece la MIR (indicadores y medios de verificación), revisar la pertinencia del sistema de evaluación del desempeño, el cual debe ser uniforme, claro e incorporar de manera ordenada los programas, proyectos, fondos que en aras de la generación de valor público, deben ser evaluados para el aprendizaje y mejora continua, la evaluación y la rendición de cuentas.
3. La evaluación del logro de los resultados en función de los indicadores de desempeño planteados, cuya lógica de causalidad debería apuntar hacia el logro del Propósito y la contribución al Fin.
4. Hacer de la evaluación un hábito institucional, tanto aquellas evaluaciones realizadas por un ente o persona externa, como aquella que puede realizarse por la misma institución operadora, es decir, una autoevaluación periódica13.
Fuentes de información: ASF. El Sistema de Evaluación del Desempeño en el Gasto federalizado. Año 2014 / MIR del FAEB / Evaluación al Desempeño de los Recursos del Fondo de Aportaciones para la Educación Básica y Normal (FAEB) en el Estado de Sonora, Año 2013.
13 “De acuerdo con la experiencia de fiscalización de la ASF respecto del Gasto Federalizado, la evaluación de los fondos y programas financiados con estos recursos no se ha desarrollado, ni institucionalizado como una práctica sistemática en su gestión y, en tal sentido, no se ha aprovechado el potencial de esta herramienta para retroalimentar la atención de sus espacios de mejora y coadyuvar con ello a fortalecer sus impactos y resultados.” ASF. El Sistema de Evaluación del Desempeño en el Gasto federalizado. Año 2014. Pág. 7.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
30
De la Generación de Información 21. El Programa recolecta información acerca de:
a) La contribución del programa a los objetivos del programa sectorial, especial o institucional.
b) Los t ipos y montos de apoyo otorgados a los beneficiarios en el t iempo.
c) Las característ icas socioeconómicas de sus beneficiarios.
d) Las característ icas socioeconómicas de las personas que no son beneficiarias, con f ines de comparación con la población beneficiaria.
Si.
El FAEB para el Estado de Sonora cuenta con la información relativa a las poblaciones potencial y objetivo obtenidas de fuentes oficiales para el seguimiento de la población objetivo. Las fuentes de información principales que utiliza el Organismo Público Descentralizado Servicios Educativos del Estado de Sonora (SEES) son los datos y proyecciones que publica el Consejo Nacional de Población (CONAPO), el Instituto Nacional de Estadística, Geografía e Informática (INEGI) y las estadísticas generadas por la propia SEP a nivel Federal y la SEC a nivel Estatal.
Fuentes de información: Sitio web de CONAPO, INEGI, Sistema Nacional de Información Estadística Educativa (SNIEE) de la SEP, y estadísticas de la Dirección de Infrmación y Estadística de la Dirección General de Planeación del Organismo Público Descentralizado Servicios Educativos del Estado de Sonora (SEES).
Nivel 4 • El programa recolecta información acerca de todos los aspectos establecidos.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
31
22. El programa recolecta información para monitorear su
desempeño con las siguientes característ icas:
e) Es oportuna.
f ) Es confiable, es decir, está validada por quienes las integran.
g) Está sistematizada.
h) Es pertinente respecto de su gestión, es decir, permite medir los indicadores de Actividades y Componentes.
i ) Está actualizada y disponible para dar seguimiento de manera permanente.
Si.
Como se ha señalado, las fuentes de información principales que utiliza el Organismo Público Descentralizado Servicios Educativos del Estado de Sonora (SEES) son los datos y proyecciones que publica el Consejo Nacional de Población (CONAPO), el Instituto Nacional de Estadística, Geografía e Informática (INEGI) y las estadísticas generadas por la propia SEP a nivel Federal y la SEC a nivel Estatal , a través de la Dirección de Información y Estadística del Organismo Público Descentralizado Servicios Educativos del Estado de Sonora (SEES).
La información se concentra y maneja a través de hojas de cálculo de excel. Además, se constató como los funcionarios encargados de generar la información, hacen uso de los sistemas informáticos de la federación como son SFU a través del PASH, o el Sistema Nacional de Indicadores Educativos de la SEP.
Fuentes de información: Sistemas informáticos del Organismo Público Descentralizado Servicios Educativos del Estado de Sonora (SEES) / Portal Aplicativo de la SHCP / Sistema de Formato Único.
4 • La información que recolecta el programa cuenta con todas las caracteristicas
establecidas.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
32
APARTADO 3. COBERTURA Y FOCALIZACIÓN
Análisis de cobertura 23. El programa cuenta con una estrategia de cobertura documentada para atender a su población objetivo con las
siguientes característ icas:
a) Incluye la definición de la población objetivo. b) Específ ica metas de cobertura anual. c) Abarca un horizonte de mediano y largo plazo. d) Es congruente con el diseño del programa.
No.
Al ser un Fondo constituido por recursos Federales, el FAEB (o programa) no cuenta con una estrategia propia de cobertura. La Ley de Coordinación Fiscal establece su asignación anual en el Presupuesto de Egresos de la Federación (PEF) y establece los criterios para su suscripción y asignación. Por otro lado, derivado de la asignación según el PEF, el Estado anualmente integra un Programa Anual de acuerdo a los lineamientos establecidos en el Manual de Programación y Presupuestación del Estado de Sonora para las estapas de planeación, programación, presupuesto y dimensión del gasto. Este ejercicio está institucionalizado y es observado por los responsables de los principales procesos de los programas del Estado. En la Estrategia Local para el Desarrollo de la Educación Básica del Ejercicio Fiscal 2014, el Estado presenta un diagnóstico de la situación y plantea las estrategias para atenderlo señalando sus principales ejes de acción, en apego a lo establecido en el Plan Sectorial de Educación y Cultura 2010 – 2015 del Estado de Sonora el cual plantea las metas y objetivos a alcanzar en el mediano y largo plazos. Las metas de corto, mediano y largo plazo del FAEB, y su seguimiento, forman parte pues de los logros del Estado en materia de Educación Básica. El objetivo de la Estrategia Local es: Elevar el logro académico en las instituciones educativas del Estado, en materia de calidad, inclusión y equidad educativa, a partir de la articulación de los recursos de los programas federales y locales atendiendo las necesidades y prioridades de los centro educativos.
Fuentes de información: Estrategia Local para el Desarrollo de la Educación Básica Ejercicio Fiscal 2014 / Informes Trimestrales de Avance Programático SEES 2014 / Ley de Coordinación Fiscal / Manual de Programación y Presupuestación 2014 del Estado de Sonora.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
33
24. ¿El programa cuenta con mecanismos para identif icar su población objetivo? En caso de contar con estos, especif ique cuáles
y qué información uti l iza para hacerlo.
No.
Sin embargo, si cuenta con la información relativa a las poblaciones potencial y objetivo obtenidas de fuentes oficiales para el seguimiento del FAEB en el Estado. Las fuentes de información principales que utiliza el Organismo Público Descentralizado Servicios Educativos del Estado de Sonora (SEES) son los datos y proyecciones que publica el Consejo Nacional de Población (CONAPO), el Instituto Nacional de Estadística, Geografía e Informática (INEGI) y las estadísticas generadas por la propia SEP a nivel Federal y la SEC a nivel Estatal. Los segmentos de población bajo los cuales se ha acotado la población potencial y objetivo son los siguientes:
Población de referencia = 2,892,464 habitantes en el Estado de Sonora de acuerdo a la proyección de población a mitad de año de CONAPO para el período 2010 – 2030.
Población Objetivo = 648,721 habitantes (niños entre 3 y 14 años de edad) en el Estado de Sonora de acuerdo a la proyección de población a mitad del año 2014 de CONAPO para el período 2010 – 2030.
Cabe mencionar que, la SEC cuenta con mecanismos internos para integrar datos poblacionales específicos, que permiten conocer de manera complementaria detalles de la población objetivo. Un ejemplo es el Sistema de Información, Control y Registro Escolar de Sonora (SICRES).
Fuentes de información: Sitio web de CONAPO, INEGI, Sistema Nacional de Información Estadística Educativa (SNIEE) de la SEP, y estadísticas de la Dirección de Información y Estadística de la Dirección General de Planeación del Organismo Público Descentralizado Servicios Educativos del Estado de Sonora (SEES).
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
34
25. A partir de las definiciones de la población potencial, la población objetivo y la población atendida, ¿cuál ha sido la
cobertura del programa?14
Con base en la información procesada y generada por la Dirección de Información y Estadística del Organismo Público Descentralizado Servicios Educativos del Estado de Sonora (SEES), se obtuvo el siguiente cuadro, en el cual se muestra la evolución del efecto que ha tenido el FAEB en el Estado bajo la hipótesis de ejecución de la MIR vigente del mismo.
El análisis inicia en el ciclo escolar 2011 – 2012, donde se observa una cobertura del 59.2%, y una evolución mínima pero positiva para el siguiente ciclo escolar, 2012 – 2013. De acuerdo al último estudio hecho por el Organismo Público Descentralizado Servicios Educativos del Estado de Sonora (SEES), en el ciclo 2014 – 2015 se tiene un descenso de 1 punto porcentual desde el inicio de la medición.
CUADRO 1. EVOLUCIÓN DE LA COBERTURA EN EDUCACIÓN BÁSICA
PERÍODO 2011 - 201515
COBERTURA DEL FAEB
Indicador / Ciclo Escolar
2011-2012 2012-2013 2013-2014 2014-2015
Índice de
Cobertura 59.2% 59.3% 58.7% 58.1%
Población Atendida
380,823 383,369 380,167 376,730
Población Potencial 643,120 646,059 647,842 648,721
Fuentes de información: Sitio web de CONAPO, INEGI, Sistema Nacional de Información Estadística Educativa (SNIEE) de la SEP, y estadísticas de la Dirección de Información y Estadística del Organismo Público Descentralizado Servicios Educativos del Estado de Sonora (SEES).
14 Anexo 11. Evolución de la Cobertura. 15 Anexo 12. Información de la Población Atendida.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
35
APARTADO 4. OPERACIÓN
Análisis de los Procesos Establecidos en las ROP o normatividad Aplicable 26. Describa mediante Diagramas de Flujo el proceso general del programa para cumplir con los bienes y los servicios (Componentes),
así como los procesos clave en la operación del programa16.
FLUJO 1. FLUJO DE LA OPERACIÓN Y CAUSALIDAD DE LOS OBJETIVOS
Explicación: 1. Los recursos del FAEB son asignados por la Federación a los Gobiernos de los Estados a través del PEF. 2. El Gobierno del Estado de Sonora recibe la asignación y esta es canalizada a los SEES. 3. De acuerdo a la Estrategia Local para el Desarrollo de la Educación Básica (EB) los SEES distribuyen el recurso. Fase – MIR: Con los insumos (recursos financieros), se gestionan los servicios requeridos por cada nivel de EB (Actividades), con la gestión se otorga EB a niños y niñas del Estado (Componente), con la producción del Componente los niños y niñas
del Estado completan sus estudios (Propósito), y si esto se logra, se contribuye al Fin.
Fuente de información: Ley de Coordinación Fiscal / Estrategia Local para el Desarrollo de la EB en Sonora / MIR del FAEB.
16 Anexo 13. Diagrama de Flujo de los Componentes y Procesos Clave.
(1) Recursos Ramo 33 - Fondos de Aportaciones
(2) Gobierno del Estado de Sonora
(3) Servicios Educativos del Estado de Sonora
Fase - MIR • Actividad - Gestión de Recursos FAEB para la Educación Básica • Componente - Educación Básica proporcionada a los niños y niñas del Estado • Propósito - Los niños y niñas del Estado de Sonora completan sus Estudios • Fin - El FAEB contribuye a asegurar la calidad de los aprendizajes en la Educación Básica y la formación integral de todos los grupos de la población
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
36
27. ¿El programa cuenta con información sistematizada que permite conocer la demanda total de apoyos y las característ icas de los solicitantes? (socioeconómicas en el caso de personas f ís icas y
específ icas en el caso de personas morales)
No.
El FAEB, no cuenta con un padrón de beneficiarios. La estadística se obtiene con base en la información procesada y generada por la Dirección de Información y Estadística de el Organismo Público Descentralizado Servicios Educativos del Estado de Sonora (SEES). , se obtuvo el siguiente cuadro, en el cual se muestra la evolución del efecto que ha tenido el FAEB en el Estado bajo la hipótesis de ejecución de la MIR vigente del mismo.
Fuentes de información: Sitio web de CONAPO, INEGI, Sistema Nacional de Información Estadística Educativa (SNIEE) de la SEP, y estadísticas de la Dirección de Información y Estadística de la Dirección General de Planeación del Organismo Público Descentralizado Servicios Educativos del Estado de Sonora (SEES).
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
37
28. Los procedimientos para recibir, registrar y dar trámite a las
solicitudes de apoyo cuentan con las siguientes característ icas:
a) Corresponden a las característ icas de la población objetivo.
b) Existen formatos definidos.
c) Están disponibles para la población objetivo.
d) Están apegados al documento normativo del programa.
No aplica.
Al ser un Fondo constituido con recursos federalizados etiquetados, el Gobierno del Estado canaliza los recursos del FAEB a los SEES, mismo que aplica las políticas establecidas en su Manual de Programación y Presupuestación 2014.
Fuentes de información: Ley de Coordinación Fiscal / Estrategia Local para el Desarrollo de la EB en Sonora / Manual de Programación y Presupuestación 2014 del Estado de Sonora / MIR del FAEB.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
38
29. El programa cuenta con mecanismos documentados para verif icar el procedimiento para recibir, registrar y dar trámite a las
solicitudes de apoyo con las siguientes característ icas:
a) Son consistentes con las característ icas de la población objetivo.
b) Están estandarizados, es decir, son uti l izados por todas las
instancias ejecutoras
c) Están sistematizados.
d) Están difundidos públicamente.
No aplica.
Al ser un Fondo constituido con recursos federalizados etiquetados, el Gobierno del Estado canaliza los recursos del FAEB a los SEES, mismo que aplica las políticas establecidas en su Manual de Programación y Presupuestación 2014.
Fuentes de información: Ley de Coordinación Fiscal / Estrategia Local para el Desarrollo de la EB en Sonora / Manual de Programación y Presupuestación 2014 del Estado de Sonora / MIR del FAEB.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
39
Selección de beneficiarios y/o proyectos 30 Los procedimientos del programa para la selección de
beneficiarios y/o proyectos t ienen las siguientes característ icas:
a) Incluyen criterios de elegibil idad claramente especif icados, es
decir, no existe ambigüedad en su redacción.
b) Están estandarizados, es decir, son uti l izados por todas las
instancias ejecutoras.
c) Están sistematizados.
d) Están difundidos públicamente.
No aplica.
Al ser un Fondo constituido con recursos federalizados etiquetados, el Gobierno del Estado canaliza los recursos del FAEB a los SEES, mismo que aplica las políticas establecidas en su Manual de Programación y Presupuestación 2014.
Fuentes de información: Ley de Coordinación Fiscal / Estrategia Local para el Desarrollo de la EB en Sonora / Manual de Programación y Presupuestación 2014 del Estado de Sonora / MIR del FAEB.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
40
31. El programa cuenta con mecanismos documentados para
verif icar el procedimiento de selección de beneficiarios y/o
proyectos y t ienen las siguientes característ icas:
a) Permiten identif icar si la selección se realiza con base en los
criterios de elegibil idad y requisitos establecidos en los
documentos normativos.
b) Están estandarizados, es decir son uti l izados por todas las
instancias ejecutoras.
c) Están sistematizados.
d) Son conocidos por operadores del programa responsables del
proceso de selección de proyectos y/o beneficiarios.
No aplica.
Al ser un Fondo constituido con recursos federalizados etiquetados, el Gobierno del Estado canaliza los recursos del FAEB a los SEES, mismo que aplica las políticas establecidas en su Manual de Programación y Presupuestación 2014.
Fuentes de información: Ley de Coordinación Fiscal / Estrategia Local para el Desarrollo de la EB en Sonora / Manual de Programación y Presupuestación 2014 del Estado de Sonora / MIR del FAEB.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
41
32. Los procedimientos para otorgar los apoyos a los beneficiarios
t ienen las siguientes característ icas:
a) Están estandarizados, es decir, son uti l izados por todas las
instancias ejecutoras.
b) Están sistematizados.
c) Están difundidos públicamente.
d) Están apegados al documento normativo del programa.
No aplica.
Al ser un Fondo constituido con recursos federalizados etiquetados, el
Gobierno del Estado canaliza los recursos del FAEB a los SEES, mismo que
aplica las políticas establecidas en su Manual de Programación y
Presupuestación 2014.
Fuentes de información: Ley de Coordinación Fiscal / Estrategia Local
para el Desarrollo de la EB en Sonora / Manual de Programación y
Presupuestación 2014 del Estado de Sonora / MIR del FAEB.
33. El programa cuenta con mecanismos documentados para
verif icar el procedimiento de entrega de apoyos a beneficiarios y
t ienen las siguientes característ icas:
a) Permiten identif icar si los apoyos a entregar son acordes a lo
establecido en los documentos normativos del programa.
b) Están estandarizados, es decir, son uti l izados por todas las
instancias ejecutoras.
c) Están sistematizados.
d) Son conocidos por operadores del programa.
No aplica.
Fuentes de información: Ley de Coordinación Fiscal / Estrategia Local
para el Desarrollo de la EB en Sonora / Manual de Programación y
Presupuestación 2014 del Estado de Sonora / MIR del FAEB.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
42
34. Los procedimientos de ejecución de obras y/o acciones t ienen
las siguientes característ icas:
a) Están estandarizados, es decir, son uti l izados por todas las
instancias ejecutoras.
b) Están sistematizados.
c) Están difundidos públicamente.
d) Están apegados al documento normativo del programa.
No aplica.
Fuentes de información: Ley de Coordinación Fiscal / Estrategia Local
para el Desarrollo de la EB en Sonora / Manual de Programación y
Presupuestación 2014 del Estado de Sonora / MIR del FAEB.
35. El programa cuenta con mecanismos documentados para dar seguimiento a la ejecución de obras y acciones y t ienen las
siguientes característ icas:
a) Permiten identif icar si las obras y/o acciones se realizan acorde a
lo establecido en los documentos normativos del programa.
b) Están estandarizados, es decir, son uti l izados por todas las
instancias ejecutoras.
c) Están sistematizados.
d) Son conocidos por operadores del programa.
No aplica.
Fuentes de información: Ley de Coordinación Fiscal / Estrategia Local
para el Desarrollo de la EB en Sonora / Manual de Programación y
Presupuestación 2014 del Estado de Sonora / MIR del FAEB.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
43
Mejora y simplificación regulatoria 36. ¿Cuáles cambios sustantivos en el documento normativo se han
hecho en los últ imos tres años que han permitido agil izar el proceso
de apoyo a los solicitantes?
Hay dos elementos que podrían incidir en el logro del propósito del FAEB para el Estado de Sonora, y en consecuencia en un cambio positivo a favor de la población beneficiaria:
1. La promulgación de 2 nuevas leyes reglamentarias del artículo 3ro. Constitucional. Una fue la Ley del Instituto Nacional para la Evaluación de la Educación (INEE) con atribuciones para evaluar el desempeño educativo del país, y la expedición de la Ley General de Servicio Profesional Docente del 11 de septiembre de 2013, a través de la cual se cambia la mecánica para la asignación de plazas docentes mediante concursos de oposición (para ingreso, permanencia y promoción), evaluación docente y la obligación de prestar servicio en la Escuela en la que se encuentre adscrito (artículos 15, 21 y 78).
2. Modificación a la Ley de Coordinación Fiscal del 9 de diciembre de 2013, mediante la cual se crea el Fondo de Aportaciones para la Nómina Educativa y Gasto Operativo (FONE), el cual sustituye al FAEB a partir del año 2015. Esta modificación obedece principalmente a que las aportaciones federales para el FONE en el componente de servicios personales ya no serán administradas por los gobiernos de los estados, sino por la SHCP (LCF , 2014, 11 de agosto, art. 49); además, en ella se definieron los criterios por los que se determinará el monto destinado al FONE de cada año en el Presupuesto de Egresos de la Federación (PEF ) y se estipuló la manera en la que se distribuirán los recursos entre las entidades.
Fuentes de información: Ley de Coordinación Fiscal / Ley General de Educación. / Panorama Educativo de México 2014. INEE.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
44
37. ¿Cuáles son los problemas que enfrenta la unidad administrativa
que opera el programa para la transferencia de recursos a las
instancias ejecutoras y/o a los beneficiarios y, en su caso, qué
estrategias ha implementado?
Trámite de recursos extraordinarios. Los recursos extraordinarios provenientes
de negociaciones salariales y que derivan en una ampliación líquida, se hacían
a través de un trámite que limitaba la actuación del organismo en la gestión
oportuna en la obtención de los recursos hasta en tanto la Oficialía Mayor del
Estado obtenía la póliza de ingreso correspondiente. Este trámite duraba al
menos 20 días, lo cual afectaba el pago de compromisos en el sector. Para el
2015, el trámite se hará a nivel central a través la SEP y la SHCP directamente.
Fuentes de información: Manual de Programación y Presupuesto para el
Ejercicio Fiscal 2015.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
45
38. El programa identif ica y cuantif ica los gastos en los que incurre para generar los bienes y los servicios (Componentes) que ofrece y los desglosa en los siguientes conceptos17:
a) Gastos en operación: Directos e Indirectos.
b) Gastos en mantenimiento: Requeridos para mantener el estándar de calidad de los activos necesarios para entregar los bienes o servicios a la población objetivo (unidades móviles, edif icios, etc.) . Considere recursos de los capítulos 2000 y/o 3000.
c) Gastos en capital: Son los que se deben afrontar para adquirir bienes cuya duración en el programa es superior a un año. Considere recursos de los capítulos 5000 y/o 6000 (Ej: terrenos, construcción, equipamiento, inversiones complementarias).
d) Gasto unitario: Gastos Totales/población atendida (Gastos totales=Gastos en operación + gastos en mantenimiento). Para programas en sus primeros dos años de operación se deben de considerar adicionalmente en el numerador los Gastos en capital.
Si.
Los SEES cuentan con los sistemas e información para hacer la rendición de
cuentas de los recursos del FAEB, a través de los reportes de control
presupuestal donde se informa trimestralmente el estado de gastos incurridos
por la entidad de acuerdo a la clave programática presupuestal y al
clasificador por objeto del gasto, conforme los lineamientos generales
establecidos en su Manual de Programación y Presupuesto 2014. En este
proceso participan la Dirección General de Administración y Finanzas y la
Dirección General de Planeación del Organismo Público Descentralizado
Servicios Educativos del Estado de Sonora (SEES).
Fuente de información: Informes trimestrales / Manual de Programación y
Presupuesto del Gobierno 2014 del Estado de Sonora.
17 Anexo 14. Gastos Desglosados del FAEB.
4 • El programa identifica y cuantifica los gastos en operación y desglosa todos
los conceptos establecidos.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
46
Economía 39. ¿Cuáles son las fuentes de f inanciamiento para la operación del
programa y qué proporción del presupuesto total del programa
representa cada una de las fuentes?
Gasto Federalizado, Ramo 33.
CUADRO 2. ESTADO DEL PRESUPUESTO FAEB 2014
Estado Monto Comentario Asignado
Servicios Educativos del
Estado de Sonora
EB Federalizada
7,316.349,947.22
Explicación:
El 100% de los recursos
provienen de la federación a
través del Ramo 33.
Secretaría de Hacienda
Subsidio para Nómina de
Telesecundaria
327,151,722.00
Instituto de Formación
Docente del Estado de
Sonora
Educación Normal
102,927,604.00
Total Asignado
(modificado) 7,746,429,323.22
Total Ejercido
7,746,429,323.22
Diferencia 0.00
Fuentes de información: Informes trimestrales FAEB del Organismo
Público Descentralizado Servicios Educativos del Estado de Sonora (SEES) /
Cuenta Pública 2014.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
47
Sistematización de la Información 40. Las aplicaciones informáticas o sistemas institucionales con que cuenta el programa tienen las siguientes característ icas:
a) Cuentan con fuentes de información confiables y permiten verif icar o validar la información capturada.
b) Tienen establecida la periodicidad y las fechas l ímites para la actualización de los valores de las variables.
c) Proporcionan información al personal involucrado en el proceso correspondiente.
d) Están integradas, es decir, no existe discrepancia entre la información de las aplicaciones o sistemas.
Si.
Actualmente los SEES cuentan con un sistema informático de desarrollo propio que cumple parcialmente con la Ley General de Contabilidad Gubernamental (LGCG), el cual no cumple con protocolos de validación y control, además de que corre en una plataforma informática que no responde a las necesidades institucionales. Está en proceso de implementación la operación de una plataforma Government Resource Planning (GRP) que dará cumplimiento a todas las disposiciones marcadas por la LGCG.
Fuentes de información: Sistemas informáticos de la Dirección de Información y Estadística de la SEC / Portal Aplicativo de la SHCP / Sistema de Formato Único.
Nivel 4 • Los sistemas o aplicaciones informáticas del programa tienen todas las
características establecidas.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
48
Cumplimiento y Avance de los Indicadores de Gestión y Productos 41. ¿Cuál es el avance de los indicadores de servicios y de gestión (Actividades y Componentes) y de resultados (Fin y Propósito) de la
MIR del programa respecto de sus metas?18
CUADRO 3. COMPORTAMIENTO DE LOS INDICADORES DE LA MIR DEL FAEB AL CIERRE DE 201419
Nivel de Objetivo Nombre del Indicador Meta
Comportamiento
del Indicador al
cierre de 2014
Fin Porcentaje de estudiantes que obtienen el nivel de logro educativo insuficiente en los dominios de español y matemáticas evaluados por EXCALE en educación básica.
3ro. Primaria 2018 Español 17.2%
Matemáticas 27%.0 6to. Primaria 2017
Español 12.0% Matemáticas 10.5%
3ro. Secundaria 2016 Español
Español 32.3% Matemáticas 46.7%
A 2012 3ro. De Secundaria
Nacional Español 23.4%
Matemáticas 33.7%
Referencia Estatal Español 31.1%
Matemáticas 35.1%
Propósito Eficiencia terminal de alumnos egresados en educación primaria y secundaria escuela apoyadas por FAEB). 92.25 89.7
Componente Índice de cobertura de la educación básica en escuelas apoyadas por el FAEB.
55.8 55.2
Actividades20
1 Porcentaje de recursos del FAEB destinados a educación preescolar. 12.98 13.7
2 Porcentaje de recursos del FAEB destinados a educación primaria. 49.79 41.21
3 Porcentaje de recursos del FAEB destinados a educación secundaria. 30.2 32.28
4 Porcentaje de recursos del FAEB destinados a educación especial e indígena. Aspecto de mejora. No disponible
5 Porcentaje de recursos del FAEB destinados al IFODES. Aspecto de mejora. No disponible
Fuente de información: Sistemas informáticos de la Dirección de Información y Estadística de la SEC / Panorama Educativo de México 2014 / Portal Aplicativo de la SHCP / Sistema de Formato Único.
18 Anexo 15. Avance de los Indicadores respecto de las Metas. 19 Un aspecto de mejora detectado en la determinación de la información es la necesidad de incorporar a la medición los datos de Telesecundaria para reportar los logros en los indicadores de todos los niveles del Resumen Narrativo. 20 Los datos para reportar el progreso de las Actividades varia en función de las adecuaciones presupuestarias del ejercicio pues la meta se planea con base en el presupuesto asignado.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
49
Rendición de cuentas y transparencia 42. El programa cuenta con mecanismos de transparencia y rendición de cuentas con las siguientes característ icas:
a) Las ROP o documento normativo están disponibles en la página electrónica de manera accesible, a menos de tres cl ics. b) Los resultados principales del programa son difundidos en la página electrónica de manera accesible, a menos de tres cl ics. c) Cuenta con un teléfono o correo electrónico para informar y orientar tanto al beneficiario como al ciudadano en general, disponible en la página electrónica, accesible a menos de tres cl ics. d) La dependencia o entidad que opera el Programa no cuenta con modif icación de respuesta a partir de recursos de revisión presentados ante el Instituto Federal de Acceso a la Información Pública ( IFAI).
Si.
Como se ha comentado anteriormente, al tratarse de un fondo constituido con recursos federales, la información del FAEB es accesible a través de la internet, específicamente la Ley General de Educación, la Ley de Coordinación fiscal y la información de la Cuenta Pública 2014. A partir de la página principal de la SEC (www.sec-sonora.gob.mx) se accede al Portal de Información Pública Básica de Servicios Educativos del Estado de Sonora (SEES), y en inciso XV se localizan las cuentas públicas estatales y municipales, según corresponda (se pueden bajar los archivos en PDF de los años 2010 a 2014). Por otro lado, en el Portal de Transparencia del Gobierno del Estado, en la sección de Cuentas Públicas Estatales de la Oficialía Mayor, se tiene acceso a los datos capturados en el SFU del PASH, sobre las aplicaciones de Recursos Federales por parte del Estado:
http://transparencia.esonora.gob.mx/Sonora/Transparencia/Poder+Ejecutivo/Secretar%C3%ADas/Oficial%C3%ADa+Mayor/Cuenta+P%C3%BAblica+Estatal/Cuentas+P%C3%BAblicas.htm.
Fuentes de información: Página web de la SEC.
2 • Los mecanismos de transparencia y rendición de cuentas tienen
dos de las características establecidas.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
50
APARTADO 5. PERCEPCIÓN DE LA POBLACIÓN ATENDIDA 43. El programa cuenta con instrumentos para medir el grado de satisfacción de su población atendida con las siguientes característ icas21:
a) Su aplicación se realiza de manera que no se induzcan las respuestas.
b) Corresponden a las característ icas de sus beneficiarios.
c) Los resultados que arrojan son representativos.
No.
Existen estudios que miden la eficacia y eficiencia de la educación en el corto mediano y largo plazos. No existen estudios que midan, por lo menos en el caso específico del FAEB, el grado de satisfacción de la población atendida. Sin embargo, es importante señalar que existen documentos como Panorama Educativo de México del INEE, que estudian el desarrollo de los diferentes niveles educativos en el país.
Fuentes de información: No hay.
21 Anexo 16. Instrumentos de Medición del Grado de Satisfacción de la Población Atendida.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
51
APARTADO 6. MEDICIÓN DE LOS RESULTADOS 44. ¿Cómo documenta el programa sus resultados a nivel de Fin y de
Propósito?
a) Con indicadores de la MIR.
b) Con hallazgos de estudios o evaluaciones que no son de impacto.
c) Con información de estudios o evaluaciones r igurosas nacionales
o internacionales que muestran el impacto de programas similares.
d) Con hallazgos de evaluaciones de impacto.
El Organismo Público Descentralizado Servicios Educativos del Estado de Sonora (SEES) da seguimiento a los indicadores de la MIR del FAEB, y los reporta de manera trimestral a través del SFU del PASH.
Actualmente, a nivel nacional, el INEE publica el estudio denominado Panorama Educativo de México 2014, a través del cual estudia y refleja los resultados que se han obtenido a nivel nacional en materia de educación. Incluso, esta publicación destaca los resultados obtenidos en indicadores como EXCALE que arrojan información de mediano y largo plazo.
Un aspecto relevante detectado en la revisión es que el indicador EXCALE planteado a nivel de Fin, dejará de aplicarse a partir del año 2015, ya que el INEE continuará cumpliendo con su tarea de evaluar el Sistema Educativo Nacional (SEN ) con una nueva generación de pruebas, según el Plan Nacional para las Evaluaciones de los Aprendizajes (PLANEA ), el cual concentra los nuevos instrumentos que sustituyen a las pruebas de EXCALE y a la Evaluación Nacional de Logro Académico en Centros Escolares (ENLACE).
Fuentes de información: Sistemas informáticos de la Dirección de Información y Estadística de la SEC / Informes trimestrales de los SEES / Portal Aplicativo de la SHCP / Sistema de Formato Único / INEE. Panorama Educativo de México 2014.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
52
45. En caso de que el programa cuente con indicadores para medir su Fin y Propósito, inciso a) de la pregunta anterior, ¿cuáles han sido
sus resultados?
Si.
De acuerdo al Capítulo II. Alineación a las Metas Nacionales del PSE 2013 – 2018, se establece la vinculación entre la cadena Meta – Objetivo - Estrategia del PND, con el objetivo Fin utilizado en la MIR del FAEB, proveniente del PSE: Objetivo 1. Asegurar la calidad de los aprendizajes en la educación básica y la formación integral de todos los grupos de la población. De acuerdo al PSE 2013 – 2018, el indicador para medir su logro es el “Porcentaje de estudiantes que obtienen el nivel de logro educativo insuficiente en los dominios de español y matemáticas evaluados por EXCALE en educación básica”. Las metas planteadas para 2018, son las siguientes:
3ro. Primaria 2018 Español 17.2%
Matemáticas 27%.0
6to. Primaria 2017 Español 12.0%
Matemáticas 10.5% 3ro. Secundaria 2016
Español 32.3%
Matemáticas 46.7%
Hasta su medición del año 2012, el INEE reporta en Panorama Educativo de 2014, los siguientes logros para 3ro. de secundaria: Español 23.4% y 33.7% para matemáticas, lo cual muestra un comportamiento positivo hasta el momento, el cual se podría ver afectado por el crecimiento de la población objetivo y los problemas para cubrir la demanda de cobertura. Por otro lado, a nivel de propósito, para 2014, la meta para eficiencia terminal de niños y niñas que culminan sus niveles educativos fue de 92.25%, obteniéndose una eficiencia terminal de 89.7%, 2.55% por debajo de la meta estimada.
Fuentes de información: PSE 2013 – 2018 / INEE. Panorama Educativo de México 2014 / Datos estadísticos del Organismo Público Descentralizado Servicios Educativos del Estado de Sonora (SEES).
Nivel 4
• Hay resultados positivos del programa a nivel de Fin y de Propósito.
• Los resultados son suficientes para señalar que el programa cumple con el Propósito y contribuye al Fin.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
53
46. En caso de que el programa cuente con evaluación(es) externa(s) que no sea(n) de impacto y que permite(n) identif icar hallazgo(s) relacionado(s) con el Fin y el Propósito del programa, inciso b) de la pregunta 44, dichas evaluaciones cuentan con las siguientes característ icas: a) Se compara la situación de los beneficiarios en al menos dos puntos en el t iempo, antes y después de otorgado el apoyo. b) La metodología uti l izada permite identif icar algún t ipo de relación entre la situación actual de los beneficiarios y la intervención del Programa. c) Dados los objetivos del Programa, la elección de los indicadores uti l izados para medir los resultados se refieren al Fin y Propósito y/o característ icas directamente relacionadas con ellos. d) La selección de la muestra uti l izada garantiza la representatividad de los resultados entre los beneficiarios del Programa.
En el caso del estudio Panorama Educativo de México 2014, el INEE cuenta con la infraestructura de personal especializado y plataforma metodológica para el seguimiento y construcción de indicadores de impacto que muestra, por ejemplo, a traves del indicador EXCALE, un probable impacto positivo en la mejora educativa de los habitantes del Estado de Sonora que son atendidos gracias a los recursos del FAEB. En este sentido, en la medición efectuada al año 2012, EXCALE muestra un nivel de logro educativo insuficiente para el nivel de 3ro. de Secundaria del Estado de Sonora de 31.1% en Español y 35.1% en Matemáticas, 1.2% y 11.6%, respectivamente, por debajo de la meta nacional esperada para el año 2016.
En cuanto a la eficiencia terminal que mide el logro a nivel de Propósito, se considera que este indicador si podría estar reflejando la incidencia del FAEB en el desempeño educativo de niños y niñas de EB en el Estado, ya que si bien al cierre de 2014 la meta planteada se alcanzó en cerca del 99% al llegar a 55.2% de niños y niñas que culminaron su nivel respectivo en EB, ello demuestra en parte la importancia que tiene el FAEB para financiar los servicios educativos de este nivel escolar. Tan solo cabe mencionar que el 95% del FAEB se ocupa para financiar nómina de dichos servicios educativos.
Fuentes de información: PSE 2013 – 2018 / INEE. Panorama Educativo de México 2014 / Datos estadísticos del Organismo Público Descentralizado Servicios Educativos del Estado de Sonora (SEES).
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
54
47. En caso de que el programa cuente con evaluación(es) externa(s), diferente(s) a evaluaciones de impacto, que permite(n) identif icar uno o varios hallazgos relacionados con el Fin y/o el Propósito del programa, ¿cuáles son los resultados reportados en
esas evaluaciones?
En la Evaluación efectuada para el ejercicio 2013 del FAEB, no se desprendieron ASM.
Fuente de información: Evaluación al Desempeño de los Recursos del Fondo de Aportaciones para la Educación Básica y Normal (FAEB) en el Estado de Sonora, Año 2013.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
55
48. En caso de que el programa cuente con información de estudios o evaluaciones nacionales e internacionales que muestran impacto de programas similares, inciso c) de la pregunta 44, dichas evaluaciones cuentan con las siguientes características:
a) Se compara un grupo de beneficiarios con uno de no beneficiarios de características similares.
b) La(s) metodología(s) aplicadas son acordes a las características del programa y la información disponible, es decir, permite generar una estimación lo más l ibre posible de sesgos en la comparación del grupo de beneficiarios y no beneficiarios.
c) Se util iza información de al menos dos momentos en el tiempo.
d) La selección de la muestra util izada garantiza la representatividad de los resultados.
Si.
El PSE 2013 – 2018, reconoce la publicación Panorama Educativo de México del INEE, como la fuente oficial para consultar el desarrollo del indicador “Porcentaje de estudiantes que obtienen el nivel de logro educativo insuficiente en los dominios de español y matemáticas evaluados por EXCALE en educación básica”.
El documento ofrece información integral sobre la situación educativa de México, y bajo la consideración del carácter general del objetivo Fin del FAEB, se considera factible señalar que dado las metodologías aplicadas por el INEE en la construcción de sus parámetros de medición, ello es adecuado a las características requeridas para medir el impacto del FAEB, fondo éste que al confluir con otros programas, proyectos, políticas públicas y fondos podría estar contribuyendo al logro de Asegurar la calidad de los aprendizajes en la educación básica y la formación integral de todos los grupos de la población.
Fuentes de información: INEE. Panorama Educativo de México 2014.
1 • La evaluación de impacto tiene la característica a.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
56
49. En caso de que el programa cuente con información de estudios o evaluaciones nacionales e internacionales que muestran impacto de programas similares ¿qué resultados se han demostrado?
Bajo la consideración de que el resultado esperado del FAEB se mide en el mediano y largo plazo a través del indicador EXCALE (porcentaje de estudiantes que obtienen el nivel de logro educativo insuficiente en los dominios de español y matemáticas), de acuerdo a su vinculación con el Objetivo 1 establecido en el PSE 2013 – 2018, a nivel nacional, la publicación Panorama Educativo de México 2014, señala que:
“Se destaca que a nivel nacional 33.7% de los estudiantes de tercero de secundaria tienen un nivel de logro insuficiente en Matemáticas, 29.6% en Ciencias, 23.4% en Español y 20.8% en Formación Cívica y Ética”.
Al analizar el comportamiento de este indicador por entidad federativa, se observa que en cuatro de ellas cerca de la mitad de sus alumnos de tercero de secundaria tuvieron un desempeño insuficiente en Matemáticas: Tabasco (48.6%), Chiapas (48.1%), Michoacán (43.9%) y Campeche (41.5%).
En cuanto al desempeño en Español, se observa que en cinco entidades más de un tercio de sus alumnos, que están por finalizar la educación básica, tuvieron un nivel de logro insuficiente: Chiapas (39.8%), Michoacán (36.2%), Nayarit (32.1%), Sonora (31.1%) y Zacatecas (30.3%).
Volviendo al caso de Sonora, la medición al año 2012 presentada en el informe de 2014 de Panorama Educativo de México, le situa con un logro educativo insuficiente para alumnos de 3ro. de secundaria de 31.1% en español, y 35.1% en matemáticas, manteniendo una posición positiva en relación con la meta nacional para 2016 que es de 32.3% y 46.7, respectivamente22.
Fuentes de Información: INEE. Panorama Educativo de México 2014.
22 INEE. Panorama Educativo de México 2014. Pág. 352.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
57
50. En caso de que el programa cuente con evaluaciones de impacto, con qué características de las siguientes cuentan dichas evaluaciones:
a) Se compara un grupo de beneficiarios con uno de no beneficiarios de características similares.
b) La(s) metodología(s) aplicadas son acordes a las características del programa y la información disponible, es decir, permite generar una estimación lo más l ibre posible de sesgos en la comparación del grupo de beneficiarios y no beneficiarios.
c) Se util iza información de al menos dos momentos en el tiempo.
d) La selección de la muestra util izada garantiza la representatividad de los resultados.
No.
Fuentes de información: No aplica.
51. En caso de que se hayan realizado evaluaciones de impacto que cumplan con al menos las características señaladas en los incisos a) y b) de la pregunta anterior, ¿cuáles son los resultados reportados en esas evaluaciones?
No hay evaluaciones de impacto.
Fuentes de información: No aplica.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
58
ANÁLISIS DE FORTALEZAS, OPORTUNIDADES, DEBILIDADES, AMENAZAS Y RECOMENDACIONES23
Tema de la Evaluación
Fortalezas y Oportunidades / Debilidad o Amenaza
Referencia
(Pregunta)
Fortalezas y Oportunidades
Diseño
Durante la revisión se constató que existen elementos para derivar la problemática que pudo dar pie a la creación del FAEB.
1
El FAEB se encuentra vinculado con el Objetivo 1. Asegurar la calidad de
los aprendizajes en la educación básica y la formación integral de todos los grupos de la población, del PSE 2013 – 2018, lo cual está establecido
en la Matriz de Indicadores para Resultados propuesta por la Dirección General de Presupuesto y Recursos Financieros de la Oficialía Mayor de la
Secretaría de Educación Pública (SEP) a la Secretaría de Educación y Cultura (SEC) del Estado de Sonora, mediante el oficio No. DFSEPSON/0249/2014 21 de marzo de 2014. Asimismo, se constató que
además de que el FAEB podría estar contribuyendo al logro de los Objetivos de Desarrollo del Milenio, también podría contribuir al logro de
los Objetivos de Desarrollo Sostenible que deberían empezar a considerarse a partir del año 2016 y hasta 2030.
4 / 5 / 6
La MIR del FAEB cuenta con elementos sólidos para sustentar la intervención, su seguimiento, evaluación y rendición de cuentas. Hay
elementos de mejora para focalizar el nivel de propósito y de actividad. 10
Planeación y orientación a resultados
El Gobierno del Estado de Sonora cuenta con mecanismos consolidados para llevar a cabo sus procesos de planeación, programación y ejercicio
del gasto. 14 / 15
Cobertura y focalización
Si bien el FAEB tiene un objetivo específico marcado por su razón de ser y establecido en la Ley Coordinación Fiscal y la Ley General de Educación, el Estado tiene claro cuál es el uso y la cobertura que busca atender, a través de su Estrategia Estatal para el Desarrollo de la Educación Básica.
23 - 25
Operación Las fuentes de información principales que utiliza el Organismo Público Descentralizado Servicios Educativos del Estado de Sonora (SEES) son los datos y proyecciones que publica el Consejo Nacional de Población (CONAPO), el Instituto Nacional de Estadística, Geografía e Informática
40
23 En el Anexo 17. Principales Fortalezas, Oportunidades, Debilidades, Amenazas y Recomendaciones, se presenta el formulario completo.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
59
(INEGI) y las estadísticas generadas por la propia SEP a nivel Federal y la SEC a nivel Estatal , a través de la Dirección de Información y Estadística del Organismo Público Descentralizado Servicios Educativos del Estado de Sonora (SEES).
Medición de resultados
La SEP mediante el Sistema de Seguimiento a la MIR (SMIR) operado por la Dirección General de Planeación y Estadística Educativa (DGPEyE) realiza el seguimiento de las metas de los indicadores propuestos en la MIR de 20 actividades prioritarias del sector educativo, entre ellas las correspondientes a Educación Básica.
Debilidades y amenazas
Diseño
El FAEB para el Estado de Sonora no cuenta con una definición del problema que atiende, y en consecuencia tampoco cuenta con un análisis de causas, efectos y características del problema. Durante el proceso de acopio y revisión de información, se constató que el FAEB no cuenta con un diagnóstico ni con información o documentos que describan el problema.
1
Se sugiere completar las MIR del FAEB incorporando los elementos faltantes a nivel de Supuestos a través de los cuales se reflejen probables riegos en el logro de los objetivos propuestos en cada nivel de su Resumen Narrativo. En el Anexo 4. Resumen Narrativo de la MIR se hace una propuesta integra incluyendo Supuestos.
10
No existe un sistema uniforme para el monitoreo y evaluación del FAEB. Sin embargo, existe evidencia de contar con elementos para su construcción.
7
Planeación y orientación a resultados
No existe evidencia de Evaluaciones anteriores en materia de Consistencia y Resultados que reflejen Aspectos Susceptibles de Mejora. Tampoco hay evidencia de Evaluaciones de Impacto.
17 / 18 / 19 / 20
Cobertura y focalización
Al ser un Fondo constituido con recursos federales, el FAEB no cuenta claramente establecida una definición de la población a la que busca beneficiar.
23 / 24
Medición de resultados
Una amenaza relevante detectada en la revisión es que el indicador EXCALE planteado a nivel de Fin, dejará de aplicarse a partir del año 2015, ya que el INEE continuará cumpliendo con su tarea de evaluar el Sistema Educativo Nacional (SEN ) con una nueva generación de pruebas, según el Plan Nacional para las Evaluaciones de los Aprendizajes (PLANEA ), el cual concentra los nuevos instrumentos que sustituyen a las pruebas de EXCALE y a la Evaluación Nacional de Logro Académico en Centros Escolares (ENLACE).
12 / 44
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
60
COMPARACIÓN CON LOS RESULTADOS DE LA EVALUACIÓN DE CONSISTENCIA Y RESULTADOS No aplica. No existen Evaluaciones de Consistencia y Resultados anteriores.
CONCLUSIONES24 Diseño
A. Aspectos de la MIR
En materia de diseño existen elementos relevantes que esta Evaluación destaca con el fin de convertirlos en oportunidad de mejora para la concepción y operación del FAEB en función de los requerimientos de Educación Básica en el Estado de Sonora. Destacan los
siguientes aspectos:
La MIR en cuestión debe guardar una lógica vertical y horizontal que facilite su conocimiento e interpretación. En este sentido, la presente Evaluación hace una serie de recomendaciones para acotar y mejorar su Resumen Narrativo de acuerdo a los aspectos básicos establecidos por la Metodología de Marco Lógico en el sentido de que la MIR debe guardar congruencia y consistencia entre los cuatro niveles de objetivos de su Resumen Narrativo, en sentido vertical y horizontal. Si bien se encontró que la MIR actual es lógica y guarda congruencia en cuanto a su diseño y aplicación, se proponen las
siguientes adecuaciones para su mejor integración:
1. Nivel de Fin. Incluir la frase “Contribuir a…” el principio del Objetivo 1 del PSE 2013 – 2018, elegido para evidenciar y vincular la contribución del Fondo al logro de la Meta 3
del PND 2013 – 2018, un México con educación de calidad.
Un aspecto relevante en la medición del Fin es la sustitución del indicador EXCALE por una nueva generación de pruebas, según el Plan Nacional para las Evaluaciones de los
Aprendizajes (PLANEA ).
2. Nivel de Propósito. Acotarlo para aclarar cuál es el resultado esperado de la acción del Fondo en el Estado de Sonora, pues en su enunciación de origen propone que los niños y niñas del Estado de Sonora tengan acceso y completen sus estudios de Educación Básica. La propuesta, la cual además incluye la ubicación del lugar donde se lleva a cabo aplicación del Fondo, es decir, el Estado de Sonora, es:
Los niños y niñas del Estado de Sonora de 3 a 14 años de edad, completan sus estudios
en educación básica.
En el análisis efectuado se encontró que al considerar que los niños y niñas acceden a la Educación Básica como está establecido en su origen, se está reiterando el logro del
24 Anexo 19. Valoración Final del FAEB.
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
61
Componente que busca precisamente cubrir este aspecto, y por otro lado, al acotar de la manera propuesta el objetivo Propósito, se atiende y entiende de mejor manera el indicador a éste asociado que mide la eficiencia terminal de Educación Básica en el
Estado.
En la integración de los medios de verificación para alimentar el seguimiento, monitoreo y evaluación del indicadores tanto de este nivel como en los niveles de Componente y Actividades, se observó la posibilidad de incorporar la información relativa a Telesecundaria pues es un rubro que también incide en el desempeño y podría ayudar a
enfocar mejor los logros del FAEB en el Estado.
3. Nivel de Componente. No hay comentario.
4. Nivel de Actividades. Se propone modificar la enunciación para todas las Actividades, iniciando con la frase “Gestión de recursos…” y en seguida el nivel de Educación Básica al cual atiende: preescolar, primaria, secundaria, especial e indígena e IFODES. De esta manera, el nivel de Actividades y sus correspondientes insumos financieros, recuperan una lógica que completa el círculo de la rendición de cuentas con respecto hacia dónde
se canalizan los recursos provenientes de la federación.
Es importante señalar a este nivel que se detectó durante la revisión que existe una variación entre las metas y el resultado de la medición proporcionada por los indicadores, debido al efecto que tienen las adecuaciones presupuestarias durante el ciclo del ejercicio fiscal. En otras palabras, al medirse el porcentaje de recursos presupuestarios ejercicio en cada Actividad, ello está sujeto al efecto de las adecuaciones presupuestarias del ejercicio.
5. Supuestos. Esta Evaluación propone Supuestos (Ver Anexo 4), en calidad de propuesta inicial, para completar la MIR e integrarle así la lógica horizontal de la cual carece, ya que los Supuestos existentes no cumplen con la característica esencial de ser riesgos enunciados en calidad de Supuestos. Es decir, los Supuestos son construcciones enunciativas que al contrario de un riesgo, dejan ver las condiciones óptimas para el
logro de cada nivel del Resumen Narrativo.
B. La Vinculación del FAEB a Objetivos Universales
Como un aspecto relevante derivado de esta Evaluación se encontró que el FAEB tal como se aplica para la Educación Básica en el Estado de Sonora, se vincula a la meta 2
de los Objetivos de Desarrollo del Milenio (ODM):
Asegurar que, para el año 2015, los niños y niñas de todo el mundo puedan terminar un
ciclo completo de enseñanza en primaria.
Así también y dada la caducidad de los ODM en el año 2015, y que en adelante están por entrar en práctica los Objetivos de Desarrollo Sostenible (ODS) que actualmente están en calidad de propuesta y son 17. De ellos, el FAEB podría vincularse con el
objetivo número 4:
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
62
Garantizar una educación inclusiva, equitativa y de calidad y promover oportunidades de
aprendizaje durante toda la vida para todos.
C. El Sistema de Monitoreo y Evaluación
Dentro de los elementos para el monitoreo y evaluación que ofrece la MIR (indicadores y medios de verificación), revisar la pertinencia de enfatizar la importancia de contar con un Sistema de Evaluación del Desempeño, el cual debe ser uniforme, claro e incorporar de manera ordenada los programas, proyectos, fondos que en aras de la generación de valor público, deben ser evaluados para el aprendizaje y mejora continua y la rendición
de cuentas.
D. Las Evaluaciones para la Mejora Continua
Hacer de la evaluación un hábito institucional, tanto aquellas evaluaciones realizadas por un ente o profesional externo, como aquella que puede realizarse por la misma
institución operadora, es decir, una autoevaluación periódica
Planeación y Orientación a Resultados
A. Mecanismos para la Planeación y Orientación a Resultados
El Gobierno del Estado de Sonora cuenta con mecanismos consolidados para llevar a cabo sus procesos de planeación, programación y ejercicio del gasto, y de esta manera dar seguimiento a la MIR del FAEB. Anualmente se integra un Programa Anual, de acuerdo a los lineamientos establecidos en el Manual de Programación y Presupuestación del Estado de Sonora para las estapas de planeación, programación,
presupuesto y dimensión del gasto.
B. La Estrategia Local y el FAEB
En su Estrategia Local para el Desarrollo de la Educación Básica del Ejercicio Fiscal 2014, el Estado presenta un diagnóstico de la situación y plantea las estrategias para atenderlo señalando sus principales ejes de acción, en apego a lo establecido en el Plan Sectorial de Educación y Cultura 2010 – 2015 del Estado de Sonora el cual plantea las metas y objetivos a alcanzar en el mediano y largo plazos. Cabe mencionar, sin embargo, que al ser el FAEB un fondo constituido con recursos federalizados su seguimiento si se contempla e integra al sistema presupuestario federal, el cual es informado por la entidad de manera trimestral a través del SFU en el PASH.
Cobertura y Focalización
A. La atención de la Cobertura como una Prioridad del Estado de Sonora
Al ser un Fondo constituido por recursos Federales, el FAEB (o programa) no cuenta con una estrategia propia de cobertura. La Ley de Coordinación Fiscal establece su asignación anual en el Presupuesto de Egresos de la Federación (PEF) y establece los criterios para su suscripción y asignación. Por otro lado, derivado de la asignación según
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
63
el PEF, el Estado anualmente integra un Programa Anual de acuerdo a los lineamientos establecidos en el Manual de Programación y Presupuestación del Estado de Sonora para las estapas de planeación, programación, presupuesto y dimensión del gasto. Este ejercicio está institucionalizado por los responsables de los principales procesos de los programas del Estado. En la Estrategia Local para el Desarrollo de la Educación Básica del Ejercicio Fiscal 2014, el Estado presenta un diagnóstico de la situación y plantea las estrategias para atenderlo señalando sus principales ejes de acción, en apego a lo establecido en el Plan Sectorial de Educación y Cultura 2010 – 2015 del Estado de Sonora el cual plantea las metas y objetivos a alcanzar en el mediano y largo plazos.
Operación
A. Creación del FONE que Sustituye al FAEB
Un hecho relevante que se preve impacte en la operación del Fondo es la modificación a la Ley de Coordinación Fiscal el 9 de diciembre de 2013, mediante la cual se crea el Fondo de Aportaciones para la Nómina Educativa y Gasto Operativo (FONE), el cual sustituye al FAEB a partir del año 2015. Esta modificación obedece principalmente a que las aportaciones federales para el FONE ya no serán administradas por los gobiernos de los Estados, sino por la SHCP (LCF , 2014, 11 de agosto, art. 49); además, en ella se definieron los criterios por los que se determinará el monto destinado al FONE de cada año en el Presupuesto de Egresos de la Federación (PEF ) y se estipuló la manera en la que se distribuirán los recursos entre las entidades.
Percepción de la Población Atendida
A. Información para el Seguimiento de la Población.
El principal hallazgo respecto a la percepción de la población atendida es que el FAEB no tiene mecanismos para llevar a cabo una medición de la percepción de la población atendida. Hoy en día, el Fondo mide el logro de sus resultados básicamente a través del uso de datos estadísticos y el reporte de indicadores de eficacia tales como los resultados de el Exámen Único para la Calidad Educativa, la eficiencia terminal y la
cobertura.
Medición de Resultados
A. Cambio del Indicador EXCALE para medir el Fin
Panorama Educativo de México 2014, es una publicación del Instituto Nacional de Evaluación de la Educación (INEE) a través del cual estudia y refleja los resultados que se han obtenido a nivel nacional en materia de educación. Incluso, esta publicación destaca los resultados obtenidos en indicadores como EXCALE que arrojan información de mediano y largo plazos. Un aspecto relevante detectado en la revisión es que el indicador EXCALE planteado a nivel de Fin, dejará de aplicarse a partir del año 2015, ya que el INEE continuará cumpliendo con su tarea de evaluar el Sistema Educativo
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
64
Nacional (SEN ) con una nueva generación de pruebas, según el Plan Nacional para las Evaluaciones de los Aprendizajes (PLANEA ), el cual concentra los nuevos instrumentos que sustituyen a las pruebas de EXCALE y a la Evaluación Nacional de Logro Académico
en Centros Escolares (ENLACE).
FON
DO
DE
APO
RTA
CIO
NES
PA
RA L
A E
DU
CA
CIÓ
N B
ÁSI
CA
Y N
ORM
AL
DEL
EST
AD
O
DE
SO
NO
RA
65
PERFIL Y EQUIPO DE LA INSTANCIA EVALUADORA En la siguiente tabla se especifican los requisitos mínimos académicos y de
experiencia esperados de cada uno de los integrantes clave del equipo
evaluador, dadas las particularidades del programa y la evaluación. (La unidad
administrativa coordinadora de la evaluación de cada dependencia o entidad
debe especificar los requisitos).
Cargo en el
Equipo Clave
Requisitos
Académicos
Experiencia
General Experiencia Específica
Juan Carlos Robles Ríos
Licenciado en Relaciones Internacionales UNAM Cédula profesional: 2296628 Maestro en Finanzas Universidad Anáhuac Cédula profesional: 6401256
Experiencia en el diseño y operación de proyectos financiados por Organismos Financieros Internacionales.
Evaluación de programas y proyectos público, privados y financiados por organismos internacionales.
Evaluación de proyectos. Experiencia en capacitación sobre el tema de Presupuesto basado en Resultados y Metodología de Marco Lógico. Experiencia en educación a distancia.
Costo de la Consultoría
Monto total
M.N. 303,920.00
(Trescientos tres mil novecientos veinte pesos 00/100 M.N.)