evaluaciÓn de resultados: metodologÍas ...‘o y formulaciÓn de polÍticas y programas ejecuciÓn...

22
EVALUACI EVALUACI Ó Ó N DE RESULTADOS: N DE RESULTADOS: METODOLOG METODOLOG Í Í AS AS Jorge de la Fuente Consultor Área de Políticas Presupuestarias y Gestión Pública ILPES/CEPAL [email protected] Curso Internacional Curso Internacional Pol Pol í í ticas presupuestarias y gesti ticas presupuestarias y gesti ó ó n por resultados en ALC n por resultados en ALC La Antigua Guatemala,17 al 28 de agosto 2009 La Antigua Guatemala,17 al 28 de agosto 2009

Upload: buidat

Post on 17-May-2018

214 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: EVALUACIÓN DE RESULTADOS: METODOLOGÍAS ...‘O Y FORMULACIÓN DE POLÍTICAS Y PROGRAMAS EJECUCIÓN E IMPLEMENTACIÓN EVALUACION POLITICAS, PROGRAMAS DESEMPEÑO, GESTION EVALUACION

EVALUACIEVALUACIÓÓN DE RESULTADOS: N DE RESULTADOS:

METODOLOGMETODOLOGÍÍASAS

Jorge de la FuenteConsultorÁrea de Políticas Presupuestarias y Gestión Pública ILPES/[email protected]

Curso InternacionalCurso InternacionalPolPolííticas presupuestarias y gestiticas presupuestarias y gestióón por resultados en ALCn por resultados en ALC

La Antigua Guatemala,17 al 28 de agosto 2009La Antigua Guatemala,17 al 28 de agosto 2009

Page 2: EVALUACIÓN DE RESULTADOS: METODOLOGÍAS ...‘O Y FORMULACIÓN DE POLÍTICAS Y PROGRAMAS EJECUCIÓN E IMPLEMENTACIÓN EVALUACION POLITICAS, PROGRAMAS DESEMPEÑO, GESTION EVALUACION

EVALUACION GUBERNAMENTAL EX POSTEVALUACION GUBERNAMENTAL EX POST

Page 3: EVALUACIÓN DE RESULTADOS: METODOLOGÍAS ...‘O Y FORMULACIÓN DE POLÍTICAS Y PROGRAMAS EJECUCIÓN E IMPLEMENTACIÓN EVALUACION POLITICAS, PROGRAMAS DESEMPEÑO, GESTION EVALUACION

DISEÑO Y FORMULACIÓN DE POLÍTICAS Y PROGRAMAS

EJECUCIÓN E IMPLEMENTACIÓN

EVALUACIONPOLITICAS, PROGRAMAS

DESEMPEÑO, GESTION

EVALUACION GUBERNAMENTAL EX POSTEVALUACION GUBERNAMENTAL EX POST

TOMA DETOMA DEDECISIONESDECISIONES

TOMA DETOMA DEDECISIONESDECISIONES

Page 4: EVALUACIÓN DE RESULTADOS: METODOLOGÍAS ...‘O Y FORMULACIÓN DE POLÍTICAS Y PROGRAMAS EJECUCIÓN E IMPLEMENTACIÓN EVALUACION POLITICAS, PROGRAMAS DESEMPEÑO, GESTION EVALUACION

Estrategias Nacionales

Metas nacionales Proceso PolíticoCiudadanía, Encuestas, Escrutinio Público

EVALUACION Y GESTION POR RESULTADOS

Políticas Metas sectoriales Comités Científicos de Evaluación, Paneles de Expertos

Operativa-Instituciones

Cumplimiento de metas de gestión y resultados finalesIndicadores de Eficiencia, Eficacia, Calidad, Economía

Sistema de Indicadores de Desempeño

Cuadro de Mando Integral

Programas Resultados, gestión, impacto

MML Evaluación de Programas, comprehen-sivas e Impacto

Inversiones Rentabilidad SocialCosto-Beneficio

Evaluación costo-beneficio ex-ante

TIPO DE ACCION GUBERNAMENTAL

QUE SE EVALUA METODOLOGIA

Page 5: EVALUACIÓN DE RESULTADOS: METODOLOGÍAS ...‘O Y FORMULACIÓN DE POLÍTICAS Y PROGRAMAS EJECUCIÓN E IMPLEMENTACIÓN EVALUACION POLITICAS, PROGRAMAS DESEMPEÑO, GESTION EVALUACION

Evaluaciones de Programas Gubernamentales (EPG)

Evaluación Comprehensiva del Gasto (ECG)

Evaluación de Impacto (EI)

TIPOS DE EVALUACIONESTIPOS DE EVALUACIONES

Page 6: EVALUACIÓN DE RESULTADOS: METODOLOGÍAS ...‘O Y FORMULACIÓN DE POLÍTICAS Y PROGRAMAS EJECUCIÓN E IMPLEMENTACIÓN EVALUACION POLITICAS, PROGRAMAS DESEMPEÑO, GESTION EVALUACION

OBJETIVOS DE LA EVALUACIONOBJETIVOS DE LA EVALUACION

METODOLOGIAMETODOLOGIA

USO DE LA EVALUACION Y USO DE LA EVALUACION Y CONSECUENCIAS PARA EL PRESUPUESTOCONSECUENCIAS PARA EL PRESUPUESTO

EVALUACIEVALUACIÓÓN DE PROGRAMAS GUBERNAMENTALESN DE PROGRAMAS GUBERNAMENTALES

Page 7: EVALUACIÓN DE RESULTADOS: METODOLOGÍAS ...‘O Y FORMULACIÓN DE POLÍTICAS Y PROGRAMAS EJECUCIÓN E IMPLEMENTACIÓN EVALUACION POLITICAS, PROGRAMAS DESEMPEÑO, GESTION EVALUACION

EVALUACIEVALUACIÓÓN DE PROGRAMAS GUBERNAMENTALESN DE PROGRAMAS GUBERNAMENTALES

LAS NOTICIAS !!!

Page 8: EVALUACIÓN DE RESULTADOS: METODOLOGÍAS ...‘O Y FORMULACIÓN DE POLÍTICAS Y PROGRAMAS EJECUCIÓN E IMPLEMENTACIÓN EVALUACION POLITICAS, PROGRAMAS DESEMPEÑO, GESTION EVALUACION

Mejorar la gestión aprendizaje institucional de los administradores de las políticas y programas

OBJETIVOS DE LA EVALUACIOBJETIVOS DE LA EVALUACIÓÓNN

la gestión

Apoyar el análisis de asignación de recursos públicos.

la toma de decisiones

Contribuir a la transparencia y accountabilityo rendición de cuentas.

Aprender de la evaluación y análisis de los resultados contribuyendo a mejorar eficiencia del presupuesto

Page 9: EVALUACIÓN DE RESULTADOS: METODOLOGÍAS ...‘O Y FORMULACIÓN DE POLÍTICAS Y PROGRAMAS EJECUCIÓN E IMPLEMENTACIÓN EVALUACION POLITICAS, PROGRAMAS DESEMPEÑO, GESTION EVALUACION

JustificaciJustificacióón n del Programadel Programa

DiseDiseññoo

OrganizaciOrganizacióón n y Gestiy Gestióónn

Resultados: Resultados: Eficacia y calidadEficacia y calidad

del programadel programa

77 AMBITOS DE EVALUACIAMBITOS DE EVALUACIÓÓNN

Que dio origen al Programa?,problemas / necesidades que se espera resolver (resultado esperado), causas y efectos

Análisis de lógica vertical y horizontal de la matriz de marco lógico del programa

AMBITOS DE EVALUACIAMBITOS DE EVALUACIÓÓNN77 AMBITOS DE EVALUACIAMBITOS DE EVALUACIÓÓNN

Estructura organizacional, relación intra-interinstitucional,Asignación de responsabilidades, gestión, participación Ciudadana, criterios de focalización, selección de Beneficiarios, asignación de recursos, mecanismos deTransferencia de recursos, modalidades de pago y Actividades de S&E

Producción de componentes, cumplimiento del propósito,Usuarios efectivos, cobertura del programa, grado de Satisfacción, contribución al fin

Page 10: EVALUACIÓN DE RESULTADOS: METODOLOGÍAS ...‘O Y FORMULACIÓN DE POLÍTICAS Y PROGRAMAS EJECUCIÓN E IMPLEMENTACIÓN EVALUACION POLITICAS, PROGRAMAS DESEMPEÑO, GESTION EVALUACION

Resultados: Resultados: Eficiencia y Eficiencia y

economeconomíía a

Sostenibilidad/Sostenibilidad/Continuidad Continuidad

Conclusiones y Conclusiones y

RecomendacionesRecomendaciones

AMBITOS DE EVALUACIAMBITOS DE EVALUACIÓÓNN

compromiso de las autoridades, acceso a los centros de decisión, coordinación inter-institucional, formalización de su estructura operativa y marco jurídico, capacidades profesionales y dotación de recursos, financiamiento para un período relevante, valoraciones de actores externos (legitimidad de beneficiarios y actores políticos y sociales)

77 AMBITOS DE EVALUACIAMBITOS DE EVALUACIÓÓNN

Análisis de eficiencia actividades y componentesGastos de administraciónEjecución presupuestariaAportes de tercerosRecuperación de gastos

Presentar resultados que han sido insuficientes y lasRecomendaciones deben apuntar a mejorar el diseño, la gestión, eficacia/calidad, eficiencia/economía

Page 11: EVALUACIÓN DE RESULTADOS: METODOLOGÍAS ...‘O Y FORMULACIÓN DE POLÍTICAS Y PROGRAMAS EJECUCIÓN E IMPLEMENTACIÓN EVALUACION POLITICAS, PROGRAMAS DESEMPEÑO, GESTION EVALUACION

PROCESO DE EVALUACIPROCESO DE EVALUACIÓÓNN

DIPRES M. Hacienda

PresidenciaM. Planificación

Congreso Propuesta programas a evaluar

Firma protocolo programas seleccionados

Llama a concursoPanel evaluación

Evaluación interna y selección

Capacitación evaluadores

PROGRAMAPrepara y envía

información prog.

Preparan MML

DIPRES

Facilita trabajo Panel

Ejecuta EPG

informes

Page 12: EVALUACIÓN DE RESULTADOS: METODOLOGÍAS ...‘O Y FORMULACIÓN DE POLÍTICAS Y PROGRAMAS EJECUCIÓN E IMPLEMENTACIÓN EVALUACION POLITICAS, PROGRAMAS DESEMPEÑO, GESTION EVALUACION

METODOLOGMETODOLOGÍÍA: MARCO LA: MARCO LÓÓGICOGICO

Page 13: EVALUACIÓN DE RESULTADOS: METODOLOGÍAS ...‘O Y FORMULACIÓN DE POLÍTICAS Y PROGRAMAS EJECUCIÓN E IMPLEMENTACIÓN EVALUACION POLITICAS, PROGRAMAS DESEMPEÑO, GESTION EVALUACION

RESULTADOS DE EVALUACIÓN DE PROGRAMAS Y SUS EFECTOS

FONDO DE PROMOCIÓN DE EXPORTACIONES (FPE) – PROCHILE (evaluación año 2002)

RESULTADOS Y EFECTOS

El FPE financia proyectos y actividades de promoción de exportaciones que permiten aumentar y diversificar la oferta exportable y elevar el valor agregado de los bienes y servicios producidos en Chile, además de promover el desarrollo exportador de las regiones y ampliar las oportunidades de exportación de las pequeñas y medianas empresas.

El FPE ha ha beneficiado a más de 2.500 empresas en el período 1996-2001 a través del cofinanciamiento de proyectos de promoción de exportaciones.

La evaluación no muestra resultados significativos del programa sobre el volumen de exportaciones o el nivel de las ventas de las empresas beneficiarias respecto de aquellas del grupo de control.

Sobre la base de los hallazgos de la evaluación, el presupuesto se redujo para el año 2004, incluyéndose también una reestructuración de las partidas presupuestarias y la elaboración de compromisos en materia de gestión interna para asegurar un mejor desempeño.

DESCRIPCIÓN

USO DE LA EVALUACION DE PROGRAMASUSO DE LA EVALUACION DE PROGRAMAS

Page 14: EVALUACIÓN DE RESULTADOS: METODOLOGÍAS ...‘O Y FORMULACIÓN DE POLÍTICAS Y PROGRAMAS EJECUCIÓN E IMPLEMENTACIÓN EVALUACION POLITICAS, PROGRAMAS DESEMPEÑO, GESTION EVALUACION

UTILIZACION DE LA EVALUACION DE PROGRAMAS EN ELUTILIZACION DE LA EVALUACION DE PROGRAMAS EN ELPRESUPUESTO Y EN EL MEJORAMIENTO DE PROGRAMASPRESUPUESTO Y EN EL MEJORAMIENTO DE PROGRAMAS

Page 15: EVALUACIÓN DE RESULTADOS: METODOLOGÍAS ...‘O Y FORMULACIÓN DE POLÍTICAS Y PROGRAMAS EJECUCIÓN E IMPLEMENTACIÓN EVALUACION POLITICAS, PROGRAMAS DESEMPEÑO, GESTION EVALUACION

COSTO DE LA EVALUACICOSTO DE LA EVALUACIÓÓNN

Page 16: EVALUACIÓN DE RESULTADOS: METODOLOGÍAS ...‘O Y FORMULACIÓN DE POLÍTICAS Y PROGRAMAS EJECUCIÓN E IMPLEMENTACIÓN EVALUACION POLITICAS, PROGRAMAS DESEMPEÑO, GESTION EVALUACION

EvaluaciEvaluacióón n Comprehensiva del Comprehensiva del

GastoGasto

Page 17: EVALUACIÓN DE RESULTADOS: METODOLOGÍAS ...‘O Y FORMULACIÓN DE POLÍTICAS Y PROGRAMAS EJECUCIÓN E IMPLEMENTACIÓN EVALUACION POLITICAS, PROGRAMAS DESEMPEÑO, GESTION EVALUACION

EVALUACIEVALUACIÓÓN COMPREHENSIVA DEL GASTON COMPREHENSIVA DEL GASTO

1. Diseño Institucional

2. Gestión Organizacional3. Resultados yUso de Recursos

Evaluacióncomprensiva

Objetivos:Objetivos:Su objetivo es evaluar el conjunto de Su objetivo es evaluar el conjunto de procedimientos, programas y polprocedimientos, programas y polííticasticas que administra un Ministerio, que administra un Ministerio, lo que implica lo que implica evaluar la racionalidad de la evaluar la racionalidad de la estructura institucionalestructura institucionalla distribucila distribucióón de n de funciones funciones entre los distintos servicios que componen un entre los distintos servicios que componen un Ministerio, Ministerio, evaluar la evaluar la eficacia, eficiencia y economeficacia, eficiencia y economíía en el uso de los recursos a en el uso de los recursos institucionalesinstitucionales

Page 18: EVALUACIÓN DE RESULTADOS: METODOLOGÍAS ...‘O Y FORMULACIÓN DE POLÍTICAS Y PROGRAMAS EJECUCIÓN E IMPLEMENTACIÓN EVALUACION POLITICAS, PROGRAMAS DESEMPEÑO, GESTION EVALUACION

EVALUACIEVALUACIÓÓN COMPREHENSIVA DEL GASTON COMPREHENSIVA DEL GASTO

1. Diseño Institucional

- Revisar misión, objetivos estratégicos de ministerio e instituciones

- Revisar consistencia entre productos estratégicos y usuarios

- Identificar y evaluar duplicaciones, superposiciones

y complementariedades existentes

- Detectar prescindibles

- Evaluar la estructura institucional y la distribución de funciones

Page 19: EVALUACIÓN DE RESULTADOS: METODOLOGÍAS ...‘O Y FORMULACIÓN DE POLÍTICAS Y PROGRAMAS EJECUCIÓN E IMPLEMENTACIÓN EVALUACION POLITICAS, PROGRAMAS DESEMPEÑO, GESTION EVALUACION

EVALUACIEVALUACIÓÓN COMPREHENSIVA DEL GASTON COMPREHENSIVA DEL GASTO

2. Gestión Organizacional

-La capacidad institucional respecto de RecursosHumanos, capacidades tecnológicas e infraestructura

-Proceso de producción de productos estratégicos

-Mecanismos de asignación y transferencias de recursos

-Mecanismos de auditoría

- Actividades de S&E

- Mecanismos de selección d beneficiarios

Page 20: EVALUACIÓN DE RESULTADOS: METODOLOGÍAS ...‘O Y FORMULACIÓN DE POLÍTICAS Y PROGRAMAS EJECUCIÓN E IMPLEMENTACIÓN EVALUACION POLITICAS, PROGRAMAS DESEMPEÑO, GESTION EVALUACION

EVALUACIEVALUACIÓÓN COMPREHENSIVA DEL GASTON COMPREHENSIVA DEL GASTO

- Identificar y evaluar los resultados en ámbitos de control (proceso, producto y resultado)y dimensiones de desempeño (eficacia, calidad, eficiencia y economía)

- Evaluar la disciplina financiera (programación de gastos y ejecución presupuestaria) a nivel central y regional y productos estratégicos

3. Resultados yUso de Recursos

Page 21: EVALUACIÓN DE RESULTADOS: METODOLOGÍAS ...‘O Y FORMULACIÓN DE POLÍTICAS Y PROGRAMAS EJECUCIÓN E IMPLEMENTACIÓN EVALUACION POLITICAS, PROGRAMAS DESEMPEÑO, GESTION EVALUACION

EVALUACIEVALUACIÓÓN COMPREHENSIVA DEL GASTON COMPREHENSIVA DEL GASTO

Prioridades Gubernamentales

Agenda de trabajogubernamental

Misión ministerial

Misión institucional

Objetivos Estratégicos ministeriales

ProductosEstratégicos

Objetivos Estratégicos Institucionales

Clientes/Usuarios

IndicadorDimensión

Ámbito

Gasto asociado

Medios deVerificación

Page 22: EVALUACIÓN DE RESULTADOS: METODOLOGÍAS ...‘O Y FORMULACIÓN DE POLÍTICAS Y PROGRAMAS EJECUCIÓN E IMPLEMENTACIÓN EVALUACION POLITICAS, PROGRAMAS DESEMPEÑO, GESTION EVALUACION

EJEMPLOS DE RECOMENDACIONESEJEMPLOS DE RECOMENDACIONES

Junta nacional de Jardines infantiles1. analizar la demanda potencial de jornadas especiales de atención paralos hijos (as) de trabajadores nocturnos, en las distintas regiones del país, a fin de evaluar la necesidad de extender a otros lugares la modalidadde atención nocturna2. Eliminar el rol fiscalizador de Jardines Infantiles de JUNJI.3. Concentrar el rol de diseño de política y formativo de la educación Parvularia exclusivamente en el Ministerio de Educación.

Servicio Nacional de Aduanas1. Se recomienda la elaboración de un estudio sobre los Recursos Humanosdel Servicio2. Evaluar la calidad de los servicios prestados del SNA, desde el punto devista de la satisfacción de los usuarios

Dirección de ArquitecturaRedefinir la Misión de la DA con el objeto que quede explícito el rol de asesoría técnicaEvaluar la posibilidad de prescindir de la Oficina Provincial de ChiloéRevisar las funciones asignadas al cargo de Subdirector y su justificación, buscando la mayor eficiencia de la organización.