indicadores mml

31
La Matriz de Marco Lógico: Indicadores Juan Cristóbal Bonnefoy [email protected] Secretaría de Desarrollo Social, Ciudad de México, Febrero de 2006

Upload: ivo-castillo

Post on 09-Jul-2015

1.865 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: Indicadores mml

La Matriz de Marco Lógico: Indicadores

Juan Cristóbal Bonnefoy

[email protected]

Secretaría de Desarrollo Social, Ciudad de México,

Febrero de 2006

Page 2: Indicadores mml

¿Por qué necesitamos indicadores en la planificación y ejecución de

iniciativas públicas?

Quiénes somos o Qué hacemos

Dónde queremos ir

Cómo podemos llegar

Cómo sabemos que hemos llegado

Misión y Objetivos

Estrategias

Medidas de Desempeño

Análisis Interno y

de Contexto

Page 3: Indicadores mml

Indicadores en la MML

Fin

Propósito

Compo-nentesActivi-dades

Proporcionan la base para supervisar y evaluar la iniciativa

Definen metas que nos permiten conocer en que medida se cumplen los objetivos

Establecen una relación entre dos o más variables

Pueden cubrir aspectos cualitativos o cuantitativos

Entregan información cuantitativa Deben ser acordados con los

involucrados

Indicadores

Page 4: Indicadores mml

Características de un buen indicador

Objetivo

Medible objetivamente

Relevante

Específico

Práctico y económico

Asociado a un plazo

Page 5: Indicadores mml

¿Cuáles son las Dimensiones del Desempeño?

Calidad del ServicioCapacidad de la iniciativa para responder en forma rápida y directa a las necesidades de sus usuarios. Son atributos de la calidad: oportunidad, accesibilidad, precisión y continuidad, comodidad y cortesía en la atención.

EconomíaCapacidad de la iniciativa para generar y movilizar adecuadamente los recursos financieros en pos de su misión/propósito. Ejs: Capacidad de autofinanciamiento, ejecución del presupuesto y recuperación de préstamos.

EficaciaEl grado de cumplimiento de los objetivos planteados.

¿En qué medida la iniciativa está cumpliendo con sus objetivos fundamentales?

EficienciaRelación entre dos magnitudes físicas: producción de un bien o servicio y los insumos que se utilizaron para alcanzar ese nivel de producto. Ejs: Costo unitario de producción o costo promedio.

Page 6: Indicadores mml

Eficacia:Miden el nivel de cumplimiento de los objetivos Ej. Variación porcentual en el número de usuarios que

consultan datos hidrológicos por año y por tipo de información solicitada.

Ej. Porcentaje de la red vial que preserva su nivel de servicio de diseño (o cercano)

Eficiencia:Relacionan productos con costos o recursos Ej. Costo medio anual por dato hidrometeorológico Ej. Costo total por Km. de camino conservado Ej. Número de pacientes atendidos por médico

Tipo de indicadoresSegún el tipo de información que entregan se distinguen indicadores de:

Page 7: Indicadores mml

Calidad:Evalúan atributos respecto a normas, referencias externas o

satisfacción de los beneficiarios (usuarios) Ej. Confiabilidad de los pronósticos hidrometereológicos Ej. Porcentaje de pacientes atendidos que se declaran

saisfechos con la atención recibida

Economía:Reflejan capacidad para generar y movilizar recursos

financieros Ej. Porcentaje de ejecución del presupuesto asignado Ej. Porcentaje de recuperación de créditos

Tipo de indicadoresSegún el tipo de información que entregan se distinguen indicadores de:

Page 8: Indicadores mml

Indicadores para actividades Indicadores de costo

Relacionan costos (presupuestado / real) Ej. Sobrecosto porcentual del equipamiento

Indicadores de cronograma Miden el nivel de cumplimiento de los plazos programados Ej. Porcentaje de actividades cuyo plazo de ejecución superó el

programado Ej. Número medio de días de atraso por actividad.

Indicadores de cantidad Miden el nivel de cumplimiento respecto a la cantidad

programada de productos o servicios a generar. Ej. Porcentaje de personas capacitadas respecto a las

programadas.

Page 9: Indicadores mml

Fin

Propósito

Compo-nentes

Activi-dades

IndicadoresMiden contribución al logro del fin a mediano o largo plazo (impactos).

Miden resultados al terminar la ejecución del proyecto.

Miden eficacia, eficiencia y calidad en el logro de los componentes.

Miden el costo de las actividades.

Costo por curso.Costo por metro cuadrado construidoCosto del equipamiento.

Disminución porcentual de la tasa de morbilidad de los 450 habitantes de Pueblo Esperanza al cabo de tres años.

Porcentaje de la población que aprueba test de conocimientos sobre higiene al término del proyecto.Número de consultas atendidas por mes.Consultas por especialista por mes.Porcentaje de consultas no derivadas.

Porcentaje de la población objetivo capacitada al término del proyectoNúmero de capacitados por capacitador por año.Nivel de satisfacción de los capacitados.

Page 10: Indicadores mml

Fin

Propósito

Compo-nentes

Activi-dades

Indicadores CONAPRAN

Satisfacer las necesidades básicas a los AM de escasos recursos

C1 AM de escasos recursos atendidos a través de Hogares

Eficacia: % de AM atendidos / AM de escasos recursos (federal o estadual)Eficiencia: % annual de gastos administrativos del programaEconomía: % annual de ejecución presupuestaria

Eficacia: % de AM atendidos / los que postulanCalidad: % que califican la atención como buena o muy buenaEficiencia: Costo promedio anual de AM atendido (desv est, mínimo y máximo)Economía: % de recursos de pensiones de AM

Page 11: Indicadores mml
Page 12: Indicadores mml
Page 13: Indicadores mml
Page 14: Indicadores mml

Información sobre los Indicadores

Nombre: Porcentaje de la población que aprueba test de conocimientos sobre higiene

Fórmula de cálculo: {número de test con 7 o más puntos (escala 1 a 10) / número de test realizados}*100

Medio de verificación: Test de diez preguntas aplicado a una muestra aleatoria de 45 personas capacitadas.

Valor actual (línea de base): 10 % Tendencia observada y proyectada: La situación se

ha mantenido igual en los últimos tres años y no se preveen cambios sin el proyecto.

Meta propuesta: Igualar la media regional (60% de aprobación)

Metas parciales (avance): No se consideran

Page 15: Indicadores mml

La proyección de metas es una tarea compleja …

Dale!! No nos podemos

equivocar todas las veces.

Page 16: Indicadores mml

Ciclo básico del proceso de construcción de indicadores

1.Identificación y/o Revisión de: Misión:Productos Clientes

Objetivos Estratégicos

10. Comunicar e Informar

9. Analizar e Interpretar los Resultados

2. Establecer las medidas de desempeño claves

Eficacia Resultados FinalesEficiencia IntermediosEconomía Procesos Calidad Productos

3. Asignar las responsabilidades

4. Establecer los indicadores en cada nivel de la organización

5. Establecer los referentes comparativos

6. Construir las fórmulas

7. Recolectar los datos y generar sistemas de información

8. Validar los indicadores

Page 17: Indicadores mml

PASOS BASICOS PARA LA CONSTRUCCION DE INDICADORES

IDENTIFICAR y/o REVISAR PRODUCTOS Y OBJETIVOS

¿Qué será medido?

IDENTIFICAR LAS DIMENSIONES Y AMBITOS DE DESEMPEÑO

¿Qué ámbitos y dimensiones del desempeño es conveniente medir?

ESTABLECER RESPONSABILIDADES ORGANIZACIONALES

¿Cuáles serán los Centros de Responsabilidad, o Áreas responsables por el desempeño logrado

¿A qué niveles realizaremos la evaluación?

Page 18: Indicadores mml

Ciclo básico del proceso de construcción de indicadores de gestión

1.Identificación y/o Revisión de: Misión:Productos Clientes

Objetivos Estratégicos

10. Comunicar e Informar

9. Analizar e Interpretar los Resultados

2. Establecer las medidas de desempeño claves

Eficacia Resultados FinalesEficiencia IntermediosEconomía Procesos Calidad Productos

3. Asignar las responsabilidades

4. Establecer los indicadores en cada nivel de la organización

5. Establecer los referentes comparativos

6. Construir las fórmulas

7. Recolectar los datos y generar sistemas de información

8. Validar los indicadores

Page 19: Indicadores mml

PASOS BASICOS PARA LA CONSTRUCCION DE INDICADORES

CONSTRUIR LAS FORMULAS O ALGORITMOS

¿Cómo relacionamos las variables de medición?

ESTABLECER LAS METAS O REFERENTES PARA LA COMPARACION

¿Sobre que comparamos los indicadores para saber si el desempeño es adecuado?

RECOPILAR LA INFORMACION NECESARIA

¿Qué datos y antecedentes me permitirán construir los indicadores?

Page 20: Indicadores mml

Ciclo básico del proceso de construcción de indicadores de gestión

1.Identificación y/o Revisión de: Misión:Productos Clientes

Objetivos Estratégicos

10. Comunicar e Informar

9. Analizar e Interpretar los Resultados

2. Establecer las medidas de desempeño claves

Eficacia Resultados FinalesEficiencia IntermediosEconomía Procesos Calidad Productos

3. Asignar las responsabilidades

4. Establecer los indicadores en cada nivel de la organización

5. Establecer los referentes comparativos

6. Construir las fórmulas

7. Recolectar los datos y generar sistemas de información

8. Validar los indicadores

Page 21: Indicadores mml

PASOS BASICOS PARA LA CONSTRUCCION DE INDICADORES

VALIDAR: APLICAR CRITERIOS DE TECNICOS Y REQUISITOS ¿Cómo sabemos que los indicadores construidos miden

efectivamente la gestión y los resultados?

ANALIZAR LOS RESULTADOS OBTENIDOS

¿Por qué se produjeron los resultados?

COMUNICAR E INFORMAR

¿Quiénes tienen que conocer nuestros resultados?

Organización, Usuarios, SHCP, Congreso, etc

Page 22: Indicadores mml

ProductoSumatoria (Tiempo de procesamiento de

solicitudes individuales)/ N° de solicitudes

tramitadas

Tiempo promedio de tramitación de

solicitudes

Calidad

Proceso(Ingresos generados por el servicio / Total de

ingresos del servicio) * 100

Porcentaje de ingresos propios de la

institución

Economía

Resultado Intermedio

N° de acciones de fiscalización / N° de

fiscalizadores

Promedio de fiscalizaciones por

fiscalizador

Eficiencia

Resultado Final

(N° de familias que superan la pobreza en

añot / N° total de familias

en el Programa en añot)*100

Porcentaje de familias atendidas por el

Programa que superan línea de pobreza

Eficacia

Ámbito de Control

Fórmula de CálculoNombre del Indicador

Dimensión

EJEMPLOS DE INDICADORES DE DESEMPEÑO

Page 23: Indicadores mml

Recomendaciones sobre Indicadores Pueden requerirse varios indicadores por objetivo

para medir distintos aspectos de éste (ej.: disminución de enfermedades bronco-pulmonares, disminución de enfermedades infecto-contagiosas).

El equipo de la iniciativa puede requerir otros indicadores que no son de interés para los demás involucrados. Estos se tratarán según lo descrito, pero no se incorporarán en los informes externos.

Si los impactos se producirán a muy largo plazo o si el costo de estimar el indicador es muy alto, es mejor buscar indicadores “Proxy” (ej.: porcentaje de disminución de la inasistencia escolar por mes).

Page 24: Indicadores mml

Activi-dades:

Compo-nentes:

Propósito:

Fin:

FórmulaNombreSupuestos

Medios de Verificación

IndicadoresResumen Narrativo

Page 25: Indicadores mml

√6. La unidad de medición es adecuada para la meta que se espera medir

√8. Los indicadores han sido validados por la Unidad de Control de Gestión y por la Dirección para informarse del desempeño del Área o Centro de Responsabilidad

√7. En la construcción del indicador han participado el Jefe del área o Centro de Responsabilidad

√5. Se ha definido la frecuencia de medición del indicador

√4. Muestra o expresa el indicador de forma clara el resultado para poder ser analizado por el responsable

√3. El resultado del indicador explica de forma precisa y clara el grado de cumplimiento de la meta o el resultado es ambiguo

√2. El indicador tiene claramente una meta o referente para ser medido su resultado

√1. El indicador tiene claramente un producto relevante o estratégico con el cual se vincula y un objetivo asociado

SI/ NORequisito a validar

Cuestionario de validación de los indicadores

Page 26: Indicadores mml

Medios de Verificación¿Cómo obtenemos la evidencia? Son las fuentes de información que se pueden utilizar

para verificar el logro de los objetivos (cálculo de los indicadores).

Pueden incluir: Estadísticas Material publicado Inspección visual Encuestas Informes de auditoría Registros contables

Fin

Propósito

Compo-nentesActivi-dades

Medios deverificación

Page 27: Indicadores mml

Detalle para medios de verificación

Fuentes de información: Test de 10 preguntas sobre las materias tratadas en la capacitación.

Método de recopilación: Selección de muestra aleatoria de 45 personas capacitadas, encuesta en persona.

Responsable de la recopilación: Juanita Pérez Frecuencia de recopilación: Por una vez, a los tres meses de

concluido el último evento de capacitación. Método de análisis: Cada respuesta correcta da un punto,

aprobación con siete puntos. Se calculará porcentaje de aprobación, media y desviación estandar.

Modo de distribución: Correo electrónico Usuarios: Unidad de planificación y evaluación, gerente del

proyecto, entidades cooperantes, junta de vecinos.

Page 28: Indicadores mml

Recomendaciones sobre Medios de Verificación

Si falta información será necesario incluir actividades para obtenerla.

Si no se puede conseguir la información, habrá que cambiar el indicador (usar “proxy”).

Si hay más de una fuente de información, verificar la consistencia de los datos.

Medios de verificación deben ser acordados con los involucrados.

Page 29: Indicadores mml
Page 30: Indicadores mml
Page 31: Indicadores mml

No todo lo que pueda ser contado cuenta ...

y no todo lo que cuenta puede ser contado ...