¿qué es lo que queremos medir y evaluar? - proyectoibera.org · necesitamos poner a prueba los...

6
1 Seguimiento Seguimiento y y Evaluaci Evaluación ORGANIZACI ORGANIZACI Ó ÓN N Planificaci Planificaci ó ón n reglamentaci reglamentaci ó ón n An Aná álisis de lisis de Problemas Problemas Promoci Promoci ó ón n Manejo de Manejo de poblaciones y poblaciones y h há ábitats bitats Gesti Gesti ó ón de n de conflictos conflictos Evaluaci Evaluaci ó ón y n y terminaci terminaci ó ón n 1. Necesitamos saber qué acciones funcionan y cuáles no, y necesitamos saber porqué , para asegurarnos que hemos tenido el impacto deseado sobre las amenazas identificadas y, en caso contrario, reformular nuestras acciones. 2. Necesitamos asegurarnos de que las actividades tienen un impacto positivo sobre los usuarios 3. Necesitamos poner a prueba los supuestos sobre los que se basa el proyecto. 4. Necesitamos demostrar y comunicar a los usuarios y financiadores que hemos cumplido con lo prometido . ¿Porqué es importante medir el éxito de nuestras acciones? ¿Qué es lo que queremos medir y evaluar? Extinción/recuperación Números poblacionales BIOLOGÍA DE LA ESPECIE : -generalista o especialista -predador o presa - estrategia reproductiva (k o r) -otros FACTORES ESTOCÁSTICOS : -Demográficos -Genéticos -Ambientales -Catastróficos FACTORES DETERMINISTICOS : -Pérdida y fragmentación de hábitat -Mortalidad directa -Exóticas -Extinciones en cadena AMENAZAS INMEDIATAS FACTORES PROVENIENTES DE LA SOCIEDAD: -Actitudes e intereses de la sociedad en el ámbito local, regional, nacional e internacional -Medios de comunicación -Actores afectados: activistas ambientales, protectoras de animales,agricultores, cazadores, pescadores, constructoras, empresarios turísticos, etc. -otros FACTORES PROFESIONALES DE LA CONSERVACIÓN : -Integración de investigación y gestión -Marco legal -Instrucciones políticas: europeas, nacionales, regionales y locales -Estructuras organizativas (burocráticas vs. dinámicas, verticales vs. horizontales) -Mecanismos de resolución de conflictos y de participación -Estrategias de comunicación, educación y sensibilización -Entrenamiento académico y empírico de los profesionales -otros Cuatro enfoques complementarios de seguimiento y evaluación Formal y externo Formal y externo Informal y Informal y externo externo Formal e interno Formal e interno Informal e Informal e interno interno

Upload: duongthien

Post on 21-Jun-2018

216 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: ¿Qué es lo que queremos medir y evaluar? - proyectoibera.org · Necesitamos poner a prueba los supuestos sobre los que se ... puede fomentar una visión excluyente y centrada en

1

SeguimientoSeguimiento y y EvaluaciEvaluacióónn

ORGANIZACIORGANIZACIÓÓNN

PlanificaciPlanificacióón n

reglamentacireglamentacióónn

AnAnáálisis de lisis de

ProblemasProblemas

PromociPromocióónn

Manejo de Manejo de poblaciones y poblaciones y hháábitatsbitats

GestiGestióón de n de conflictosconflictos

EvaluaciEvaluacióón y n y terminaciterminacióónn

1. Necesitamos saber qué acciones funcionan y cuáles no, y necesitamos saber porqué, para asegurarnos que hemos tenido el impacto deseado sobre las amenazas identificadas y, en caso contrario, reformular nuestras acciones.

2. Necesitamos asegurarnos de que las actividades tienen un impacto positivo sobre los usuarios

3. Necesitamos poner a prueba los supuestos sobre los que se basa el proyecto.

4. Necesitamos demostrar y comunicar a los usuarios y financiadores que hemos cumplido con lo prometido.

¿Porqué es importante medir el éxito de nuestras acciones?

¿Qué es lo que queremos medir y evaluar?

Extinción/recuperación

Números poblacionales

BIOLOGÍA DE LA ESPECIE :

-generalista o especialista-predador o presa- estrategiareproductiva (k o r)-otros

FACTORES

ESTOCÁSTICOS :-Demográficos-Genéticos-Ambientales-Catastróficos

FACTORES

DETERMINISTICOS :-Pérdida y fragmentaciónde hábitat-Mortalidad directa-Exóticas-Extinciones en cadena

AMENAZAS INMEDIATAS

FACTORES PROVENIENTES DE LA SOCIEDAD:

-Actitudes e intereses de la sociedad en el ámbito local, regional, nacional e internacional-Medios de comunicación-Actores afectados: activistasambientales, protectoras de animales,agricultores, cazadores, pescadores, constructoras, empresarios turísticos, etc.-otros

FACTORES PROFESIONALES DE LA CONSERVACIÓN :

-Integración de investigación y gestión-Marco legal -Instrucciones políticas: europeas, nacionales, regionalesy locales-Estructuras organizativas (burocráticas vs. dinámicas, verticales vs. horizontales)-Mecanismos de resolución de conflictos y de participación-Estrategias de comunicación, educación y sensibilización-Entrenamiento académico y empírico de los profesionales-otros

Cuatro enfoques complementarios de seguimiento y evaluación

Formal y externoFormal y externoInformal y Informal y

externoexterno

Formal e internoFormal e internoInformal e Informal e

internointerno

Page 2: ¿Qué es lo que queremos medir y evaluar? - proyectoibera.org · Necesitamos poner a prueba los supuestos sobre los que se ... puede fomentar una visión excluyente y centrada en

2

Se basa en la creación de espacios de discusión y reflexión abiertos, informales y regulares entre los miembros del equipo de trabajo y entre las instituciones participantes

Virtudes fundamentales:1) crea espíritu de equipo y buen ambiente de trabajo, 2) permite la mejora continua y suave del programa, 3) es barato

Inconvenientes:1) puede fomentar una visión excluyente y centrada en una

visión única, 2) exceso de subjetividad y reforzamiento de una visión

preexistente

Evaluación informal e internaSe basa en la medición formal de algunos indicadores prestablecidos (monitoreo) en la fase de planificación. Requiere la existencia de un plan de monitoreo que debe estar asociado al plan de producción de la naturaleza. Luego se crean espacios formales de aprendizaje en función de los resultados

Virtudes fundamentales:1) fomenta el aprendizaje dentro de la institución, 2) favorece la objetividad, 3) es más barato que contratar evaluadores externos

Inconvenientes:1) requiere una inversión en tiempo y recursos importante, 2) requiere una capacitación interna en métodos de

investigación y análisis de datos,3) depende enormemente de una buena planificación

Evaluación formal interna

ORGANIZACIORGANIZACIÓÓNN

PlanificaciPlanificacióón n

estratestratéégicagica

AnAnáálisis de lisis de

problemasproblemas

PromociPromocióónn

Manejo de Manejo de poblaciones y poblaciones y hháábitatsbitats

GestiGestióón de n de conflictosconflictos

EvaluaciEvaluacióón y n y terminaciterminacióónn

ReglamentaciReglamentacióónn

Posibles métodos de monitoreo:

Monitoreo de nMonitoreo de núúmeros poblacionales: meros poblacionales: TTéécnicas de cnicas de estimaciestimacióón de abundancia y distribucin de abundancia y distribucióón.n.

Monitoreo de amenazasMonitoreo de amenazas:: CombinaciCombinacióón de tn de téécnicas cnicas procedentes de la ecologprocedentes de la ecologíía, teledeteccia, teledeteccióón, epidemiologn, epidemiologíía, a, ciencias sociales, etc. ciencias sociales, etc.

Monitoreo de contexto social y de funcionamiento Monitoreo de contexto social y de funcionamiento organizativo: organizativo: CombinaciCombinacióón de tn de téécnicas procedentes de cnicas procedentes de las ciencias sociales: sociologlas ciencias sociales: sociologíía, ciencias de la pola, ciencias de la políítica, tica, recursos humanos, administracirecursos humanos, administracióón, derecho, etc. n, derecho, etc.

Características de un buen MÉTODO utilizado en monitoreo :

PrecisiPrecisióón y exactitudn y exactitud: : ¿¿Existe un sesgo en las medidas Existe un sesgo en las medidas tomadas con el mtomadas con el méétodo?. todo?. ¿¿Existe un error Existe un error impredicibleimpredicibleen las medidas obtenidas?.en las medidas obtenidas?.

RelaciRelacióón coston costo--beneficio:beneficio: ¿¿Existen mExisten méétodos mtodos máás baratos s baratos para obtener el mismo tipo de informacipara obtener el mismo tipo de informacióón?n?

Factibilidad:Factibilidad: ¿¿Puede ser utilizado por la gente del Puede ser utilizado por la gente del proyecto?proyecto?

Idoneidad:Idoneidad: ¿¿Es el mEs el méétodo apropiado para la realidad todo apropiado para la realidad ecolecolóógica, social y polgica, social y políítica de la zona? tica de la zona?

Page 3: ¿Qué es lo que queremos medir y evaluar? - proyectoibera.org · Necesitamos poner a prueba los supuestos sobre los que se ... puede fomentar una visión excluyente y centrada en

3

Margoluis y Salafski. Medidas de éxito

Es importante que el sistema de monitoreo y Es importante que el sistema de monitoreo y evaluacievaluacióón sea pensado y aplicado por el mismo n sea pensado y aplicado por el mismo equipo que se encarga de la planificaciequipo que se encarga de la planificacióón y n y aplicaciaplicacióón de las medidasn de las medidas

Esto fomentarEsto fomentaráá que los mque los méétodos de medicitodos de medicióón n elegidos sean realistas y que los usuarios del elegidos sean realistas y que los usuarios del monitoreo y evaluacimonitoreo y evaluacióón ese apropien de n ese apropien de ééste ste

Algunos comentariosAlgunos comentarios

Instancias formales que favorecen la Instancias formales que favorecen la evaluacievaluacióón internan interna

Informes semanales Informes semanales

Reuniones de coordinadores de Reuniones de coordinadores de programasprogramas

Se basa en la creación de espacios de visita, discusión y reflexión abiertos, informales y regulares por parte de agentes externos, bien sean miembros de la comunidad, agentes gubernamentales como expertos científicos o técnicos

Virtudes fundamentales:1) aporta “aire fresco”, una perspectiva diferente y conocimientos

inexistentes dentro del grupo. Evita el parroquialismo, el culto a la mediocridad y las actitudes defensivas-paranoides

2) inserta el programa dentro de la sociedad general, 3) es barato

Inconvenientes:1) hay que ser cuidadoso con las personas que se invitan y elegir bien el

momento sin caer en la paranoia, 2) hay que saber distinguir la información relevante de la irrelevante

Evaluación informal y externa

Un ejemplo: el programa de cría en cautividad del lince ibérico Como resultado de la apertura a Como resultado de la apertura a

recomendaciones y crrecomendaciones y crííticas externas a ticas externas a partir de 2004, el programa de crpartir de 2004, el programa de críía en a en cautividad del lince ibcautividad del lince ibéérico recibe rico recibe asesorasesoríía y apoyo de decenas de a y apoyo de decenas de organizaciones de Espaorganizaciones de Españña, Austria, Rusia a, Austria, Rusia y EEUUy EEUU

En el aEn el añño 2005 nacio 2005 nacióó la primera camada la primera camada de linces ibde linces ibééricos en cautividadricos en cautividad

Page 4: ¿Qué es lo que queremos medir y evaluar? - proyectoibera.org · Necesitamos poner a prueba los supuestos sobre los que se ... puede fomentar una visión excluyente y centrada en

4

Se pide la ayuda de uno o varios expertos externos para que evalúen el funcionamiento del programa

Virtudes fundamentales:1) aporta una visión externa y profesional2) aporta credibilidad e imparcialidad: permite que alguien

de afuera diga y sugiera cosas que serían mal recibidas si provienen de una de las partes interesadas,

3) puede ser muy riguroso y exhaustivo

Inconvenientes:1) puede ser caro, 2) hay que identificar a la persona o personas adecuadas y

convencer a los socios del proyecto de la necesidad de una revisión externa que pueda “sacar los trapos sucios a la luz ”

Evaluación formal y externa

Un ejemplo: el programa de recuperación del bandicoot occidental en Australia

El programa de recuperación del bandicoot occidental

Desde los años 70 la especie estaba protegida y se había iniciado un programa de recuperación en los 80s

Para 1988, la especie había perdido el 98% de su distribución y abundancia: quedaban 190 animales en total.

Para entonces era manifiesto que el programa de recuperación no estaba funcionando adecuadamente y se pidió una evaluación externa en la que participaron expertos internacionales

El programa de recuperación del bandicoot occidental

La evaluación externa identificó los siguientes problemas: Desconocimiento de las causas del declive

Subestimación de la urgencia de la situación

Planificación inadecuada con ausencia de metas definidas, tiempos y responsabilidades

Escasa información sobre aspectos sociales y organizativos relevantes

Carencia de una evaluación sistemática como base para el aprendizaje y la mejora del programa

Page 5: ¿Qué es lo que queremos medir y evaluar? - proyectoibera.org · Necesitamos poner a prueba los supuestos sobre los que se ... puede fomentar una visión excluyente y centrada en

5

Como resultado de la evaluaciComo resultado de la evaluacióón se n se realizrealizóó una restructuraciuna restructuracióón total del n total del programa, tanto en aspectos programa, tanto en aspectos programprogramááticos como organizativos ticos como organizativos

A finales de los aA finales de los añños 90s existos 90s existíían man máás de s de 1000 ejemplares establecidos en seis 1000 ejemplares establecidos en seis lugares de reintroduccilugares de reintroduccióón, ademn, ademáás de la s de la poblacipoblacióón original y un programa de crn original y un programa de críía a en cautividaden cautividad

Promueve los cuatro tipos de Promueve los cuatro tipos de

evaluacievaluacióón para crear un ambiente de n para crear un ambiente de

aprendizaje y mejora continuos, aprendizaje y mejora continuos,

fortalecer el funcionamiento interno de fortalecer el funcionamiento interno de

tu equipo y promover la colaboracitu equipo y promover la colaboracióón n

de otros actores con recursos preciososde otros actores con recursos preciosos

Un concepto clave:Un concepto clave:

!Hay que aprender !Hay que aprender

a aprender!a aprender!

CONCLUSIONES FINALESCONCLUSIONES FINALESLa planificaciLa planificacióón es el mapa que nos guiarn es el mapa que nos guiaráá

en el terreno complejo e inexplorado de en el terreno complejo e inexplorado de la produccila produccióón de la Naturaleza.n de la Naturaleza.

Dentro de este contexto, la evaluaciDentro de este contexto, la evaluacióón nos n nos ayuda a redibujar y mejorar ayuda a redibujar y mejorar continuamente este mapa y a ubicarnos continuamente este mapa y a ubicarnos dentro de dentro de éél. l.

ORGANIZACIORGANIZACIÓÓNN

PlanificaciPlanificacióón n

reglamentacireglamentacióónn

AnAnáálisis de lisis de

ProblemasProblemas

PromociPromocióónn

Manejo de Manejo de poblaciones y poblaciones y hháábitatsbitats

GestiGestióón de n de conflictosconflictos

EvaluaciEvaluacióón y n y terminaciterminacióónn

¿¿QuQuéé es la finalizacies la finalizacióón?n?

Una vez que se han evaluado los Una vez que se han evaluado los resultados de las actividades, proyectos y resultados de las actividades, proyectos y programas realizados, se debe tomar la programas realizados, se debe tomar la decisidecisióón de terminar aqun de terminar aquééllos que han llos que han sido exitosos y ya no son necesarios, sido exitosos y ya no son necesarios, mejorar aqumejorar aquééllos que han mostrado llos que han mostrado debilidades e incluso clausurar o renovar debilidades e incluso clausurar o renovar a fondo aqua fondo aquééllos que han demostrado ser llos que han demostrado ser ineficientes para el desafineficientes para el desafíío en cuestio en cuestióón.n.

Page 6: ¿Qué es lo que queremos medir y evaluar? - proyectoibera.org · Necesitamos poner a prueba los supuestos sobre los que se ... puede fomentar una visión excluyente y centrada en

6

CaracterCaracteríísticas de una finalizacisticas de una finalizacióón n adecuadaadecuada

A tiempoA tiempo Sensible y respetuosa con la Sensible y respetuosa con la

dignidad de las personasdignidad de las personas EquilibradaEquilibrada IntegralIntegral CompensativaCompensativa

La finalizaciLa finalizacióón es uno de los n es uno de los

componentes mcomponentes máás delicados y s delicados y

olvidados de la gestiolvidados de la gestióón de procesos de n de procesos de

conservaciconservacióón. n.

Una recomendaciUna recomendacióón bn báásica: sea firme sica: sea firme

con el problema y suave con las con el problema y suave con las

personas.personas.