Monitoreo y evaluación: definición, funciones y usos

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua Introducción •No dejes apagar el e...

37 downloads 419 Views 674KB Size
Monitoreo y evaluación: definición, funciones y usos…

Dr. Rafael Arana Picado [email protected] 83911601

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Introducción • No dejes apagar el entusiasmo, virtud tan valiosa como necesaria; trabaja, aspira, tiende siempre hacia la altura. • Pues si te empeñas en soñar te empeñas en aventar la llama de tu vida.

• . Félix Rubén García Sarmiento

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Tres grandes área que cuidar…

Monitoreo

Supervisión

Evaluación

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Por qué debemos monitorear? • Nos brinda pistas de las entradas y salidas y los compara con el plan • Identifica y aborda los problemas • Garantiza el uso eficaz de los recursos • Garantiza la calidad y el aprendizaje para mejorar las actividades y servicios • Fortalece la rendición de cuentas

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Qué es Monitoreo? • Es un proceso continuo y sistemático en el cual verificamos la eficiencia y la eficacia de un proyecto, programa etc • Permite identificar logros y debilidades y en consecuencia, recomendamos medidas correctivas para optimizar los resultados esperados

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Antes de elaborar el plan de M&E responda…

• A quién remitiremos la información? – Mapas de procesos, actividades críticas

• Cuáles son las necesidades de información cuantitativa y cualitativa? – Revisar contratos o convenios, compromisos de país

• Lista de indicadores • Elaborar instrumentos para recolección y reporte a utilizar • Tiempo, espacio y persona • Cómo se deben procesar los datos? Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

En qué se centra el monitoreo?

• A lo interno: – Eficacia – Eficiencia – La focalización

• A lo externo: – Los efectos – El impacto

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Qué es evaluación? • Es un proceso integral y continuo de investigación y análisis de cambios más o menos permanentes en el mediano y largo plazo, ocasionado de forma directa o indirecta por un proyecto, la población y las organizaciones participantes

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Qué es evaluación? • Evaluación ocasional del rendimiento global y los impactos • Diseñada específicamente con la intención de atribuir los cambios a la intervención en sí • Responde a la pregunta, "¿qué hemos logrado y qué impacto tiene lo que hicimos

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Tipos de evaluación Tipo

Propósito

Formativa

Evaluación de las poblaciones objetivo y el medio ambiente contextual. Determina el concepto y diseño Busca identificar el grado en que las actividades planificadas se han logrado y se evalúa la calidad de las actividades / servicios Examina los resultados específicos del programa y sus logros. ¿Qué cambios se han observado, ¿qué significa, y si los cambios son el resultado de las intervenciones? Medidores generales del programa de impacto y eficacia. Tiene como objetivo fortalecer el diseño y la replicación de los programas y estrategias eficaces

De proceso De resultado

Impacto

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diferencias.. Monitoreo Continuo: día a dia Documenta los progresos Se focaliza en las entradas y salidas Alerta a los administradores de los problemas Auto evaluación

Evaluación Periodico: hitos imporantantes Análisis en profundidad de los logros Se focaliza en los resultados y el impacto Proporciona opciones de estrategia y política Análisis externo

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Nivel

Description

Frecuencia Continua

Entrada

Recursos que se ponen en el proyecto. Conducir a la consecución de los productos

Salida

Actividades o servicios que ofrece el proyecto. Trimestral Salidas conducen a resultados

Resultados

Cambios en los comportamientos o habilidades como resultado de los proyectos implementados. Los resultados se espera que generan impactos Cambios mensurables en el estado de salud, particularmente redujo la transmisión de ITS/VIH y reducir el impacto del SIDA. Resultados de impacto son efectos de la intervención

Impactos

2-3 years (a corto y mediano plazo) 3-5 años (a largo plazo)

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

MARCO DE TRABAJO EN M y E FINALIDAD

CONTEXTO

PROCESO

DISEMINACION Y USO DE INFORMACIÓN ESTRATÉGICA

PERSONAS ALIANZAS PLANIFICACION

RECOLECCION VALIDACION ANÁLISIS

Comunicación oportuna Perfil de audiencias Capacidad de • Síntesis • Traducción lenguaje técnico a lenguaje político

Estructura y funciones Recursos humanos Alianzas para coordinar y gerenciar Plan Multi-sectorial Plan Operativo Cultura

Monitoreo Vigilancia Epidemiológica Base de datos Supervisión y Auditoría Evaluación Investigación

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Marco de Trabajo para un Sistema Nacional Funcional de MyE en VIH – 12 Componentes

Supervisión.. • “Mirar desde lo alto“ • Proceso que una persona con conocimentos y experiencias, asume la responsabilidad de dirigir a otras para obtener con ellos resultados que les sean comunes. • Proceso en el cual una o más personas con conocimientos y experiencias, asumen la responsabilidad de acompañar a otras para obtener los que les sean comunes.. Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Carácterísticas de un(a) supervisor • Conocimiento del trabajo y responsabilidades • Habilidad para innovar y mejorar día a día • Liderazgo • Actitud positiva • Conocimiento del trabajo y competencia técnica

• Capacidad de aprender y re-aprender Habilidad para resolver problemas. • Ética • Capacidad para desarrollar buenas relaciones personales, profesionales y resilencia

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Tipos de supervisión

Liberal Deja que otros tomen control del problema

Autocrático

Señala qué debe hacerse, cómo y cuándo, personalismo exagerado

Democrático

Permite que los trabajadores analicen los problemas y las soluciones

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Qué elementos debe tener un plan de supervisión? • • • • • •

Objetivos e indicadores Guía de supervisión estandarizada Cronograma Presupuesto Informes anteriores de supervisiones efectuadas Información de apoyo (normas, descripción de funciones, informes previos, estadísticas, otros).

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Otras definiciones en M&E

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

¿Qué es una meta?  Establece lo que se busca lograr a través del proyecto.  Provee dirección general.  Sienta la base para desarrollar los objetivos.  Establece la población a alcanzar

¿Qué es un objetivo?  Sirve como base para monitorear el progreso para el logro de las metas.  Describe los resultados esperados, la forma en que estos se van a lograr, y establece una fecha límite  Describe los resultados de manera medible  Indica el logro parcial de la meta 21 Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

La Diferencia entre Metas y Objetivos META

Objetivo3 Objetivo2 Objetivo1 Una escalera de objetivos nos conduce a la meta 22 Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Característica de un objetivo Específico (S)

Medible (M) Alcanzable (A) Relevante (R)

Temporal (T)

Objetivos SMART S especifico

Identifica

eventos concretos o acciones que van a ocurrir, Población meta, Área geográfica.

Medible



Cuánto se va a hacer



Cuánto cambio se espera

Alcanzable



Factible tomando en cuenta el tiempo y los recursos disponibles

Relevante

El

objetivo se relaciona con la metas

¿Hace

sentido el objetivo en términos de lo que estamos tratando de lograr?

Temporal

¿Para cuándo? Define un tiempo especifico para alcanzar el objetivo 

24

Ejemplos

• Para enero de 2012, garantizar la disponibilidad de la prueba de VIH a 90% de personas que la soliciten de acuerdo con la normativa nacional, a través de

capacitación y equipamiento de centros de salud

25 Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Objetivo • Al finalizar el 2007, existirá un sistema de información

automatizado en línea para el manejo de la información del sistema de vigilancia de VIH/SIDA.

¿Este enunciado cumple con las características de un buen objetivo?

¿Qué son actividades?  Acciones que se llevan a cabo para lograr los objetivos. Es necesario diferenciarlas de las TAREAS, dimensión, alcance, inversión

¿Qué son resultados? Efectos que se esperan causar con el programa de vigilancia y sus componentes.

Deben ser:  Relevantes  Importantes  Discretos Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

¿Qué es un indicador?  Nos permite medir el grado de progreso hacia un objetivo Lograr que el 100% de las empresas que tienen planes de salud ocupacional incluyen el tema de VIH y sida para el 2010

0%

28

50%

100%

Porcentaje de INSTITUCIONES y ONG que cuentan e implementan una política de VIH y sida en el ámbito laboral

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Ejemplos de indicadores Recursos

Porcentaje del presupuesto nacional dedicado a actividades de prevención de contagio de VIH

Productos

# trabajadoras sexuales capacitadas en uso correcto del condón masculino

Resultados corto plazo

Porcentaje de trabajadoras sexuales que reportan usar condón con su último cliente

Resultados largo plazo

Prevalencia de VIH en trabajadoras sexuales en Nicaragua

29 Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Atributos de un indicador • • • • •

Fácil de entender para todos Consistente Oportuno Pertinencia Relacionado en lo posible con la sostenibilidad económica, social y ambiental • Confiabilidad

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Estructura de una matriz de indicadores Resultado esperado

Responsable

Tiempo de reporte

Objetivo

Indicador

Numerador Denominador

Fuente y mecanismo de recolección

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Que es un dato? • Son hechos aislados y en bruto, los cuales situados en un contexto significativo mediante una o varias operaciones de procesamiento, permiten obtener deducciones relacionadas con la

evaluación e identificación de personas, eventos y objetos Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Que es información? • Es un acontecimiento a una serie de acontecimientos, que llevan un mensaje y que la ser percibida por el receptor mediante alguno de sus sentidos , amplia

sus conocimientos Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Un abordaje de preguntas de salud pública para M&E en VIH Estamos desarrollando las intervenciones correctas a una escala lo suficientemente grande?

Determinar efectividad colectiva

RESULTADOS

Estamos haciendo las cosas bien?

M y E de Programas Nacionales

PRODUCTOS

ACTIVIDADES

INSUMOS Comprendiendo Estamos haciendo lo las respuetas correcto? potenciales

8. Se están implementando esfuerzos coletivos a una escala lo suficientemente grande para tener un impacto en la epidemia (cobertura-impacto)? Estudios y vigilancia epidemiológica 7. Están funcionando las intervenciones/haciendo una diferencia? Estudios de evaluación de resultados

MONITOREO DE RESULTADOS E IMPACTO

6. Estamos implementando el programa tal y como se planificó? Monitoreo de productos

5. Que estamos haciendo? Lo estamos haciendo bien? Monitoreo de procesos y evaluación, evaluación de calidad

4. Qué internviones y recursos se necesitan? Análisis de necesidades, recursos y respuestas; Monitoreo de insumos

3. Cuáles intervenciones pueden funcionar (eficacia y efectividad)? Estamos haciendo lo correcto? Estudios especiales, investigación operativa, foramtiva y de síntesis

2. Cuáles son los factores contribuyentes? Investigación sobre determinantes Identificación del problema

1. Cuál es el problema? Análisis de situación y vigilancia epidemilógica

34

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua

Muchísimas gracias

Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua