Dirección de Seguimiento y Evaluación de Políticas Públicas Departamento Nacional de Planeación

2. SINERGIA EVALUACIONES Dirección de Seguimiento y Evaluación de Políticas Públicas Departamento Nacional de Planeación República de Colombia Septiembre 14 de 2012

3. OBJETIVO Identificar los principales pasos a seguir para diseñar un proceso de evaluación, haciendo especial énfasis en el concepto de evaluaciones efectivas.

4. Contenido I. La Evaluación II. Enfoques de Sistemas de S&E III. ¿Por qué el Gobierno evalúa las políticas públicas? IV. Marco Conceptual V. El caso colombiano: proceso de evaluaciones efectivas VI. ¿Cómo son efectivas las evaluaciones? VII. Resultados y Retos

5. I. La Evaluación De acuerdo a la RAE, evaluar es: Señalar el valor de algo. Estimar, apreciar, calcular el valor de algo. Evaluó los daños de la inundación en varios millones. Estimar los conocimientos, aptitudes y rendimiento de los alumnos.

6. I. La Evaluación • El proceso encaminado a determinar sistemática y objetivamente la pertinencia, eficiencia, eficacia e impacto de las actividades a la luz de sus objetivos. • (ONU - 1984) • Emitir juicios sobre el valor y el mérito de un programa o aspectos del mismo. • (CIDEC) • Es aquella acción que se emprende antes de iniciar un programa o proyecto para apreciar si están dadas las condiciones requeridas para su implementación, y eventualmente poder decidir acerca de su aprobación, perspectiva de éxito y resultados. • Petra Tood & Kenneth Wolpin • University of Pennsylvania

7. I. La Evaluación • Valoración exhaustiva de la causalidad entre una intervención de Estado y sus efectos para determinar su relevancia, eficiencia, efectividad, impacto y sostenibilidad. • (Documento Conpes 3294) • La evaluación viene considerándose como el proceso sistémico de observación, medida, análisis e interpretación encaminado al conocimiento de una intervención pública, sea esta una norma, programa, plan o política, para alcanzar un juicio valorativo basado en evidencias, respecto de su diseño, puesta en práctica, efectos, resultados e impactos. La finalidad de la evaluación es ser útil a los decisores y gestores públicos y a la ciudadanía.  (Agencia Estatal de Evaluación de las Políticas Públicas y la Calidad de los Servicios, AEVAL)

8. I. La Evaluación La evaluación es un análisis de un proyecto con el objeto de TOMAR UNA DECISIÓNalrededor del mismo. Evaluar implica • Determinar la cantidad de bienes y servicios que ofrece el proyecto y qué requiere para alcanzar su objetivo. 1. Cuantificar • Asignar valor a los bienes y servicios requeridos y ofrecidos por el proyecto 2. Valorar • Analizar las diferencias del proyecto con otros proyectos 3. Comparar

9. II. Enfoques de Sistemas de S&E Tanto el Monitoreo como la Evaluación son herramientas de mejora continua de la Administración Pública en Colombia y otros países en el mundo. La Banca Multilateral (BM, BID, ADB) han contribuido no sólo con recursos para el Desarrollo Económico de los países miembros sino que también se han preocupado de hacer evaluaciones alrededor del gasto público.

10. II. Enfoques de Sistemas de S&E

11. II. Enfoques de Sistemas de S&E

12. II. Enfoques de Sistemas de S&E

13. II. Enfoques de Sistemas de S&E

14. II. Enfoques de Sistemas de S&E

15. III. ¿Por qué el Gobierno evalúa las políticas públicas? • En cumplimiento del mandato constitucional estipulado en el artículo 343 de la Constitución Nacional y en el artículo 29 de la ley 152 de 1994. • La evaluación le permite al Gobierno medir el avance de los compromisos que se fijó al inicio, conocer cómo va su gestión y tratar de corregir a tiempo los desaciertos. • Tomar decisiones informadas y basadas en evidencias que permitan ajustar las políticas . • Retroalimentar la formulación de política y los procesos de planeación. • Establecer la existencia de efectos no esperados en la ejecución de un programa, los puntos críticos del mismo y las divergencias existentes con programas similares. • Fortalecer la rendición de cuentas de las entidades y el ejercicio activo de control social.

16. III. ¿Por qué el Gobierno evalúa las políticas públicas? Apoyar el mantenimiento del rumbo y mejorar en el desempeño con el fin de alcanzar los objetivos definidos en las políticas públicas ¿Cómo lo hacemos? Reposicionar SINERGIA como una marca de marcas, orientada a apoyar el buen desempeño de las políticas públicas… Sinergia Territorial Seguimiento Evaluaciones Red de M&E Seguimiento Lograr una articulación conceptual y operativa del seguimiento y la evaluación Insumos Procesos Productos Resultados Impactos Oferta de Bienes Públicos Demanda de Bienes Públicos Cadena de Valor Política Pública P Evaluación

19. IV. Marco Conceptual ¿Qué pilares tiene? Sinergia Territorial Seguimiento Evaluaciones Red de M & E INVERSION PARA CONOCER SEGUIMIENTO ARTICULADO A LA VISION EVALUACIONES EFECTIVAS COOPERACION HORIZONTAL INDICADORES EFECTIVOS RADAR DE EVALUACIONES CULTURA DEL MONITOREO Y EVALUACION OBSERVATORIO DE LA PERCEPCION DEL CIUDADANO

21. IV. Marco Conceptual • FIN • Mejorar el proceso de toma de decisiones de los gestores de la Política Pública para que esta incida efectivamente en un mayor bienestar de la sociedad.

22. IV. Marco Conceptual • FIN • Mejorar el proceso de toma de decisiones de los gestores de la Política Pública para que esta incida efectivamente en un mayor bienestar de la sociedad. • MEDIOS Evaluación Ejecutiva Resultados Impacto Insumos Procesos Productos Evaluación Operaciones Evaluación de Resultados Evaluación de Impacto Evaluación Institucional

24. V. El caso colombiano: proceso de evaluaciones efectivas La Dirección de Evaluación de Políticas Públicas desde el grupo de Evaluaciones es la encargada de liderar las evaluaciones que se hacen a las políticas públicas más estratégicas en el marco del Plan Nacional de Desarrollo vigente. El objetivo es garantizar la calidad técnica de las evaluaciones, mediante el diseño de proyectos que permitan dar a partir de evidencias, respuestas pertinentes a los interrogantes de la política.

25. V. El caso colombiano: proceso de evaluaciones efectivas Para que las evaluaciones sean EFECTIVAS, estas deben estar al servicio de la toma de decisiones …. Desde 2010, SINERGIA cuenta con un proceso estándar y participativo para el diseño, desarrollo y socialización de las evaluaciones . • Tiempos de las Evaluaciones • Diseño  3 Meses • Contratación  3 Meses • Ejecución  8 Meses • Uso de Resultados  6 Meses • TOTAL: 20 Meses

26. V. El caso colombiano: proceso de evaluaciones efectivas Fase 0 Selección de la política a evaluar • Identificar las necesidades plurianuales de evaluación, partiendo desde la formulación del PND. • Definir la agenda anual de evaluaciones • Convocar el Comité Intersectorial de Evaluación. • Presentación y aprobación de la agenda vía Conpes Producto: Agenda de Evaluaciones

27. V. El caso colombiano: proceso de evaluaciones efectivas Fase 1 Diseño de la Evaluación • Cadena de valor • Cadena de entrega • Hipótesis • Alcance • Metodología • Costeo • Perfil equipo consultor • Cronograma Producto: Diseño de la evaluación

28. V. El caso colombiano: proceso de evaluaciones efectivas Fase 2 Contratación • Conformación comité de selección • Elaborar los Términos de Referencia • Apertura del proceso de selección • Evaluación de propuestas técnicas • Negociación Producto: Términos de referencia

29. V. El caso colombiano: proceso de evaluaciones efectivas Fase 3 Ejecución Producto: Bases de datos y productos de la consultoría

30. V. El caso colombiano: proceso de evaluaciones efectivas Fase 4 Uso de resultados Producto: Recomendaciones de política

31. VI. ¿Cómo son efectivas las evaluaciones? Evolución a alternativa mejor costo-efectiva Rediseño de Programas Nominación a mejor intervención Mejor Desempeño de la Política Pública

32. VI. ¿Cómo son efectivas las evaluaciones? Vivienda de Interés Social Urbano Fonvivienda

33. VI. ¿Cómo son efectivas las evaluaciones? Costo del Programa vs. Costo de la evaluación : 0.1% * Recursos PGN ejecutados (2002-2008) y asignados (2009 y 2010). 0.035% * Recursos PGN ejecutados (2003-2008) y asignados (2009 y 2010).

35. VII. Resultados y Retos La demanda por evaluaciones se ha venido incrementando de forma sostenida…. 74 evaluaciones finalizadas hasta 2012 35

37. VII. Resultados y Retos • Llegar a la mayor cantidad de actores (nivel alto y medio-alto en la toma de decisiones) • Dar mensajes claros y concisos SINERGIA usa diferentes canales de comunicación para la socialización • Publicación de los resultados en el Boletín de Política Pública Hoy. • Incorporación de los resultados en el Balance de Resultados anual que se presenta al Conpes. • Publicación de las fichas resumen de la evaluación en el espacio virtual -SISDEVAL-. • Publicación de los resultados en el PORTAL DNP y la Rebecca. • Desarrollo de espacios de «Diálogos de evaluación».

38. VII. Resultados y Retos ….El M&E no puede ser estático y debe buscar retos e innovación CLOUDSOURCING Pad + open data SINERGIA SOCIALIZACIÓN EVALUACIONES Diálogos de evaluación Socializaciones mensuales Comités de evaluación con expertos • SINERGIA EVALUACIONES Gestión y uso de la Información que arroja la evaluación RADAR NACIONAL DE EVALUACIONES Síntesis de evaluaciones Áreas de Innovación SEGUIMIENTO A PLANES DE ACCIÓN Monitoreo del cumplimiento e incorporación de las recomendaciones de las evaluaciones. METODOLOGÍAS DE EVALUACIÓN Ajustar y fortalecer la metodología de E2 Incorporar metodologías de análisis costo-beneficio

39. Gracias www.dnp.gov.co PBX: 3815000