Esquema de Seguimiento y Evaluación PESA

1. PROYECTO ESTRATÉGICO PARA LA SEGURIDAD ALIMENTARIA MÉXICO Esquema de Seguimiento y Evaluación PESA Marco Metodológico del Esquema de Seguimiento y Evaluación del PESA Ciudad de México Diciembre, 2008.

2. “Sólo lo que se puede medir se puede mejorar”

3. Seguimiento y Evaluación del PESA.Antecedentes. • De acuerdo a la Circular 002-2008 (SAGARPA) “Criterios de integración y procedimientos de los Centros de Evaluación Especializados previstos en el componente de Capacitación y Asistencia Técnica del Programa de Soporte de la SAGARPA”. • Los Centros de Evaluación Especializados deben operar con sistemas y procedimientos uniformes al nivel nacional, pero con criterios de evaluación y evaluadores adecuados al tipo de servicio a evaluar, permitiendo ajustes en función de los servicios relevantes para las diferentes áreas de la SAGARPA o de los gobiernos estatales. • De esta manera el concepto de Centro de Evaluación Especializado se refiere a un sistema conformado por tres actores principales: • Instituciones Portadoras Nacionales, • Centros de Evaluación Estatal y • Unidades Técnicas Especializadas.

4. Seguimiento y Evaluación del PESA.Antecedentes. • En el marco de la Estrategia PESA, los Centros de Evaluación Estatal (CEE) tendrán como principales actividades las siguientes: • Evaluar el cumplimiento de las actividades comprometidas en el Contrato de la Agencia de Desarrollo Rural (ADR). • Evaluar la correspondencia de los productos generados de acuerdo al proceso metodológico PESA. • Evaluar la satisfacción de los productores por los servicios recibidos. • Dictaminar el desempeño de la ADR al finalizar el servicio. • La Unidad Técnica Especializada (UTE), en su caso la UTN PESA, apoyará a los CEE en los aspectos siguientes: • Definir el perfil de los Evaluadores PESA. • Diseñar, dar seguimiento al Esquema de Seguimiento y Evaluación. • Dar seguimiento al análisis de la Estrategia PESA, con el fin de generar informes de avances, resultados y restricciones, que se presentan a los Grupos Operativos Estatales (GOP).

5. ESTRATEGIA DE INTERVENCIÓN CICLO DE PROYECTOS SEGUIMIENTO A PROYECTOS DE ETAPAS ANTERIORES EVALUACIÓN DE RESULTADOS Seguimiento y Evaluación del PESA.Introducción. • El proceso metodológico del PESA está integrado por las fases siguientes: • Cada fase involucra una serie de procesos y actividades que deben ser operados apropiadamente por las ADR’s para que los resultados obtenidos sean satisfactorios para los beneficiarios y los demás actores involucrados. • Conocer los resultados que está obteniendo la ADR, en cada fase del proceso metodológico, es trascendente dado que permite: • Reconocer el grado de cumplimiento de las actividades comprometidas por la ADR. • Identificar como la ADR opera el proceso metodológico. • Dictaminar el desempeño de la ADR.

6. Seguimiento y Evaluación del PESA.Introducción. • Esquema de Seguimiento y Evaluación (SE), debe dar cuenta de los resultados que está obteniendo la ADR, con el fin de que los actores institucionales y otros involucrados dispongan de información veraz y oportuna que les permita: • Conocer oportunamente los resultados que se están obteniendo, • Dar seguimiento a los avances y • Tomar decisiones que aseguren el cumplimiento de las metas programadas. • Asimismo, fortalecer la toma de decisiones que posibilite: • A la UTN, focalizar el proceso de capacitación y de soporte. • A la ADR, mejorar la operación del proceso metodológico. • A la ADR, consolidar su posicionamiento. • A actores institucionales estatales y nacionales, mejorar aspectos metodológicos y operativos de la Estrategia PESA. • A las familias y grupos participantes, hacerse corresponsables de los resultados obtenidos.

7. Seguimiento y Evaluación del PESA.Objetivos. • General. • Dar a conocer los resultados que está obteniendo la ADR, en la ejecución de la Estrategia PESA, con el fin de contar con información veraz y oportuna que posibilite la toma de decisiones. • Específicos. • Verificar en campo los resultados obtenidos por las ADR’s con el propósito de proporcionar al GOP y otros actores institucionales información veraz y oportuna que les permita conocer los avances y dar seguimiento al cumplimiento de metas físicas y financieras. • Analizar la forma en que la ADR ejecuta la metodología y los proyectos con el fin de mejorar su operación en el marco del PESA. • Detectar áreas de oportunidad para mejorar el proceso metodológico y los procesos de soporte del PESA. • Evaluar el desempeño de la ADR, a través de indicadores, y captar la satisfacción del cliente para validar el finiquito del servicio prestado.

8. Seguimiento y Evaluación del PESA.Marco conceptual y ámbitos de atención. • Es un marco metodológico, a través del cual se obtiene, analiza y reporta información para la toma de decisiones. • Está enfocado a verificar los resultados obtenidos por la ADR en puntos críticos del proceso metodológico (Momentos SE). • Los ámbitos de enfoque son: • Estrategia PESA. • Verificar como la ADR opera el proceso metodológico. • Aportar información para que el GOP valide desempeño de la ADR. • Familias, Proyectos. • Verificar la participación de las familias ó grupos en los proyectos. • Verificar la existencia, estatus y avances de los proyectos. • Verificar y analizar resultados de los proyectos en ejecución. • Captar la satisfacción del cliente para el finiquito del servicio. • ADR. • Monitorear los componentes estructurales y operativos de la ADR. • Validar el desempeño de la ADR.

9. Seguimiento y Evaluación del PESA.Momentos SE. • Enfoque. Recopilaciónde información específica en “puntos críticos” del Proceso metodológico PESA que inciden en los resultados obtenidos. • Vinculado a: atención del proceso metodológico, proyectos y ADR. • Procedimiento operativo: • Recopilación de información. • Muestreos parciales que permitan la revisión de resultados obtenidos en todas las localidades atendidas por la ADR. • Aplicación de instrumentos operativos con registros estandarizados • Verificación de los resultados obtenidos en campo. • Verificación de la congruencia. • Monitoreo de componentes estructurales y operativos de la ADR. • Análisis de la información. • Sistema información estandarizado y homologo que posibilite la comparación de datos y la integración de estadísticas. • Aplicación de indicadores. • Generación de Reportes. • Resultados concretos, representación grafica p/toma de decisiones.

10. FORTALECIMIENTO DE LA TOMA DE DECISIONES Promoción Comunitaria Visión Regional Promoción Comunitaria Inicial Aplicación de Encuestas de LB Regional 2 3 Informes Estatales y Nacionales Validación de Resultados y Avances Validación Cierre del Ejercicio 2008 Validación de EI y MPMR 2009 12 7 Disponer de información veraz y oportuna Puesta en Marcha y Operación de Proyectos Planeación de las Actividades Visión Comunitaria Gestión de Proyectos Evaluación Proyectos. Desempeño ADR E. Intervenc. Planificación Microrregion. EI y MPMR Proceso de Planeación Comunitaria Calendograma de la ADR Sistema de Matriz de Proyectos (Registro y Congruencia) Evaluación de Desempeño de la ADR Acta de Satisfacción Cliente Sistema de Matriz de Proyectos (Estatus y Resultados) 10 1 5 6 9 8 11 Desarrollo y consolidación de la ADR 4

11. Seguimiento y Evaluación del PESA.Momentos SE.

12. Seguimiento y Evaluación del PESA.Enfoque metodológico. CICLO DE PROYECTOS PLANEACIÓN ESTRATÉGICA Estatus de los proyectos acorde al Sistema de Matriz de Proyectos VISIÓN REGIONAL PUESTA EN MARCHA SEGUIMIENTO CIERRE GESTIÓN Validación por el GOP Verificación LB Regional MPMR ESTRATEGIA INTERVENCIÓN (EI) Sistema de Matriz de Proyectos PROCESO Proyecto producto necesidad Disponib. recursos RESULTA-DO Carta de autoriza-ción de apoyo PROCESO Prod. nec. Arranque Capacita-ción Asesoría t. RESULTA-DO Proyecto operando y la gente participan-do. PROCESO Prod. nec. Aspectos criticos de la P.M. RESULTA-DO Proyecto instalado ó en con-diciones de operar PROCESO Evalua-ción parti-cipativa: a) Proy’s afines al eje atenc, b) Comu-nitario RESULTA-DO Cumpli-miento de metas VISIÓN COMUNITARIA Líneas estratégicas ÍNDICE DESEMPEÑO Planeación Comunitaria Congruencia de EI vs. MPMR Congruencia de MPMR vs. Matriz de Proyectos Verificación en campo de la Matriz de Proyectos Congruencia de Estrategia ADR vs, Estrategia PESA (Objetivos, Principios)

13. Seguimiento y Evaluación del PESA.Momentos SE.

14. Seguimiento y Evaluación del PESA.Momentos SE.

15. Seguimiento y Evaluación del PESA.Modalidad de Trabajo de las ADR’s.

16. Seguimiento y Evaluación del PESA.Modalidad de Trabajo de las ADR’s. 2. Verificación en campo promoción comunitaria inicial 10. Evaluación desempeño 9. Congruencia EI, MPMR 2009 3. Verificación en campo aplicación encuestas 8. Verificación en campo de Matriz Proyectos 1. Verificación Calendograma de trabajo 5. Congruencia Matriz de proyectos 11. Acta satisf. del cliente 7. Valida- ción de GOP 8. Verificación en campo de Matriz Proyectos 7. Valida- ción de GOP 6. Verificación en campo del Proceso de Planeación Comunitaria 7. Valida- ción de GOP 12. Validación EI, MPMR 2009 y Cierre de GOP 4. Monitoreo de la ADR 4. Monitoreo de la ADR 4. Monitoreo de la ADR 10. Evaluación desempeño 9. Congruencia EI, MPMR 2009 5. Congruencia Matriz de Proyectos de la Capacitación y Validación T. 1. Verificación Calendograma de trabajo 3. Verificación en campo aplicación encuestas 6. Verificación P. Planeación Comunitaria 11. Acta satisf. del cliente 8. Verificación en campo de Matriz Proyectos 7. Valida- ción de GOP 12. Validación EI, MPMR 2009 y Cierre de GOP 4. Monitoreo de la ADR 7. Valida- ción de GOP 7. Valida- ción de GOP 4. Monitoreo de la ADR 4. Monitoreo de la ADR 9. Congruencia EI MPMR ‘09 y Plan Negoc. 10. Evaluación desempeño 1. Verificación Calendograma de trabajo 8. Verificación en campo de Matriz Proyectos 5. Congruencia Matriz de proyectos 11. Acta satisf. del cliente 7. Valida- ción de GOP 8. Verificación en campo de Matriz Proyectos 7. Valida- ción de GOP 7. Valida- ción de GOP 12. Validación EI, MPMR 2009 y Cierre de GOP 4. Monitoreo de la ADR 4. Monitoreo de la ADR 4. Monitoreo de la ADR 3. Verificación en campo aplicación encuestas 10. Evaluación desempeño 9. Congruencia EI, MPMR 2009 1. Verificación Calendograma de trabajo 8. Verificación en campo de Matriz Proyectos 5. Congruencia Matriz de proyectos 11. Acta satisf. del cliente 7. Valida- ción de GOP 8. Verificación en campo de Matriz Proyectos 7. Valida- ción de GOP 12. Validación EI, MPMR 2009 y Cierre de GOP 7. Valida- ción de GOP 4. Monitoreo de la ADR 4. Monitoreo de la ADR 4. Monitoreo de la ADR

17. Seguimiento y Evaluación del PESA.Calendarización para el diseño metodológico y operativo.

18. Seguimiento y Evaluación del PESA.Actores involucrados. UTN GOP i. Diseña y promueve la Estrategia PESA (SE). ii. Da Capacitación presencial: Metodológica y Técnica. iii. Da Soporte Metodológico. i. Valida el Desempeño de la ADR. ii. Autoriza el Trámite de Pagos parciales. iii. Vigila el Avance del PESA. iv. Da Seguimiento al Cumplimiento de Metas. REGIÓN ADR CEE Evaluador PESA i. Verifica Resultados: • Estrategia PESA • Proyectos • Población participante ii.Da Seguimiento al desarrollo y consolidación de la ADR. iii.Genera información para la toma de decisiones: GOP, UTN, ADR. iv.Valida el Finiquito de los Servicios (30%). i. Opera la Estrategia PESA. ii. Diseña y opera proyectos acordes al interés y necesidad de la población participante. iii. Eficientiza, complementa ó innova los modelos productivos. Resultados Obtenidos

19. Seguimiento y Evaluación del PESA.Papel de los actores involucrados. Diseña el Esquema SE Ajusta y aprueba Modalidades de Trabajo de ADR’s en Edo. Da Capacitación Metodológica Diseña logística operativa del SE Informa del Esquema de SE y criterios de verificación Opera la Estrategia PESA Valida el Desempeño de la ADR Da Soporte Metodológico y Técnico Verifica los resultados obten. y da garantía de su veracidad Genera Productos y Resultados Autoriza Trámite de pagos parciales Evalúa Resultados obtenidos Valida Finiquito de Servicios ADR Levanta Acta de Satisfacc. Cliente Da Seguimiento a los Avances y al Cumplimiento de las Metas Elabora y ajusta EI y MPMR 2009

20. Seguimiento y Evaluación del PESA.Funciones de los actores involucrados. • El SE será operado por el CEE a través de los Evaluadores PESA. • Las funciones de los actores involucrados son: • Centro de Evaluación Estatal acreditado. • Define junto con la UTN PESA, el perfil de los Evaluadores PESA. • Selecciona, contrata y paga a los Evaluadores PESA. • Diseña el esquema operativo, de acuerdo a las condiciones de cada Estado. • Forma parte del GOP PESA con voz y voto. • Concentra e integra los reportes de avances y de resultados y los presenta ante el GOP oportunamente. • Asegura que se levanten las Minutas: Validación de pagos parciales a ADR’s, Aprobación de EI y MPMR, y Cierre del ejercicio por parte del GOP. • Levanta Acta de Satisfacción del Cliente y dictamina Desempeño de ADR. • Valida el finiquito del servicio de la ADR e informa al ejecutor del gasto. • Verifica el estatus de elegibilidad de los PSP’s de la ADR con base a la Lista de desempeño de SAGARPA. • Monitorea las funciones del GOP y de otros actores involucrados. • Realiza el análisis de la Estrategia PESA en el Estado.

21. Seguimiento y Evaluación del PESA.Funciones de actores involucrados. • Evaluador PESA. • Verifica los resultados obtenidos por la ADR, a través de la obtención de información específica, la cual es concentrada y analizada en diversos instrumentos operativos. • Reporta resultados e indicadores a nivel: Estrategia PESA, Proyectos y ADR. • Entrega reportes de verificación de avances y de resultados al Coordinador estatal SE. • Grupo Operativo Estatal. • Valida productos y resultados parciales de las ADR’s. • Autoriza pagos parciales. • Vigila el avance del PESA y el cumplimiento de las metas programadas. • Establece medidas correctivas. • UTN PESA. • Diseña el marco metodológico del Seguimiento y Evaluación del PESA. • Define junto con el CEE, el perfil de los Evaluadores PESA. • Da capacitación metodológica y soporte a los CEE y los Evaluadores PESA. • Forma parte del GOP PESA con voz y voto. • Apoya al CEE en el análisis de la Estrategia PESA. • Genera reportes de seguimiento y evaluación a nivel nacional.

22. Seguimiento y Evaluación del PESA.Funciones de actores involucrados. • Coordinador Estatal de Seguimiento y Evaluación. • Participa junto con el CEE en la selección y continuidad de los Evaluadores PESA. • Coordina la estrategia de evaluación (Programa de trabajo de los momentos SE, desempeño de los Evaluadores PESA). • Da capacitación en el esquema SE a los Evaluadores PESA. • Detecta y canaliza a la UTN las necesidades de capacitación técnica y metodológica PESA de las ADR’s. • Detecta desviaciones y da aviso inmediato al GOP en la operación del PESA. • Concentra, integra y valida los reportes de los Evaluadores PESA. • Da seguimiento al desempeño de los Evaluadores PESA • Certifica la información. • Valida los reportes de los Evaluadores PESA para liberación de pago. • Elabora reportes de avances a nivel estatal, para su entrega y/o presentación al GOP. • Mostrar información analizada que le permita al GOP tomar decisiones. • Establecer los elementos mínimos que debe contener el reporte. • Determinar en que momentos se deben mostrar los avances de resultados. • Participa activamente en reuniones de coordinación. • Es el responsable de la evaluación del desempeño de las ADR’s.

23. Seguimiento y Evaluación del PESA.Niveles de Coordinación (UTN-CEE). • CEE. • Institución Portadora Nacional. • Coordinación institucional (2): • CP (Benjamín Peña) • UACh (Manrrubio Muñoz) • Coordinación operativa (2): • CP (Martha E. González García). Norte, Suroriente y Sureste. • UACh (Maricela de la Vega Mena). Centro y Occidente. • Coordinación Regional. Coordinadores Regionales (5): • Centro (Maricela de la Vega Mena). Gro. Hgo. y Mor. • Norte (Lorenzo Trejo Hernández). SLP. Dgo. Zac. y Tam. • Occidente (Elizabeth Landa Franco). Nay. Mich. y Gto. • Suroriente (Martha E. González García). Oax. Pue. y Ver. • Sureste (Everardo Aceves Navarro). Chis. y Yuc. • Coordinación Estatal. • Enlaces Estatales (10). • Centros de Evaluación Estatal acreditados (6). • Coordinadores de Evaluadores PESA (4). • Operativos. Evaluadores PESA (aprox. 70).

24. Seguimiento y Evaluación del PESA.Niveles de Coordinación (UTN-CEE). • UTN PESA. • UTN. • Coordinador Nacional. • Seguimiento y Evaluación. • Coordinación Regional. Delegados Regionales (6): • Oaxaca-Chiapas. Oax. y Chis. • Morelos-Hidalgo. Mor. e Hgo. • Centro-Occidente. Nay. Mich. y Gto. • Puebla-Veracruz. Pue. y Ver. • Norte. SLP. Zac. Dgo. y Tam. • Península. Yuc. • Coordinación Estatal. Enlaces Regionales Estatales (11). • Oaxaca. (4) • Chiapas. (3) • Morelos. (1) • Michoacán. (1) • Puebla. (1) • Guerrero. (1) • Coordinación Estatal de Seguimiento y Evaluación. (4). • Chiapas. (1) • Guerrero. (1) • Morelos. (1) • Yucatán. (1)

25. Seguimiento y Evaluación del PESA.Niveles de Coordinación (CEE-UTN). • Institución Portadora Nacional (Coordinadores institucionales y operativos) con UTN(Coordinador Nacional). • Institución Portadora Nacional (Coordinadores operativos) con UTN(Responsable de Seguimiento y Evaluación). • CEE-Coordinación Regional (Coordinadores regionales) con UTN-Coordinación Regional (Delegados regionales). • CEE-Coordinación Estatal (Enlace Estatal)con UTN-Coordinación Regional (Delegados regionales). • CEE-Coordinación Estatal (Enlace Estatal y/o Coordinador de Evaluadores PESA y/o Centros de Evaluación Estatal acreditados) con UTN-Coordinación Estatal (Enlaces regionales estatales). • CEE-Coordinación Estatal(Enlace Estatal y/o Coordinador de Evaluadores PESA y/o Centros de Evaluación Estatal acreditados)con UTN-Coordinación Estatal de Seguimiento y Evaluación(Coordinadores estatales SE). • CEE-Operativos(Evaluadores PESA)con UTN-Coordinación Estatal de Seguimiento y Evaluación(Coordinadores estatales SE).

26. Seguimiento y Evaluación del PESA.Líneas generales de la estrategia operativa. • Atención por regiones, aunque sea en diferentes entidades federativas. • Despersonalizar el servicio de Seguimiento y Evaluación. Asignación en su caso, de un Equipo de Evaluadores PESA, con responsables por cada ADR. • Integración de equipos conformados con capacidades diferenciadas (operativos y analíticos). • Asignación de cargas de trabajo en dos modalidades: • Un Evaluador PESA atendiendo 2 ó más ADR’s, de tiempo completo. • En zonas aisladas, un Evaluador PESA atendiendo una ADR y complementando ingresos con otros servicios de evaluación.

27. Seguimiento y Evaluación del PESA.Perfil del Evaluador PESA. • Disponer de tiempo completo. • Actitud de servicio y vocación rural. • Disponer de medios de trabajo (PC, cámara fotográfica, vehículo, teléfono). • Manejo básico de computadora (Office). • Vivencias ó experiencia en puesta en marcha de proyectos. • Conocer el proceso metodológico PESA. • Conocer al detalle el marco metodológico de los momentos SE y los instrumentos operativos respectivos.