OUTCOME MAPPING Theory to Practice

OUTCOME MAPPINGTheory to Practice Chiengmai University July 24, 2009 Manit Prapansilp mps

This presentation is based on Outcome Mapping Building Learning and Reflection into Development Program by Sarah Earn, Fred Carden & Terry Smutylo and IDRC OM training materials mps

What is outcome mapping? “OM is a methodology that can beused to create planning, monitoring and evaluation mechanisms enabling organizations to document, learn from, and report on their achievement” Michael Quinn Patton, 2001 mps

Focus of Outcome Mapping program influence decreases community capacity & ownership increases Behavioural Changes mps

Ultimately, all organizations engaged in development programs want their work to contribute to long term and sustainable development. • OM can provide better and clear planning for long term and sustainable development program. • Besides, OM focuses on capacity building for main actors (boundary partners). mps

OM can Help: • bring stakeholders into the planning, monitoring and evaluation processes; • strengthen partnerships and alliances. mps

OM helps answer four questions: 1. Why: What is the vision to which the program want to contribute? (OM vision) 2.Who: Who are the program boundary partners? (OM BP) 3.What: What are the changes that are being sought? ( outcome challenge ) 4.How: How will the program contribute to the change process? (OM mission and strategy) mps

mps Organizational Practices

OM focuses on transformations in the actions or behaviors of the main actors (BP) who will ultimately be responsible for sustainable development. mps

boundary partners Those individuals, groups, andorganizations with whom the program: • interacts directly to effect change • anticipates opportunities for influence • engages in mutual learning mps

Outcome Challenge • The changed behaviours (relationships, activities, and/or actions) of a boundary partner • How they could contribute ideally to the vision mps

progress markers • A graduated set of statements describing a progression of changed behaviors in the boundary partner • Describe changes in actions, activities andrelationships leading to the ideal outcome • Articulate the complexity of the change process mps

progress markers are graduated • move from initial to more profound changes in behavior • show transformation in a singleboundary partner • more informative than a single indicator mps

What are we trying to accomplish and how? What do we want to know? What do we want to learn? mps

Boundary Partner Program Outcome Journal Strategy Journal Performance Journal mps

How does OM differ from other logic models? • OM assumes only that a contribution has been made, and never attempts attribution • Other logic models may include changes in behavior as a part of their framework, OM focuses exclusively on changes in behaviors of main actors (BP) mps

OM supplements other forms of evaluation by focusing on related behavioral changes • OM facilitates standardization of indicators (markers), in quantitative and qualitative approaches. mps

OM is not appropriate methodology for all programs. The program should already has made strategic directions. OM is not intended for evaluation of program relevance or cost- effectiveness. OM depends largely on self-assessment by program team and boundary partners. OM need high commitment on time, human, finance. Thinking to use OM? mps

When can OM be used? • It is best used at the beginning, from planning stage as an integrated planning, monitoring, and evaluation approach. • It can be used separately or inconjunction with other processes, e.g. SWOT, log frame analysis. mps

OM can be used as an assessment tool for external or self-assessment, either during or at the end of a project. • If it is used after a project is underway, it is usually require a reformulation of vision, mission, boundary partners and outcome challenge statements. mps

Abuse of OM • Learning and accountability • Outcome is not linked to people (beneficiaries) • Wrong boundary partners • No ownership nor commitment built • Skill is not capacity, • Education alone mps

Other concerns • No ownership nor commitment built • Skill is not capacity • Education alone make no change • Lack of appropriate measures • Sale and marketing are essential for expansion mps

การพัฒนาแผนพัฒนาอย่างยั่งยืนและการติดตามประเมินผลโดยประยุกต์ใช้แนวคิดแผนที่ผลลัพธ์การพัฒนาแผนพัฒนาอย่างยั่งยืนและการติดตามประเมินผลโดยประยุกต์ใช้แนวคิดแผนที่ผลลัพธ์ คณะพยาบาลศาสตร์ มหาวิทยาลัยเชียงใหม่ 24 กรกฎาคม 2552 นพ. มานิตย์ ประพันธ์ศิลป์ 13/07/57 23 mps

ประยุกต์ใช้แนวคิดOM • แผนงานโครงการด้านพัฒนาสังคมที่เน้นผลลัพธ์อย่างยั่งยืน ผ่านการเปลียนแปลงของบุคคล กลุ่ม องค์กร • เน้นผลลัพธ์ที่ถึงประชาชน ไม่ใช่เพียงผลผลิตหรือกิจกรรม • ผู้เกี่ยวข้อง ประชาชนผู้รับประโยชน์มีพฤติกรรมและสิ่งแวดล้อมที่เอื้อต่อคุณภาพชีวิต ใครเป็นผู้ที่ต้องหรือควรทำเพื่อกลุ่มนี้ผู้รับประโยชน์ ใครหรือโครงการใดจะเป็นผู้พัฒนาให้ผู้ที่ต้องทำลุกขึ้นมาทำให้ได้ mps

Key Actors พระเอกตัวจริง เจ้าของเรื่องตัวจริง สอนให้เก่ง ให้ลงมือทำ ให้ติดใจต้องแสดงต่อ 13/07/57 25 mps

key actors ทุกระดับมี Capacity ขีดความสามารถ Ownership ความเป็นเจ้าของ 13/07/57 26 mps

พระเอกนำผู้ที่เกี่ยวข้องสู่การเปลี่ยนแปลงพระเอกนำผู้ที่เกี่ยวข้องสู่การเปลี่ยนแปลง ด้านพฤติกรรม ด้านสิ่งแวดล้อม ทางกายภาพและทางสังคม 13/07/57 27 mps

เสริมพลังให้พระเอกทุกระดับบุคคล กลุ่ม องค์กร สามารถหาความจริงมาวิเคราะห์ อย่างพอเพียง วางแผนแก้ปัญหาเป็น ดำเนินการตามแผนได้ ติดตามประเมินผล ปรับปรุงแผนสม่ำเสมอ รายงาน แลกเปลี่ยนเรียนรู้ได้ 13/07/57 28 mps

Influence Influence Influence SP SP SP I1 I3 I2 Project Implementing Partners Community Agencies, Org Beneficiaries Country Project Team Contribution Chain of HAFC Program mps

EESG Development Model การกระทำต่างๆ ที่ต้องเกิดต่อกลุ่มปฏิบัติการ โครงการ บุคลากรของโครงการ ผู้นำการเปลี่ยนแปลง และคณะทำงานต่างๆ ผู้ปฏิบัติการใน ครอบครัว ชุมชน วัด โรงเรียน ผู้รับประโยชน์ เพิ่มขีดความสามารถให้ผู้นำการเปลี่ยนแปลง การกระทำต่างๆ ที่ต้องเกิดขึ้นเพื่อผู้รับประโยชน์ mps

วิสัยทัศน์ของการพัฒนาอย่างยั่งยืนวิสัยทัศน์ของการพัฒนาอย่างยั่งยืน วิสัยทัศน์ที่ชัดเจนต้องมี 3 องค์ประกอบ 1. ผู้รับประโยชน์ 2. Intervention 3. Actors Actors Interventions Beneficiary ผู้ทำมี Capacity + Ownership ใช้ Appropriate Measures ผู้รับประโยชน์ ได้รับผลจริง Prog. • มาตรการทางด้าน • Healthy Policy, R&R and Implementation • Skill building • Supportive environment • Other Measures ขีดความสามารถ - Technical* - Financial - Managerial* - Leadership (Authority, Mandate) สิ่งที่ผู้รับประโยชน์ได้รับ - สิ่งแวดล้อมและ - พฤติกรรมที่เอื้อต่อการมีสุขภาวะที่ยั่งยืน 13/07/57 31 mps

EESG Development Modelคุณภาพชีวิตเด็ก การกระทำต่างๆ ที่ต้องเกิดต่อกลุ่ม โครงการ บุคลากรของโครงการ อปต และคณะทำงานต่างๆ ครอบครัว กลุ่มองค์กร ชุมชน วัด โรงเรียน เด็กได้รับหรือมี ก ข ค ง เพิ่มขีดความสามารถให้ อปท. การกระทำต่างๆ ที่ต้องเกิดขึ้นในชุมชน ข้อมูลย้อนกลับ ข้อมูลย้อนกลับ ข้อมูลย้อนกลับ mps

แผนเด็กและเยาวชน คณะทำงาน เด็กแรกเกิด ใครปฏิบัติ I3ก I1ก I2ก ใครปฏิบัติ คณะทำงาน เด็กก่อนวัยเรียน I3ข I2ข I1ข คณะทำงาน ใครปฏิบัติ เด็กวัยเรียน I3ค I2ค I1ค คณะทำงาน ใครปฏิบัติ เด็กวัยรุ่น I3ง I2ง I1ง 13/07/57 33 mps

ตัวชี้วัดมหาวิทยาลัย • 1. จัดให้มีโครงสร้างการบริหารโครงการ • 2. จัดทำเอกสารคู่มือการดำเนินงานของ มหาฯและ อปท • 3. จัดทำเครื่องมือ อุปกรณ์ที่ใช้ สำหรับ มหาฯและ อปท • 4. จัดกระบวนการเพิ่มขีดความสามารถให้ทีมพี่เลี้ยง • 5. จัดกระบวนการเพิ่มขีดความสามารถให้ทีม อปท • 6. ติดตามประเมินผลโครงการ • 7. สังเคราะห์บทเรียน และแลกเปลี่ยนเรียนรู้กับมหาฯอื่นๆ • 8. ผลักดันเผยแพร่เพื่อขยายผล mps

ตัวชี้วัด อปท • 1. จัดให้มีโครงสร้างการบริหารโครงการ • 2. สื่อสารให้ชุมชนทราบและสนับสนุน • 3. หาข้อมูล วิเคราะห์ วางแผน ดำเนินการ ติดตามประเมินผลโดยชุมชนมีส่วนร่วมทุกขั้นตอน • 4. เผยแพร่ผลงาน ข้อมูลให้ชุมชนทราบเป็นระยะๆ • 5. สรุปบทเรียน แลกเปลี่ยนเรียนรู้กับ อปท อื่นๆ • 6. จัดทำแผนในระยะต่อไป mps

ตัวชี้วัดผลที่เกิดในชุมชนตัวชี้วัดผลที่เกิดในชุมชน • 1. ประชาชนมากกว่าร้อยละ 70 รับรู้ข่าวสารเกี่ยวกับโครงการ • 2. ประชาชนมากกว่าร้อยละ 60 เข้าร่วมกระบวนการที่เกิดขึ้น • 3. ครู พ่อแม่ พระ ผู้เกี่ยวข้องกับเด็กและเยาวชน มีพฤติกรรมที่เหมาะสมเพิ่มขึ้น รายละเอียดตัวชี้วัดและเป้าหมายที่เจาะจงขึ้นอยู่กับแต่ละชุมชนจะเป็นผู้กำหนด mps

ตัวชี้วัดผลที่เกิดต่อเด็กและเยาวชนตัวชี้วัดผลที่เกิดต่อเด็กและเยาวชน 1. มีสภาพแวดล้อมทางกายภาพทางกายภาพละทางสังคมที่เอื้อฯ ตามบริบทและแผนของแต่ละชุมชนจะกำหนด 2. มีพฤติกรรมที่เหมาะสม รายละเอียดตัวชี้วัดและเป้าหมายที่เจาะจงขึ้นอยู่กับแต่ละชุมชนจะเป็นผู้กำหนด mps

EESG Development Modelพัฒนาคุณภาพบริการ การกระทำต่างๆ ที่ต้องเกิดต่อกลุ่ม โครงการ บุคลากรของโครงการ หน่วยบริการต่างๆใน จว. และคณะทำงานของหน่วยต่างๆ T unit S unit P unit อบต องค์กร ประชาชนได้รับบริการ ที่มีคุณภาพ ในหน่วยใกล้ บ้าน เพิ่มขีดความสามารถให้ การกระทำต่างๆ ที่ต้องเกิดขึ้นในชุมชน ข้อมูลย้อนกลับ ข้อมูลย้อนกลับ ข้อมูลย้อนกลับ mps

โครงการ ลดความแออัด บุคลากร รพ.ศูนย์ ใคร ผู้ป่วย I3T Tertiary Care I2T I1T บุคลากรรพ.ทป/ชช ใคร ผู้ป่วย I3S Secondary Care I2S I1S ใคร บุคลากร รพ.ชช/สอ ผู้ป่วย I3P Primary Care I2P I1P ใคร ? ผู้ที่ยัง ไม่ป่วย I3C I2C Community I1C 13/07/57 39 mps

EESG Development Model มหาวิทยาลัยสร้างสุข การกระทำต่างๆ ที่ต้องเกิดต่อกลุ่ม โครงการ บุคลากรของโครงการ มหาวิทยาลัย คณะกรรมการบริหารโครงการ คณะ ก คณะ ข คณะ ค คณะ ง บุคลากรและนักศึกษาเข้าใจHP ทำได้ เป็นนิสัย มีสุข เพิ่มขีดความสามารถให้ อปท. การกระทำต่างๆ ที่ต้องเกิดขึ้นในชุมชน ข้อมูลย้อนกลับ ข้อมูลย้อนกลับ ข้อมูลย้อนกลับ mps

EESG Development Model วัดศูนย์กลางสร้างสุข การกระทำต่างๆ ที่ต้องเกิดต่อกลุ่ม โครงการ บุคลากรของโครงการ วัด คณะกรรมการวัด คณะPR คณะจัดงาน คณะจัดงาน คณะประเมิน คนเข้าวัดกลุ่มต่างๆได้ ก ข ค เพิ่มขีดความสามารถให้ อปท. การกระทำต่างๆ ที่ต้องเกิดขึ้นในชุมชน ข้อมูลย้อนกลับ ข้อมูลย้อนกลับ ข้อมูลย้อนกลับ mps

Disease control development model การกระทำต่างๆ ที่ต้องเกิดต่อกลุ่ม โครงการ บุคลากรคก. หลักสูตร/คก. เคืรอข่าย อปต ฝ่าย บริหาร และคณะทำงานDCคณะต่างๆ ผู้ปฏิบัติงาน กลุ่มต่างๆ ชุมชน คนไม่มีโรคต่างๆ ก ข ค ง เพิ่มขีดความสามารถให้ อปท. การกระทำต่างๆ ที่ต้องเกิดขึ้นในชุมชน ข้อมูลย้อนกลับ ข้อมูลย้อนกลับ ข้อมูลย้อนกลับ mps

แผนควบคุมป้องกันโรค อบต คณะทำงานไข้หวัดนก คนไม่ติดโรคAI ใครปฏิบัติ I3ก I2ก I1ก ใครปฏิบัติ คณะทำงานDHF คนไม่ติดโรคDHF I3ข I2ข I1ข คณะทำงานNCD1 ใครปฏิบัติ คนไม่เป็นNCD1 I3ค I2ค I1ค คณะทำงานNCD2 ใครปฏิบัติ คนไม่เป็นNCD2 I3ง I2ง I1ง 13/07/57 M Prapansilp 43 mps

Chain of Change & OM Actor Capacity Project Intervention Project Capacity Actor Intervention Benefit Goal Org. Practices Strategy Map Progress Markers Outcome Challenge 13/07/57 44 mps

ทำไมต้อง M&E • If you do not measure results, you can not tell success from failure • If you can not see success, you can not reward it; you are probably rewarding failure • If you can not see success, you can not learn from it • If you can not recognize failure, you can not correct it • If you can demonstrate results, you can winpublic support mps

วางแผนดี M&E ก็ง่าย วิเคราะห์ขั้นตอนต่างๆให้ชัดว่า ๑ อยากจะให้ใครได้อะไรบ้าง ๒ ต้องเกิดอะไรขึ้นก่อน ๓ ใครจะเป็นคนทำให้เกิด ๔ คนนั้นต้องมีอะไรถึงจะทำได้ mps

การเลือกว่าจะวัดอะไร ตัวชี้วัดต้องตรงหรือสอดคล้องกับสิ่งที่จะวัด วัดได้ง่าย ประหยัดหรือไม่ต้องเสียค่าใช้จ่าย มีตัวชี้วัดให้น้อยที่สุดเท่าที่จำเป็นจริงๆ ตัวชี้วัดนั้นจะมีผู้นำไปใช้ประโยชน์ได้ทันทีและทันเวลา เจ้าของตัวชี้วัดแต่ละส่วน ต้องได้ใช้ผลการวัดนั้นๆให้เป็นประโยชน์ 13/07/57 47 mps

ตัวชี้วัดระดับต่างๆ ผลลัพธ์ Outcome: ผลผลิต Output: กระบวนการ Process: ปัจจัยนำเข้า Input: ผลผลิตของระดับแรกก็จะเป็นปัจจัยนำเข้าของระดับถัดไป ในทางกลับกัน ผลผลิตของระดับถัดไปก็ควรจะเป็นผลลัพธ์ของระดับแรก 13/07/57 48 mps

OC OC OC OC OC OC OP OP OP OP OP OP P P P P P P I I I I I I Contribution Chain of Change 13/07/57 49 M Prapansilp mps

Abuse of OM • Learning and accountability • Outcome is not linked to people (beneficiaries) • Wrong boundary partners • No ownership nor commitment built • Skill is not capacity, • Education alone mps

OUTCOME MAPPING Theory to Practice