נושא 19 מתוך 64· ערך חברתי ומדידת השפעה

מודל לוגי

מודל לוגי הוא תרשים לינארי המקשר בין תשומות, פעילויות, תפוקות, תוצאות והשפעה של תוכנית, והוא נקרא משמאל לימין כשרשרת דיווחיות: משאבים נכנסים, פעילויות מתבצעות, תפוקות מופקות, התוצאות משתנות עבור הנהנים, וההשפעה מצטברת בטווח רחב או ארוך יותר. זהו המבנה הרגיל שמימנים ומבקרים מצפים שניתן יהיה לדווח עליו כל תוכנית, והוא משלים את תיאוריית השינוי, שנבנית מהסוף להתחלה, בכך שהוא מביט קדימה.

למה זה חשוב

ה-Magenta Book של משרד האוצר הבריטי (HM Treasury) קובע את המודל הלוגי כמרכיב חובה בתכנון הערכה של תוכנית, וגופים מממנים כמו National Lottery Community Fund בונים את תבניות הבקשה והדיווח שלהם סביב אותה שרשרת בת חמש עמודות. ערכו טמון בכך שהוא מחייב תוכנית לומר בתרשים אחד מה תוציא, מה תעשה בכך, ומה תפיק, וזה העיקר — מה אמור להשתנות כתוצאה מכך, ברמת פירוט שפסקת טקסט נוטה לטשטש. מודל לוגי שעמודות התשומות והפעילויות בו מלאות אך עמודת התוצאות ריקה או מעורפלת ניתן לאבחן במבט אחד, ובדיוק משום כך מימנים מבקשים אותו.

המתמטיקה

המודל הלוגי הוא שרשרת מבנית ולא נוסחה:

תשומות          פעילויות          תפוקות              תוצאות                השפעה
(משאבים        (מה נעשה          (תוצרים ישירים       (שינוי עבור           (שינוי ארוך טווח,
 שהוקצו)        בעזרתם)           הניתנים לספירה)      הנהנים)               ברמת האוכלוסייה
                                                                               או המערכת)

כל עמודה צריכה להיות ספציפית יותר מקודמתה: תשומות הן מה שמוציאים, פעילויות הן מה שעושים, תפוקות הן מה שנמסר בלי קשר להשפעתו, תוצאות הן מה שהשתנה בעקבות כך — ההבחנה מוסברת בהרחבה ב- תוצאות לעומת תפוקות — וההשפעה היא השינוי ארוך הטווח והעמיד, שלעיתים קרובות ניתן לייחס אותו רק בחלקו.

דוגמה מעובדת

רשות מקומית (שירות דיגיטלי לייעוץ בחובות):

  • תשומות: תקציב שנתי של £180,000, 4.0 משרות מלאות של יועצים, מערכת לניהול תיקים.
  • פעילויות: מפגשי הסברה, פגישות ייעוץ אישיות בנושא חובות.
  • תפוקות: 900 פגישות שנערכו; 750 תוכניות לחובות ולהטבות הונפקו.
  • תוצאות: מבין הלקוחות שהגיעו למעקב לאחר 6 חודשים, 60% (450 מתוך 750) מדווחים על ירידה בפיגורים, בממוצע של £1,200 ללקוח — £540,000 בסך הכול בהפחתת פיגורים.
  • השפעה: ירידה מדידה בבקשות למעמד חסרי בית בקרב לקוחות השירות לאורך שנתיים, שניתן לייחסה רק בחלקה לשירות זה לצד התערבויות אחרות (ראו ניתוח קונטרפקטואלי).

ארגון צדקה (שותפות להפניה לבנק מזון):

  • תשומות: £45,000, מתאם במשרה של 1.5, הסכמי שותפות עם 12 סוכנויות מפנות.
  • פעילויות: מיון הפניות, אריזה וחלוקה של חבילות.
  • תפוקות: 5,000 חבילות מזון שחולקו ל-1,100 משקי בית.
  • תוצאות: 68% ממשקי הבית שנסקרו (748 מתוך 1,100) מדווחים על שיפור בביטחון תזונתי בשיחת מעקב לאחר 4 שבועות.
  • השפעה: תרומה לצמצום הביקוש המקומי לשירותי משבר, המתועדת רק בסטטיסטיקות אזוריות מצטברות ואינה ניתנת לייחוס לארגון הצדקה לבדו.

הקשר להנדסת תוכנה

המודל הלוגי קרוב למדי למודל נתונים מילולי של מערכת תוצאות: תשומות ופעילויות הן נתונים תפעוליים שכבר נמצאים בידיכם (הוצאות, כוח אדם, יומני מפגשים); תפוקות קל למדוד משום שהן נספרות בנקודת המסירה; תוצאות דורשות איסוף נתוני מעקב שתוכננו במכוון (סקרים, קישור נתונים מנהליים) שלא יתקיימו אלא אם מישהו יבנה אותם; השפעה דורשת בדרך כלל נתונים מקושרים, אורכיים או ברמת האוכלוסייה, מעבר למערכות של תוכנית בודדת. מהנדסים הבונים כלי דיווח צריכים לדחוף את הגורמים המזמינים להגדיר מחוונים של תוצאות והשפעה כבר בשלב התכנון, ולא לברוח ללוח מחוונים של תפוקות בלבד רק משום שזה מה שהנתונים הטרנזקציוניים כבר תומכים בו. ראו החזר חברתי על השקעה לשיטה המעריכה בכסף את עמודות התוצאות וההשפעה דווקא, ו-מימוש תועלות למעקב אחר השאלה אם עמודת ההשפעה אכן התממשה.

מכשולים נפוצים

  • עצירה בתפוקות. לוח מחוונים המדווח על פגישות שנערכו או חבילות שחולקו ומרמז על תועלת מדווח על פעילות ולא על תוצאות — ראו תוצאות לעומת תפוקות.
  • היעדר קשר סיבתי מוצהר בין העמודות. מודל לוגי מציג את השרשרת אך לא מסביר מדוע פעילויות אמורות להניב תפוקות ותפוקות אמורות להניב תוצאות; הנימוק הזה שייך לתיאוריית השינוי, ומודל לוגי בלי תיאוריה כזו מאחוריו הוא בלתי נבדק.
  • התייחסות אליו כמסמך חד-פעמי למכרז. מודלים לוגיים שנוצרים רק כדי לעמוד בדרישות בקשת מימון ואינם מתעדכנים מפסיקים לשקף את מה שהתוכנית עושה בפועל.
  • זליגת ייחוס בעמודת ההשפעה. טענה ששינוי ברמת האוכלוסייה נגרם אך ורק בידי תוכנית אחת, ללא תרחיש קונטרפקטואלי, מגזימה במה שהראיות תומכות בו.

מקורות