נושא 6 מתוך 64· יסודות הערך הציבורי
תוספתיות ומשקל מת
תוספתיות (additionality) בוחנת אם התערבות גרמה לתוצאה שלא הייתה מתרחשת בלעדיה. משקל מת (deadweight) הוא התמונה ההפוכה: החלק מהתוצאה שהיה מתרחש ממילא, גם ללא התוכנית, המענק או הסובסידיה. כמעט כל טענת השפעה של תוכנית ממשלתית או של ארגון צדקה מנפחת את האפקט עד שמנכים ממנה את המשקל המת, ולכן הנחיות ההערכה הבריטיות רואות בו את ההתאמה הראשונה והחשובה ביותר שיש לבצע במספר הכותרת.
למה זה חשוב
"תמכנו ב-500 עסקים לצמוח" נשמע כהישג, אבל אם 300 מהעסקים האלה היו צומחים בכל מקרה, כי הכלכלה המקומית התאוששה, כי עמדו לרשותם מקורות מימון אחרים, או כי כבר היו על מסלול צמיחה לפני תחילת התוכנית, התרומה התוספתית האמיתית של התוכנית היא 200 ולא 500. ה-Magenta Book של משרד האוצר הבריטי (HM Treasury) וה"Additionality Guide" הוותיק של HM Treasury ושל BIS (שפותח במקור עבור תוכניות לפיתוח אזורי ולהתחדשות עירונית, ומשמש זה שנים רבות בהערכות ממשלתיות ברחבי בריטניה) קובעים את המשקל המת כהתאמה הפותחת ברצף התקני לחישוב השפעה נטו: אפקט ברוטו פחות משקל מת, פחות דחיקה, פחות דליפה, בהתאמה להשפעות מכפיל, שווה להשפעה תוספתית נטו. דילוג על שלב זה הוא הדרך הנפוצה ביותר לנפח טענות השפעה במגזר הציבורי ובמגזר החברתי, במכוון או שלא, ותוכנית מענקים שמודדת רק תוצאות ברוטו של משתתפים, ללא קבוצת השוואה, אינה יכולה להבחין בין השפעתה שלה לבין מה שהיה קורה בכל מקרה.
משקל מת אינו אחוז קבוע. הוא תלוי כולו במצב הנגדי (counterfactual) של האוכלוסייה וההתערבות הספציפיות (ראו ניתוח קונטרפקטואלי). הערכות של פיתוח אזורי באנגליה בתקופת סוכנויות הפיתוח האזוריות (Regional Development Agencies) מצאו בדרך כלל שיעורי משקל מת של 20% עד 60%, בהתאם לסוג התמיכה העסקית. משום כך הערכות תוכנית אמינות מדווחות על טווח מותאם למשקל מת ולא על נתון בודד שהונח מראש, וגופים מממנים כמו קרן הקהילה של הלוטו הלאומי (National Lottery Community Fund) ו-Big Society Capital דורשים מהמקבלים להתייחס במפורש למשקל המת בדיווח על תוצאות, במקום לדווח על ספירת משתתפים ברוטו.
המתמטיקה
רצף ההתאמות התקני לחישוב השפעה נטו, כפי שהוא מופיע בהנחיות ההערכה הבריטיות (Magenta Book; HM Treasury/BIS Additionality Guide; הנחיות ההערכה של ESIF ושל קרנות המבנה):
תוצאה ברוטו
− משקל מת (מה שהיה קורה בכל מקרה)
− דחיקה (פעילות או תועלת שהועברו ממקום אחר ולא נוצרו — ראו
displacement-and-attribution)
− דליפה (תועלת שנצברת מחוץ לקבוצת היעד או לאזור היעד)
× מכפיל (פעילות כלכלית עקיפה/מושרית נוספת, כשהיא חיובית)
= השפעה תוספתית נטו
שיעור המשקל המת כיחס:
שיעור משקל מת = תוצאות שהיו מתרחשות ללא ההתערבות
/ סך התוצאות ברוטו שנצפו
תוצאות תוספתיות נטו = תוצאות ברוטו × (1 − שיעור משקל מת)
דוגמה מעובדת
תוכנית מענקי תמיכה בעסקים: תוכנית מענקים אזורית מדווחת ש-500 עסקים נתמכים הגדילו את התעסוקה בשנה שלאחר מכן, בממוצע 3 משרות לכל עסק. זוהי טענה ברוטו של 1,500 משרות.
קבוצת השוואה תואמת של עסקים דומים שלא נתמכו (ראו ניתוח קונטרפקטואלי) מראה ש-40% מצמיחת התעסוקה של העסקים הנתמכים היו מתרחשים בכל מקרה, על סמך ביצועי הקבוצה התואמת באותה תקופה.
שיעור משקל מת = 40%
משרות תוספתיות נטו = 1,500 × (1 − 0.40) = 900 משרות
ההישג שאפשר לדווח עליו ביושר הוא 900 משרות ולא 1,500, ירידה של 40% רק מהתאמת המשקל המת, עוד לפני שנשקלות דחיקה או דליפה.
תוכנית תעסוקה של ארגון צדקה: ארגון צדקה משבץ 200 מובטלי טווח ארוך בעבודה בעלות של £600,000 (£3,000 לשיבוץ, ברוטו). נתוני שוק העבודה הלאומיים מראים שללא התערבות כלשהי כ-15% מקוהורט דומה של מובטלי טווח ארוך מוצאים עבודה באותה תקופה בזכות תנודתיות טבעית של שוק העבודה.
שיעור משקל מת = 15%
שיבוצים תוספתיים נטו = 200 × (1 − 0.15) = 170
עלות אמיתית לשיבוץ תוספתי = £600,000 / 170 ≈ £3,529
נתון העלות ברוטו לשיבוץ (£3,000) מקטין בכ-15% את העלות האמיתית של התרומה התוספתית של הארגון.
הקשר להנדסת תוכנה
תוספתיות ומשקל מת רלוונטיים ישירות לכל מי שבונה תוכנה למדידת השפעה או לניהול מענקים עבור המגזר הציבורי או החברתי:
- מערכות לדיווח על תוצאות צריכות לאסוף קבוצת השוואה או קבוצת בסיס כבר בתכנון, ולא רק את תוצאות המשתתפים. הוספת מצב נגדי אחרי שמערכת עלתה לאוויר בלעדיו קשה בהרבה מבנייה של האיסוף מההתחלה (ראו ניתוח קונטרפקטואלי).
- לוחות מחוונים שמציגים רק ספירת משתתפים ברוטו מנפחים באופן שיטתי את ההשפעה בעיני מממנים וגופי פיקוח. כשקיימות הערכות של משקל מת (מספרות ההערכה או מקבוצת השוואה), התוכנה צריכה להציג את הנתון נטו, אחרי ניכוי המשקל המת, לצד נתון הברוטו ולא במקומו.
- הדבר קשור ישירות להחזר חברתי על השקעה: יחס ה-SROI אמין רק לאחר שמשקל מת (ודחיקה) נוכו מהתוצאות ברוטו שנטענו. מחשבון SROI שמדלג על שלב זה יפיק יחסים מנופחים שלא יעמדו בבדיקה.
מכשולים נפוצים
- דיווח על תוצאות ברוטו כאילו כולן תוספתיות. זו טעות המדידה הנפוצה ביותר בדיווח על מענקים ותוכניות. שאלו תמיד "האם זה היה קורה בכל מקרה?" לפני שמפרסמים מספר כותרת.
- הנחה שאחוז משקל מת יחיד תקף בכל מקום. משקל מת משתנה מאוד לפי ענף, אוכלוסייה ותנאים כלכליים מקומיים. השתמשו בקבוצת השוואה או בראיות ספציפיות לענף, ולא בנתון שהושאל מהערכה שאינה קשורה.
- בלבול בין משקל מת לדחיקה. משקל מת עוסק בתוצאות הנגדיות של אותם משתתפים. דחיקה עוסקת בהשפעות על אנשים או מקומות אחרים. ראו דחיקה וייחוס. ערבוב ביניהם מוביל לספירה כפולה או לספירת חסר של ההתאמה.
- משקל מת שדווח על ידי המשתתפים עצמם. כששואלים מוטבים "האם זה היה קורה בלי העזרה שלנו?", מתקבלות הערכות משקל מת נמוכות באופן שיטתי (משתתפים נוטים לזקוף את ההצלחה לתוכנית). קבוצת השוואה עצמאית אמינה הרבה יותר.
מקורות
- HM Treasury, "The Magenta Book: Central Government Guidance on Evaluation" (2020). https://www.gov.uk/government/publications/the-magenta-book
- HM Treasury / Department for Business, Innovation and Skills, "Additionality Guide: A Standard Approach to Assessing the Additional Impact of Interventions" (3rd edition), originally developed with English Partnerships and the Housing Corporation.
- European Commission, "Evalsed: The Resource for the Evaluation of Socio-Economic Development" — guidance on deadweight, displacement, and leakage in structural-funds evaluation.
- National Lottery Community Fund, "Guidance on Outcomes and Impact Reporting." https://www.tnlcommunityfund.org.uk/