Тема 33 із 64· Метрики соціального сектору та філантропії

Вартість на результат

Вартість на результат — це загальні витрати програми, поділені на кількість людей, які досягають визначеної, значущої зміни у своїх обставинах, — а не на кількість тих, хто лише отримав послугу. Це найгостріша метрика ефективності, якою може скористатися фундатор чи команда надання, бо вона змушує поставити попереднє питання, якого уникає більшість благодійних організацій: що саме вважається успіхом?

Чому це важливо

Продовольчий банк може повідомити два дуже різні числа з рахунків одного й того ж року. Вартість на роздану продуктову посилку може становити 15 £. Вартість на домогосподарство, яке потім досягає продовольчої безпеки — більше не потребує невідкладної продовольчої допомоги, підтверджено в точці подальшого супроводу, — може становити 340 £. Обидва правдиві. Лише одне каже фундатору, чи працюють гроші. Розрив між ними — це розрив між продуктом і результатом: вручена посилка — продукт; домогосподарство, що більше не в кризі, — результат. Див. результати проти продуктів.

Британський третій сектор витратив два десятиліття на створення інфраструктури, що змушує до цього розрізнення. «Підхід чотирьох стовпів» New Philanthropy Capital до ефективності благодійних організацій чітко просить організації вказувати результати перед продуктами, а Inspiring Impact — підтримувана фундаторами британська співпраця з вимірювання впливу — публікує Матрицю результатів (Outcomes Matrix), яку багато грантових заявок тепер вимагають від благодійних організацій заповнити. Щорічна дослідницька програма «State of Hunger» Trussell Trust, що проводиться з Heriot-Watt University, існує саме тому, що самі кількості посилок нічого не кажуть про те, чи люди виходять із продовольчої незахищеності.

Вартість на результат означає щось лише після фіксації контрфактичного: результат, досягнутий «і так», не є результатом, який програма купила. Див. контрфактичний аналіз та витіснення й атрибуція.

Математика

Вартість на результат = Загальна вартість програми / Кількість бенефіціарів, що досягають визначеного результату

де:
  Загальна вартість програми = пряма вартість надання + справедлива частка накладних витрат
  Визначений результат       = попередньо визначена, вимірна зміна стану
                               (напр. «продовольча безпека через 6 місяців супроводу»,
                               а не «отримав продуктову посилку»)

Порівнюйте з базами одиничних витрат (напр. галузеві еталони одиничних витрат), щоб судити, чи певна вартість на результат хороша, середня чи погана відносно порівнянних втручань.

Робочий приклад

Продовольчий банк, один рік:

  • Загальна вартість програми: 450 000 £
  • Роздано посилок: 30 000
  • Вартість на посилку (метрика продукту): 450 000 £ / 30 000 = 15 £

Благодійна організація також проводить шестимісячне опитування подальшого супроводу вибірки домогосподарств, виявляючи, що 35% домогосподарств, які отримали три чи більше посилок, повідомляють, що більше не потребують невідкладної продовольчої допомоги й мають бал вище порогу продовольчої безпеки у стандартному модулі опитування продовольчої безпеки. Із 1800 домогосподарств, що отримали три й більше посилок цього року, 630 досягають цього результату.

Вартість на результат = 450 000 £ / 630 = 714 £ на домогосподарство, що досягає продовольчої безпеки

Саме це число 714 £ слід використовувати фундатору, що порівнює цю організацію з пілотом грошових переказів чи послугою боргових консультацій, — а не 15 £. Якщо порівнянна програма грошових переказів у тому ж регіоні досягає продовольчої безпеки за 500 £ на домогосподарство, продовольчий банк очевидно не є ефективнішим шляхом до того ж результату, хоча його вартість на посилку виглядає дешево.

Зв'язок з програмною інженерією

Більшість систем керування справами створюються для журналювання продуктів, бо продукти — те, що відбувається всередині транзакції (посилка вручається, форма подається). Результати зазвичай настають пізніше, часто поза нормальним вікном фіксації системи, і вимагають свідомого рішення дизайну: створіть механізм подальшого супроводу (тригер опитування, потік повторного контакту, вправу зв'язування даних) як першокласну функцію, а не додаток, прикріплений для річного звіту. Інженери, що створюють платформи керування грантами чи справами для сектору, мають ставитися до «що є подією результату і як ми її спостерігаємо» як до питання вимог, поставленого до фіксації моделі даних, — набагато важче дозбудувати поле результату, ніж лічильник продуктів. Див. результати проти продуктів та логічну модель щодо того, як структурувати цю розмову про вимоги, та вартість на бенефіціара щодо швидшої, грубішої метрики, до якої вдаються команди, коли відстеження результатів ще не створено.

Пастки

  • Повідомлення продуктів, переодягнених у результати. «Охоплені люди» — не «люди, яким допомогли». Якщо метрику можна отримати із системного журналу без подальшого контакту, це майже напевно продукт.
  • Маніпуляція знаменником. Звуження популяції результату до «тих, хто завершив програму», тихо відкидає тих, хто вибув, — часто найважчі випадки — і завищує позірний показник. Вказуйте знаменник як усіх, хто розпочав, а не всіх, хто завершив.
  • Відсутність контрфактичного. Підрахунок кожного, хто досяг результату, включно з тими, хто досяг би й так, перебільшує те, що програма купила. Див. контрфактичний аналіз.
  • Порівняння між несумісними визначеннями результату. «Продовольчо захищений», виміряний валідованим модулем опитування, не порівнянний із «продовольчо захищеним», самозвітованим у формі задоволеності; рейтингова таблиця вартості на результат чесна лише коли визначення результату збігаються.

Джерела