Тема 19 от 64· Социална стойност и измерване на въздействието

Логически модел

Логическият модел е линейна диаграма, която свързва ресурсите, дейностите, изходите, резултатите и въздействието на една програма и се чете отляво надясно като верига на отчетност: вложени са ресурси, извършват се дейности, получават се изходи, резултатите променят положението на ползвателите, а въздействието се натрупва в по-широк или по-дълъг времеви мащаб. Това е стандартната структура, спрямо която финансиращите организации и одиторите очакват една програма да може да бъде отчитана, и перспективният двойник на изграждащата се в обратна посока теория на промяната.

Защо е важно

Magenta Book на HM Treasury (Министерството на финансите на Обединеното кралство) определя логическия модел като задължителен елемент при проектирането на оценката на програми, а финансиращи организации като National Lottery Community Fund изграждат своите формуляри за кандидатстване и отчитане именно около тази петстълбова верига. Стойността му е в това, че принуждава програмата да заяви в една диаграма какво ще изразходва, какво ще прави с това, какво ще произведе и — което е решаващо — какво трябва да се промени в резултат, с конкретност, която абзац свободен текст обикновено замъглява. Логически модел с попълнени колони за ресурси и дейности, но с празна или неясна колона за резултати, се разпознава на пръв поглед — и точно затова финансиращите го изискват.

Математиката

Логическият модел е структурна верига, а не формула:

Ресурси         Дейности          Изходи              Резултати             Въздействие
(вложени        (какво се прави   (преки, измерими     (промяна за           (дългосрочна
 средства)       с тях)            продукти)           ползвателите)         промяна на ниво
                                                                              население или система)

Всяка колона трябва да е по-конкретна от предходната: ресурсите са това, което харчите, дейностите са това, което правите, изходите са това, което се предоставя независимо от ефекта, резултатите са това, което се променя вследствие на това — разграничението е разгледано подробно в резултати срещу изходи — а въздействието е трайната, често само отчасти приписвима дългосрочна промяна.

Практически пример

Местна власт (цифрова услуга за съвети при задлъжнялост):

  • Ресурси: годишен бюджет от £180 000, 4,0 еквивалента на пълно работно време (FTE) консултанти, система за управление на случаи.
  • Дейности: информационни срещи, индивидуални консултации по задължения.
  • Изходи: проведени 900 консултации; издадени 750 плана за задължения и обезщетения.
  • Резултати: от клиентите, достигнали до последващата проверка след 6 месеца, 60% (450 от 750) съобщават за намалени просрочия, средно с £1 200 на клиент — общо £540 000 намаление на просрочията.
  • Въздействие: измеримо намаляване на молбите за настаняване на бездомни сред клиентите на услугата в продължение на две години, само отчасти приписвимо на тази услуга наред с други интервенции (вж. контрафактуален анализ).

Благотворителна организация (партньорство за насочване към банка за храни):

  • Ресурси: £45 000, 1,5 FTE координатор, споразумения за партньорство с 12 насочващи агенции.
  • Дейности: сортиране на насочванията, опаковане и раздаване на пакети.
  • Изходи: раздадени 5 000 хранителни пакета на 1 100 домакинства.
  • Резултати: 68% от анкетираните домакинства (748 от 1 100) съобщават за подобрена продоволствена сигурност при последващо телефонно обаждане след 4 седмици.
  • Въздействие: принос към намаляване на местното търсене на кризисни услуги, доказуем само в обобщените статистики за района и неприписвим единствено на тази организация.

Връзка със софтуерното инженерство

Логическият модел е почти буквален модел на данните за система, ориентирана към резултати: ресурсите и дейностите са оперативни данни, които вече притежавате (разходи, персонал, дневници на сесиите); изходите се инструментират лесно, защото се отчитат в момента на предоставяне; резултатите изискват нарочно проектирано последващо събиране на данни (анкети, свързване с административни данни), което няма да съществува, ако никой не го изгради; въздействието обикновено изисква свързани, надлъжни или популационни данни извън системите на една-единствена програма. Инженерите, които изграждат инструменти за отчитане, трябва да настояват възложителите да определят показатели за резултати и въздействие още на етапа на проектиране, вместо да се свеждат по подразбиране до табло само за изходи само защото това поддържат транзакционните данни. Вж. социална възвръщаемост на инвестицията — метод, който оценява именно колоните за резултати и въздействие, и реализиране на ползите за проследяване дали колоната за въздействие действително е постигната.

Чести грешки

  • Спиране на ниво изходи. Табло, което отчита проведени консултации или раздадени пакети и загатва за полза, отчита дейност, а не резултати — вж. резултати срещу изходи.
  • Липса на заявена причинна връзка между колоните. Логическият модел показва веригата, но не и защо дейностите трябва да водят до изходи, а те — до резултати; тази логика принадлежи на теорията на промяната, а логически модел без такава зад себе си е непроверен.
  • Третиране като еднократен документ за кандидатстване. Логическите модели, изготвени само за да се удовлетвори заявка за финансиране и никога неактуализирани, престават да отразяват какво всъщност прави програмата.
  • Пълзяща приписвимост в колоната за въздействие. Твърдението, че промяна на ниво население е причинена единствено от една програма, без контрафактуален сценарий, преувеличава онова, което подкрепят доказателствата.

Източници