Тема 19 от 64· Социална стойност и измерване на въздействието
Логически модел
Логическият модел е линейна диаграма, която свързва ресурсите, дейностите, изходите, резултатите и въздействието на една програма и се чете отляво надясно като верига на отчетност: вложени са ресурси, извършват се дейности, получават се изходи, резултатите променят положението на ползвателите, а въздействието се натрупва в по-широк или по-дълъг времеви мащаб. Това е стандартната структура, спрямо която финансиращите организации и одиторите очакват една програма да може да бъде отчитана, и перспективният двойник на изграждащата се в обратна посока теория на промяната.
Защо е важно
Magenta Book на HM Treasury (Министерството на финансите на Обединеното кралство) определя логическия модел като задължителен елемент при проектирането на оценката на програми, а финансиращи организации като National Lottery Community Fund изграждат своите формуляри за кандидатстване и отчитане именно около тази петстълбова верига. Стойността му е в това, че принуждава програмата да заяви в една диаграма какво ще изразходва, какво ще прави с това, какво ще произведе и — което е решаващо — какво трябва да се промени в резултат, с конкретност, която абзац свободен текст обикновено замъглява. Логически модел с попълнени колони за ресурси и дейности, но с празна или неясна колона за резултати, се разпознава на пръв поглед — и точно затова финансиращите го изискват.
Математиката
Логическият модел е структурна верига, а не формула:
Ресурси Дейности Изходи Резултати Въздействие
(вложени (какво се прави (преки, измерими (промяна за (дългосрочна
средства) с тях) продукти) ползвателите) промяна на ниво
население или система)
Всяка колона трябва да е по-конкретна от предходната: ресурсите са това, което харчите, дейностите са това, което правите, изходите са това, което се предоставя независимо от ефекта, резултатите са това, което се променя вследствие на това — разграничението е разгледано подробно в резултати срещу изходи — а въздействието е трайната, често само отчасти приписвима дългосрочна промяна.
Практически пример
Местна власт (цифрова услуга за съвети при задлъжнялост):
- Ресурси: годишен бюджет от £180 000, 4,0 еквивалента на пълно работно време (FTE) консултанти, система за управление на случаи.
- Дейности: информационни срещи, индивидуални консултации по задължения.
- Изходи: проведени 900 консултации; издадени 750 плана за задължения и обезщетения.
- Резултати: от клиентите, достигнали до последващата проверка след 6 месеца, 60% (450 от 750) съобщават за намалени просрочия, средно с £1 200 на клиент — общо £540 000 намаление на просрочията.
- Въздействие: измеримо намаляване на молбите за настаняване на бездомни сред клиентите на услугата в продължение на две години, само отчасти приписвимо на тази услуга наред с други интервенции (вж. контрафактуален анализ).
Благотворителна организация (партньорство за насочване към банка за храни):
- Ресурси: £45 000, 1,5 FTE координатор, споразумения за партньорство с 12 насочващи агенции.
- Дейности: сортиране на насочванията, опаковане и раздаване на пакети.
- Изходи: раздадени 5 000 хранителни пакета на 1 100 домакинства.
- Резултати: 68% от анкетираните домакинства (748 от 1 100) съобщават за подобрена продоволствена сигурност при последващо телефонно обаждане след 4 седмици.
- Въздействие: принос към намаляване на местното търсене на кризисни услуги, доказуем само в обобщените статистики за района и неприписвим единствено на тази организация.
Връзка със софтуерното инженерство
Логическият модел е почти буквален модел на данните за система, ориентирана към резултати: ресурсите и дейностите са оперативни данни, които вече притежавате (разходи, персонал, дневници на сесиите); изходите се инструментират лесно, защото се отчитат в момента на предоставяне; резултатите изискват нарочно проектирано последващо събиране на данни (анкети, свързване с административни данни), което няма да съществува, ако никой не го изгради; въздействието обикновено изисква свързани, надлъжни или популационни данни извън системите на една-единствена програма. Инженерите, които изграждат инструменти за отчитане, трябва да настояват възложителите да определят показатели за резултати и въздействие още на етапа на проектиране, вместо да се свеждат по подразбиране до табло само за изходи само защото това поддържат транзакционните данни. Вж. социална възвръщаемост на инвестицията — метод, който оценява именно колоните за резултати и въздействие, и реализиране на ползите за проследяване дали колоната за въздействие действително е постигната.
Чести грешки
- Спиране на ниво изходи. Табло, което отчита проведени консултации или раздадени пакети и загатва за полза, отчита дейност, а не резултати — вж. резултати срещу изходи.
- Липса на заявена причинна връзка между колоните. Логическият модел показва веригата, но не и защо дейностите трябва да водят до изходи, а те — до резултати; тази логика принадлежи на теорията на промяната, а логически модел без такава зад себе си е непроверен.
- Третиране като еднократен документ за кандидатстване. Логическите модели, изготвени само за да се удовлетвори заявка за финансиране и никога неактуализирани, престават да отразяват какво всъщност прави програмата.
- Пълзяща приписвимост в колоната за въздействие. Твърдението, че промяна на ниво население е причинена единствено от една програма, без контрафактуален сценарий, преувеличава онова, което подкрепят доказателствата.
Източници
- HM Treasury, Magenta Book (2020), Chapter 3. https://www.gov.uk/government/publications/the-magenta-book
- National Lottery Community Fund, logic model guidance. https://www.tnlcommunityfund.org.uk/
- W.K. Kellogg Foundation, "Logic Model Development Guide" (2004). https://www.wkkf.org/resource-directory/resources/2004/01/logic-model-development-guide