Тема 18 от 64· Социална стойност и измерване на въздействието
Теория на промяната
Теорията на промяната е изрично, картографирано отзад напред причинно-следствено пътуване от дългосрочна цел до предпоставките и дейностите, които трябва да съществуват, за да бъде тя постигната, заедно с допусканията, свързващи всяка връзка. Изгражда се, като се започне от резултата, който искате, и многократно се пита „какво трябва да е вярно непосредствено преди това, за да се случи то?“, докато се стигне до дейности, които реално можете да осигурите — което е обратната посока на логическия модел и затова двете са взаимно допълващи се, а не взаимозаменяеми.
Защо е важно
Методът на картографиране отзад напред е формализиран от Center for Theory of Change и ActKnowledge, надграждайки работата на оценителката Карол Вайс за изричното формулиране на допусканията на програмите, така че да могат да се проверяват, а не да се приемат на доверие. Британската оценка на безвъзмездните помощи го е възприела директно: Magenta Book на HM Treasury третира теорията на промяната като отправна точка за всеки дизайн на оценка, а финансиращи организации като National Lottery Community Fund изискват кандидатите да формулират такава, преди да финансират предложение. Причината това да е важно за софтуерния инженер е, че теорията на промяната е документът, който трябва да определя какво системата ви трябва да измерва — ако причинната верига казва „усвояването на помощите зависи от това, заявителите да получат персонализирано изчисление“, това е проверимо твърдение, за което продуктът ви може да бъде оборудван да събира доказателства или да го опровергае.
Математиката
Теорията на промяната е структурна, а не числова. Всяка връзка трябва да носи както допускане, така и показател, който би могъл да покаже, че допускането е невярно:
Дългосрочен резултат (целта)
↑ предпоставка + допускане + показател
Междинен резултат N
↑ предпоставка + допускане + показател
...
Междинен резултат 1
↑ предпоставка + допускане + показател
Дейности / интервенции
↑ ангажирани ресурси
Вложени ресурси
Тази структура се подава директно към методите за оценка на въздействието, които съществуват, за да проверят дали допусканията във всяка връзка действително са верни, и към контрафактуалния анализ, който проверява дали дългосрочният резултат не би настъпил и без интервенцията.
Практически пример
Местна власт (предотвратяване на бездомност): дългосрочният резултат е устойчиви наеми на 12 месеца за домакинства, изложени на риск от изгонване.
- Предпоставка: домакинствата имат реалистичен, поносим план за изплащане на задълженията. Допускане: планове, договорени от социален работник, са по-устойчиви от съдебно наложените. Показател: % планове, все още действащи след 6 месеца.
- Предпоставка: домакинствата заявяват помощите, на които имат право. Допускане: дигитален калкулатор на помощи увеличава правилните заявления спрямо хартиените формуляри. Показател: процент на точност на заявленията, сравнен преди/след въвеждането на инструмента.
- Дейности: сортиране на случаите от социални работници, дигитален калкулатор на помощи, преговори за задълженията.
В пилотна кохорта от 120 домакинства допускането за калкулатора на помощи се потвърждава при 102 домакинства (85%), които продължават да подават заявления правилно, което се доказва от последваща оценка на процеса — така екипът на програмата получава доказателства за тази конкретна връзка, вместо едно-единствено твърдение от край до край за предотвратената бездомност.
Благотворителна организация (менторство на младежи): дългосрочният резултат е намалено изключване от училище. Предпоставки, картографирани отзад напред: подобрена емоционална саморегулация → доверителна лична връзка с ментор → постоянен седмичен контакт в продължение на два срока. Теорията прави изрично, че липсата на предпоставката „постоянен седмичен контакт“ (да речем, заради текучество на ментори) предсказва, че резултатът няма да последва, което е проверимо, опровержимо твърдение, а не надежда.
Връзка със софтуерното инженерство
Теорията на промяната трябва да оформя модела на данни на продукта, преди да е изграждано каквото и да е табло: определете за кои връзки е нужен показател и оборудвайте системата специално за тях, вместо да записвате каквото е най-лесно. Тя дисциплинира и разговорите за пътната карта — функция, която не съответства на нито една връзка във веригата, не е очевидно заслужаваща изграждане. Вж. логически модел за обърнатата напред верига на отговорност, изградена след съгласуването на теорията, социална възвръщаемост на инвестицията за метод, който зависи от теория на промяната, за да определи кои резултати да се остойностят, и резултати и изходи за разграничението, от което зависят връзките на междинните резултати.
Чести грешки
- Бъркане с логическия модел. Теорията на промяната е причинна и обяснителна (защо вярваме, че това работи); логическият модел е последователен и описателен (какво се случва в какъв ред). Изготвянето само на единия оставя липсващо или „защо“, или следата за отговорност.
- Оставяне на допусканията неизказани. Цялата стойност на картографирането отзад напред е в изваждането на проверими допускания; теория на промяната, която просто изброява кутии и стрелки, без да назовава какво би могло да направи всяка връзка невярна, е декорация.
- Изграждане веднъж и прибиране в архива. Теория на промяната, написана за кандидатура за финансиране и никога повече преразглеждана, престава да е полезна в момента, в който доказателствата започнат да противоречат на някоя връзка.
- Пропускане на участието на заинтересованите страни. Теория на промяната, изградена изцяло от възложителите без принос от служителите на първа линия или бенефициентите, обикновено кодира допускания, в които никой от предоставящите услугата реално не вярва.
Източници
- Center for Theory of Change. https://www.theoryofchange.org/
- ActKnowledge. https://www.actknowledge.org/
- HM Treasury, Magenta Book (2020), Chapter 3. https://www.gov.uk/government/publications/the-magenta-book
- National Lottery Community Fund, theory of change guidance. https://www.tnlcommunityfund.org.uk/