Efni 18 af 64· Mæling á samfélagslegu gildi og áhrifum
Breytingakenning
Breytingakenning (theory of change) er skýr, afturábak-varpaður orsakaferill frá langtímamarkmiði til þeirra forsendna og athafna sem verða að vera til staðar til að það náist, ásamt þeim ályktunum sem tengja hvern hlekk. Hún er smíðuð með því að byrja á útkomunni sem þú vilt og spyrja „hvað þarf að vera satt rétt á undan þessu, til að þetta gerist?“, ítrekað, þar til þú kemur að athöfnum sem þú getur í raun afhent — sem er öfug átt við rökvirknilíkan, og þess vegna eru þau viðbót hvort við annað fremur en skiptanleg.
Hvers vegna það skiptir máli
Afturábak-varpaða aðferðin var formgerð af Center for Theory of Change og ActKnowledge, byggð á starfi matsfræðingsins Carol Weiss um að gera forsendur áætlana skýrar svo hægt væri að prófa þær frekar en að taka þeim á trú. Styrkjamat í Bretlandi hefur tileinkað sér þetta beint: Magenta Book hjá HM Treasury lítur á breytingakenningu sem upphafspunkt hverrar matshönnunar, og fjármögnunaraðilar á borð við National Lottery Community Fund krefjast þess að umsækjendur setji fram eina áður en þeir fjármagna tillögu. Ástæðan fyrir því að þetta skiptir hugbúnaðarverkfræðing máli er að breytingakenning er skjalið sem ætti að ákvarða hvað kerfið þitt þarf að mæla — ef orsakakeðjan segir „nýting bóta veltur á því að umsækjendur fái persónulegan útreikning“ er það prófanleg fullyrðing sem hægt er að búa vöru þinni mælitækjum til að sanna, eða afsanna.
Stærðfræðin
Breytingakenning er byggingarleg frekar en tölfræðileg. Hver hlekkur ætti að bera bæði ályktun og vísi sem gæti sýnt að ályktunin sé röng:
Langtímaútkoma (markmiðið)
↑ forsenda + ályktun + vísir
Millistigsútkoma N
↑ forsenda + ályktun + vísir
...
Millistigsútkoma 1
↑ forsenda + ályktun + vísir
Athafnir / inngrip
↑ auðlindir skuldbundnar
Aðföng
Þessi bygging nærir beint aðferðir við áhrifamat, sem eru til að prófa hvort ályktanir við hvern hlekk standist í raun, og mótstaðreyndagreining, sem prófar hvort langtímaútkoman hefði orðið hvort eð er.
Dæmi útreiknað
Sveitarfélag (forvarnir gegn húsnæðisleysi): langtímaútkoma er varanleg leiga eftir 12 mánuði fyrir heimili í hættu á að missa húsnæði.
- Forsenda: heimili hafa raunhæfa, viðráðanlega endurgreiðsluáætlun fyrir vanskil. Ályktun: áætlanir samdar af málsmeðhöndlara eru sjálfbærari en dómsúrskurðaðar. Vísir: % áætlana enn virkar eftir 6 mánuði.
- Forsenda: heimili sækja um bæturnar sem þau eiga rétt á. Ályktun: stafrænn bótareiknivél eykur réttar umsóknir miðað við pappírseyðublöð. Vísir: nákvæmni umsókna, borin saman fyrir/eftir innleiðingu tólsins.
- Athafnir: flokkun málsmeðhöndlara, stafrænn bótareiknivél, samningaviðræður um vanskil.
Í tilraunahópi 120 heimila átti ályktunin um bótareiknivélina við um 102 heimili (85%) sem sóttu síðan rétt um, sannað með síðari ferlamati — sem gaf áætlunarteyminu sönnunargögn fyrir þann tiltekna hlekk fremur en stakri fullyrðingu frá enda til enda um afstýrt húsnæðisleysi.
Góðgerðarfélag (leiðsögn ungmenna): langtímaútkoma er minni brottvikning úr skóla. Afturábak-varpaðar forsendur: bætt tilfinningastjórnun → traust einstaklingssamband við leiðbeinanda → stöðug vikuleg samskipti yfir tvær annir. Kenningin gerir skýrt að ef forsendan um „stöðug vikuleg samskipti“ bregst (segjum vegna veltu leiðbeinenda) spáir hún því að útkoman fylgi ekki, sem er prófanleg, afsönnunarhæf fullyrðing frekar en von.
Tengsl við hugbúnaðarverkfræði
Breytingakenning ætti að móta gagnalíkan vöru áður en nokkurt mælaborð er smíðað: greindu hvaða hlekkir þurfa vísi og búðu mælitækjum fyrir þá sérstaklega, frekar en að nota sjálfgefið það sem auðveldast er að skrá. Hún agar líka umræður um vegvísi — eiginleiki sem varpast ekki á neinn hlekk í keðjunni er ekki augljóslega þess virði að smíða. Sjá rökvirknilíkan fyrir framvísandi ábyrgðarkeðjuna sem smíðuð er þegar kenningin er samþykkt, samfélagsleg arðsemi fjárfestingar fyrir aðferð sem byggir á breytingakenningu til að afmarka hvaða útkomur eigi að meta, og útkoma og afurðir fyrir greinarmuninn sem millistigsútkomuhlekkirnir byggja á.
Gildrur
- Að rugla henni saman við rökvirknilíkan. Breytingakenning er orsakabundin og útskýrandi (hvers vegna við trúum að þetta virki); rökvirknilíkan er raðbundið og lýsandi (hvað gerist í hvaða röð). Að framleiða aðeins annað skilur eftir annaðhvort „hvers vegna“ eða ábyrgðarslóðina.
- Að skilja ályktanir eftir óbeinar. Allt gildi afturábak-varpa er að draga fram prófanlegar ályktanir; breytingakenning sem listar aðeins kassa og örvar án þess að nefna hvað gæti gert hvern hlekk rangan er skraut.
- Að smíða hana einu sinni og leggja til hliðar. Breytingakenning skrifuð fyrir styrkjaumsókn og aldrei endurskoðuð hættir að vera gagnleg um leið og sönnunargögn fara að stangast á við hlekk.
- Að sleppa inntaki hagsmunaaðila. Breytingakenning smíðuð alfarið af kaupendum þjónustu án inntaks frá starfsfólki í fremstu víglínu eða þiggjendum hefur tilhneigingu til að fela í sér ályktanir sem enginn sem afhendir þjónustuna trúir í raun.
Heimildir
- Center for Theory of Change. https://www.theoryofchange.org/
- ActKnowledge. https://www.actknowledge.org/
- HM Treasury, Magenta Book (2020), Chapter 3. https://www.gov.uk/government/publications/the-magenta-book
- National Lottery Community Fund, theory of change guidance. https://www.tnlcommunityfund.org.uk/