Cuspair 24 à 64· Luach sòisealta agus tomhas buaidh

Measadh buaidh an aghaidh measadh pròiseis

Bidh measadh buaidh a’ faighneachd an do dh’adhbhraich prògram na builean a bha san amas. Bidh measadh pròiseis a’ faighneachd an deach am prògram a libhrigeadh dha-rìribh mar a chaidh a dhealbhadh — dha cò, aig dè an dòs, agus leis dè na cnapan-starra no na rudan a chuidich air an rathad. Is e ceistean eadar-dhealaichte a tha seo a dh’fheumas dòighean eadar-dhealaichte, agus tha Magenta Book HM Treasury a’ làimhseachadh coimiseanadh an dà chuid còmhla mar chleachdadh àbhaisteach, oir chan eil toradh buaidh lag no neoni so-mhìnichte leis fhèin: chan innis e dhut an robh teòiridh bhunaiteach a’ phrògraim ceàrr, no an do dh’fhàilnich deagh theòiridh a bhith air a libhrigeadh gu ceart a-riamh.

Carson a tha e cudromach

Tha measaidhean riaghaltais air iomadh uair gun lorg buaidh so-thomhaiste bho phrògram agus gun measadh pròiseis ann airson mìneachadh carson — a’ fàgail coimiseanairean gun chomas eadar-dhealachadh a dhèanamh eadar “chan eil am beachd seo ag obair” (fàilligeadh teòiridh) agus “cha deach am beachd seo a dh’fheuchainn gu ceart a-riamh” (fàilligeadh buileachaidh). Dh’fhoirmealaich stiùireadh Mheadhanachd Rannsachaidh Mheidigeach (Medical Research Council) air measadh pròiseis eadar-theachdan iom-fhillte, a chaidh fhoillseachadh anns a’ BMJ ann an 2015 agus air ainmeachadh gu farsaing ri taobh Magenta Book, dìlseachd, dòs agus ruigsinneachd mar na prìomh rudan a dh’fheumas measadh pròiseis a thomhas. Tha cunnart ann, le bhith a’ coimiseanadh measadh buaidh às aonais measadh pròiseis, gun tèid dealbhadh prògraim fìor-fhallain a thrèigsinn air sgàth gun deach a libhrigeadh gu leth an t-sluaigh a bha san amas aig cuibhreann dhen dian-chleachdadh a bha san amas — mearachd as urrainn do neach-togail shiostaman a bhith gu math suidhichte gus casg a chur air, oir is e dìlseachd libhrigidh dìreach na as urrainn do shiostaman dàta obrachaidh a ghlacadh ann an tìm cha mhòr fìor.

A’ mhatamataig

Tha measadh pròiseis a’ faighneachd:
 - An deach a libhrigeadh dhan t-sluagh targaid, aig an dòs/dian-chleachdadh a bha san amas?
 - An do fhreagair libhrigeadh dealbhadh a’ mhodail loidsigeach / theòiridh atharrachaidh?
 - Dè na cnapan-starra no na luchd-cuideachaidh a thug buaidh air libhrigeadh?
 Dòighean: sgrùdaidhean dìlseachd an aghaidh stairsnichean air an ro-shònrachadh, sgrùdaidhean cùise, agallamhan,
          dàta libhrigidh rianachd.

Tha measadh buaidh a’ faighneachd:
 - Dè dh’atharraich, agus cia mheud den atharrachadh sin a ghabhas buileachadh air a’ phrògram?
 Dòighean: RCT, DiD, PSM, RDD — faic impact-evaluation-methods — an aghaidh suidheachadh eile.

Breithneachadh measgaichte:
 Gun bhuaidh  + dìlseachd àrd  → fàilligeadh teòiridh: cha tug am modail fhèin a’ bhuil
 Gun bhuaidh  + dìlseachd ìosal → fàilligeadh buileachaidh: cha deach am modail a dheuchainn gu ceart
 Buaidh air a lorg + dìlseachd àrd → ath-riochdaich le misneachd
 Buaidh air a lorg + dìlseachd ìosal → rannsaich nas fhaide: dh’fhaodadh a’ bhuaidh a bhith lag no sònraichte do làrach

Eisimpleir obrach

Ùghdarras ionadail (prògram pàrantachd): lorgar le measadh buaidh a’ cleachdadh eadar-dhealachadh-ann-an-eadar-dhealachaidhean atharrachadh +2 phuing sa cheud ann an tomhas sunnd cloinne — chan eil e cudromach gu staitistigeil. Tha am measadh pròiseis, a chaidh a ruith ri thaobh, a’ faighinn a-mach nach do ràinig am prògram ach 210 de na 500 teaghlach a bha san amas (42% ruigsinneachd), agus dhiubh sin, nach do choilean ach 95 stairsneach dìlseachd ro-shònraichte 75%+ de na seiseanan a bhith air an frithealadh — 19% den ruigsinneachd a bha san amas an toiseach. Co-dhùnadh: tha toradh buaidh lag co-chòrdail le fàilligeadh buileachaidh, chan e fianais nach eil modail a’ phrògraim ag obair; is e am freagairt iomchaidh an t-slighe iomraidh a chuir às dhan 58% a thuit dheth a chàradh, chan e dealbhadh a’ phrògraim a thrèigsinn.

Carthannas (prògram litearrachd didseatach): lorgar le measadh buaidh buaidh làidir (+18 puingean sa cheud air sgòr misneachd didseatach), agus bidh measadh pròiseis co-shìnte a’ dearbhadh 92% de dhìlseachd don chlàr-teagaisg a bha san amas thar na 12 làraichean libhrigidh gu lèir. Còmhla, faodaidh an neach-maoineachaidh am prògram a mheudachadh le misneachd, oir tha a’ bhuaidh air a sealltainn gu bheil i a’ cumail gu cunbhalach seach a bhith na toradh aon làrach neo-àbhaisteach math.

Ceangal ri innleadaireachd bathar-bog

Is e dàta measaidh pròiseis dìreach na tha siostaman libhrigidh air an suidheachadh gu math airson a ghlacadh: frithealadh an aghaidh a’ phlana, dòs seisean, agus tuiteam dheth aig gach ìre de fhainneal iomraidh no clàraidh — an aon anailis fainneil a bhios innleadairean a’ togail mar-thà airson feartan toraidh, air a chur an sàs air pìob libhrigidh prògram sòisealta. Le bhith a’ biathadh meatrach dìlseachd is ruigsinneachd gu manaidsearan prògraim ann an tìm cha mhòr fìor, seach feitheamh ri measadh deireadh-tabhartais, gabhaidh slighe iomraidh briste a càradh meadhan-prògraim an àite a bhith air a lorg dìreach nuair a tha an ùine maoineachaidh seachad. Faic dòighean measaidh buaidh airson na dealbhaidhean adhbharail a bhios measadh pròiseis air a phaidhreadh leotha, teòiridh atharrachaidh agus modail loidsigeach airson an dealbhaidh a bhios am measadh pròiseis a’ sgrùdadh dìlseachd an aghaidh, agus coileanadh bhuannachdan airson libhrigeadh a leantainn tro na builean a chaidh a ghealltainn.

Cunnartan

  • A’ coimiseanadh measadh buaidh a-mhàin. Chan urrainnear an uair sin toradh neoni no lag a mhìneachadh mar fhàilligeadh teòiridh no fàilligeadh buileachaidh, agus is e sin dìreach an t-eadar-dhealachadh as cudromaiche airson co-dhùnadh dè a nì thu a-nis.
  • A’ làimhseachadh measadh pròiseis mar chur-ris bog. Feumaidh e an aon teann-chruinneas agus slatan-tomhais dìlseachd ro-shònraichte ri dealbhadh na buaidh, no tuitidh e gu naidheachd bheòil nuair a thig na toraidhean a-steach.
  • A’ measgachadh “air-àm agus taobh a-staigh buidseit” le “air a libhrigeadh mar a chaidh a dhealbhadh”. Bidh measadh pròiseis a’ sgrùdadh dìlseachd don mhodail — dòs, buidheann targaid, susbaint — chan e inbhe RAG riaghlaidh phròiseactan.
  • Gun a bhith a’ ro-chlàradh stairsnichean dìlseachd. Ma tha thu a’ co-dhùnadh às dèidh làimhe dè a tha a’ cunntadh mar “dòs gu leòr”, bidh mìneachadh sam bith air toradh buaidh a tha a’ briseadh dhùil a’ coimhead mar leisgeulan às dèidh làimhe.

Tùsan