Tema 27 minn 64· Metriki tal-prestazzjoni u tal-konsenja fil-gvern
Responsabbiltà bbażata fuq l-eżiti (OBA)
Ir-Responsabbiltà bbażata fuq l-eżiti, imsejħa wkoll Responsabbiltà bbażata fuq ir-riżultati (RBA), hija l-qafas ta' Mark Friedman biex jinfirdu żewġ mistoqsijiet li r-rappurtar tas-settur pubbliku ħafna drabi jħawwad flimkien: "il-popolazzjoni qed tmur tajjeb?" (responsabbiltà tal-popolazzjoni) u "dan il-programm speċifiku qed jaħdem tajjeb?" (responsabbiltà tal-prestazzjoni). Skont Friedman, li jitħawdu t-tnejn huwa r-raġuni l-aktar komuni għaliex programmi mmexxija tajjeb jinżammu responsabbli għal xejriet fil-popolazzjoni li qatt ma kellhom is-setgħa jbiddlu.
Għaliex hu importanti
Friedman stabbilixxa l-qafas f'Trying Hard Is Not Good Enough (2005), billi argumenta li l-biċċa l-kbira tar-rappurtar pubbliku jew jgħarraq lil min jieħu d-deċiżjonijiet fi statistika fil-livell tal-popolazzjoni li ebda aġenzija waħda ma tikkontrolla (rata ta' tqala fost l-adolexxenti, rata tal-qgħad, għomor mistenni) jew jgħarraqhom f'għadd ta' attività fil-livell tal-programm (klijenti nstabu, referenzi saru) li ma jgħidu xejn dwar jekk il-ħajja ta' xi ħadd tjiebet. Il-kontribut tal-RBA huwa vokabulari żgħir u dixxiplinat li żżomm iż-żewġ affarijiet separati: ir-riżultati tal-popolazzjoni (kundizzjonijiet ta' benessri għal popolazzjoni sħiħa, bħal "it-tfal jitwieldu b'saħħithom") ma jappartjenu lil ebda aġenzija waħda u jeħtieġu ħafna sħab jimxu flimkien; il-miżuri tal-prestazzjoni (kemm programm speċifiku jservi tajjeb lill-klijenti speċifiċi tiegħu) jappartjenu lil aġenzija waħda u għandhom jiġu ġġudikati biss kontra dak li dik l-aġenzija tista' verament tinfluwenza. "It-tliet mistoqsijiet tal-prestazzjoni" ta' Friedman — kemm għamilna, kemm għamilna tajjeb, u xi ħadd huwa aħjar? — issa huma mdaħħla fl-għoti ta' kuntratti tas-servizzi umani fl-istati u l-kontej tal-Istati Uniti u, permezz tal-konsulenza u l-għodda allinjati mal-RBA Clear Impact, użati b'mod wiesa' fil-kummissjonar tal-gvern lokali fir-Renju Unit u fil-Commonwealth. L-interessi prattiċi huma kuntrattwali: programm tad-djar m'għandux jitneħħielu l-finanzjament għax ir-rata tal-bla dar tal-belt telgħet minn kawżi makroekonomiċi lil hinn mill-ħakma tiegħu, imma assolutament għandu jitneħħielu l-finanzjament jekk il-klijenti tiegħu stess mhumiex qed jiġu mgħammra b'dar.
Il-matematika
Responsabbiltà tal-popolazzjoni (l-"istampa l-kbira" li komunità, reġjun jew nazzjon jaqsmu):
Riżultat — kundizzjoni ta' benessri (eż. "ir-residenti huma sikuri ekonomikament")
Indikatur(i) — miżura ta' dik il-kundizzjoni (eż. rata tal-qgħad, dħul medjan tal-familja)
→ ebda programm wieħed ma jippossjedi l-indikatur; il-moviment jeħtieġ ħafna kontributuri
Responsabbiltà tal-prestazzjoni (dak li programm wieħed huwa responsabbli għalih):
Kemm għamilna? — volum tal-attività (klijenti mservija, unitajiet imwasslin)
Kemm għamilna tajjeb? — kwalità/effiċjenza (% li lestew il-programm, spiża għal kull klijent)
Xi ħadd huwa aħjar? — l-eżitu li jgħodd (% impjegati 6 xhur wara l-programm,
qabel/wara jew kontra grupp ta' tqabbil)
Programm jiġi ġġudikat fuq it-tielet mistoqsija tal-prestazzjoni, qatt direttament fuq l-indikatur
tal-popolazzjoni, sakemm l-iskala u d-disinn tiegħu ma jkunux jistgħu b'mod plawsibbli jċaqalqu waħdu.
Eżempju prattiku
Programm ta' appoġġ għall-impjieg iffinanzjat mill-belt, 500 parteċipant/sena, b'kuntratt minn awtorità lokali taħt qafas tal-prestazzjoni fl-istil tal-RBA:
Indikatur tal-popolazzjoni (kuntest, mhux l-iscorecard tal-programm):
Rata tal-qgħad tal-belt: 6.2% (minn 5.8% is-sena ta' qabel, immexxija minn għeluq ta' fabbrika
barra mill-kontroll tal-programm)
Miżuri tal-prestazzjoni (ir-responsabbiltà vera tal-programm):
Kemm għamilna: 500 parteċipant irreġistrati (mira 480) — milħuqa
Kemm għamilna tajjeb: rata ta' tlestija 78%; spiża għal kull min lesta = £340,000 / 390 li lestew ≈ £872
Xi ħadd huwa aħjar: minn 390 li lestew, 260 impjegati b'mod sostnut wara 6 xhur = 66.7%
kontra 41% ta' grupp ta' tqabbil imqabbel (ara counterfactual-analysis)
Taħt qari ta' responsabbiltà tal-popolazzjoni, il-programm jidher li qed jonqos — ir-rata tal-qgħad tal-belt telgħet matul it-tmexxija tiegħu. Taħt qari ta' responsabbiltà tal-prestazzjoni tal-RBA, il-programm qed jirnexxi: laħaq il-mira tal-volum, żamm il-kwalità stabbli, u pproduċa eżitu ta' impjieg 25.7 punt perċentwali ogħla minn grupp ta' tqabbil imqabbel, filwaqt li l-indikatur tal-popolazzjoni mexa għal raġunijiet (għeluq ta' fabbrika) għal kollox barra mill-kontroll tal-programm.
Rabta mal-inġinerija tas-software
Ir-RBA tinżel direttament fuq distinzjoni familjari tal-SRE: l-indikaturi tal-popolazzjoni huma bħall-metriċi North Star fil-livell tan-negozju li ebda tim tal-inġinerija wieħed ma jippossjedi mill-bidu sat-tmiem (dħul tal-kumpanija, sehem tas-suq), filwaqt li l-miżuri tal-prestazzjoni huma bħall-SLOs ta' tim stess — dak li d-deċiżjonijiet tad-disinn ta' dak it-tim verament iċaqalqu. Dashboard li jirrapporta t-tnejn mingħajr ma jittikketta liema hu liema jistedden eżattament l-attribuzzjoni żbaljata li r-RBA nbniet biex tipprevjeni: inġinier on-call jinżamm responsabbli għal metrika li tikkontrolla tim ta' dipendenza. Meta tikkummissjona jew tibni għodod tar-rappurtar għal kuntratti tal-eżiti, ibni t-triade "kemm / kemm tajjeb / aħjar" bħala kampijiet ta' klassi ewwel, filtrabbli separatament, minflok KPI imħallat wieħed — hija l-istess dixxiplina tas-separazzjoni tal-indikaturi li jwasslu u dawk li jiġu wara fil-KPIs tas-settur pubbliku. L-RBA hija wkoll il-loġika ta' responsabbiltà taħt il-ħlas bir-riżultati u l-bonds ta' impatt soċjali: kuntratt PbR jista' jħallas b'mod ġust biss fuq il-miżura tal-prestazzjoni "aħjar", qatt fuq l-indikatur tal-popolazzjoni, sakemm l-intervent ma jkunx verament il-mutur dominanti tiegħu.
Żbalji komuni
- Li programm jitħallas jew jiġi penalizzat kontra indikatur tal-popolazzjoni li ma jistax jikkontrolla: dan huwa l-iżball uniku li r-RBA teżisti biex tipprevjeni; dejjem ittraċċa jekk il-programm huwiex kontributur kbir jew żgħir għar-riżultat tal-popolazzjoni qabel ma twaħħal konsegwenzi miegħu.
- Li "kemm" jiġi rrappurtat qisu "aħjar": għadd tal-attività (klijenti nstabu) huwa d-data l-aktar faċli biex tinġabar u l-inqas informattiva; insisti li l-mistoqsija "xi ħadd huwa aħjar" tiġi mwieġba b'data reali tal-eżiti, idealment kontra kontrofattwali (ara analiżi kontrofattwali).
- Li l-indikaturi tal-RBA jiġu ttrattati bħala fissi għal dejjem: il-metodu ta' Friedman huwa espliċitament iterattiv — ċiklu ta' "data, storja, x'jaħdem, pjan ta' azzjoni" — mhux eżerċizzju ta' darba tad-disinn ta' scorecard.
- Ebda grupp ta' tqabbil għal "aħjar": bidla qabel/wara mingħajr kontrofattwali tħawwad l-effett tal-programm mat-trend li l-popolazzjoni kienet turi xorta.
Sorsi
- Mark Friedman, Trying Hard Is Not Good Enough: How to Produce Measurable Improvements for Customers and Communities, Trafford Publishing, 2005.
- Clear Impact, "What is Results-Based Accountability?" https://clearimpact.com/results-based-accountability/