Θέμα 28 από 64· Μετρικές επίδοσης και παράδοσης στην κυβέρνηση

Πληρωμή βάσει αποτελεσμάτων και ομόλογα κοινωνικής επίδρασης (PbR/SIB)

Η πληρωμή βάσει αποτελεσμάτων (payment by results, PbR) πληρώνει έναν πάροχο με βάση επαληθευμένα αποτελέσματα που επιτεύχθηκαν και όχι δραστηριότητες που εκτελέστηκαν. Ένα ομόλογο κοινωνικής επίδρασης (social impact bond, SIB) είναι μια συγκεκριμένη δομή χρηματοδότησης PbR στην οποία ιδιώτες ή φιλανθρωπικοί επενδυτές χρηματοδοτούν εκ των προτέρων την παροχή υπηρεσιών και αποπληρώνονται — με απόδοση — από έναν κυβερνητικό αναθέτοντα μόνο αν τα ανεξάρτητα μετρούμενα αποτελέσματα φτάσουν συμφωνημένα όρια, μετατοπίζοντας τον κίνδυνο παράδοσης από τον φορολογούμενο στον επενδυτή.

Γιατί έχει σημασία

Το πρώτο SIB στον κόσμο ξεκίνησε στη HMP Peterborough τον Σεπτέμβριο του 2010: η Social Finance συγκέντρωσε £5 εκατομμύρια από 17 επενδυτές για να χρηματοδοτήσει την «One Service», που εργαζόταν με κρατούμενους βραχείας ποινής (κάτω από 12 μήνες) για τη μείωση της υποτροπής, με το Υπουργείο Δικαιοσύνης και το Big Lottery Fund να συμφωνούν να αποπληρώσουν τους επενδυτές μόνο αν τα συμβάντα επανακαταδίκης μειώνονταν τουλάχιστον κατά 7,5% έναντι μιας αντιστοιχισμένης εθνικής ομάδας σύγκρισης. Η τελική ομάδα του πιλότου του Peterborough κατέγραψε μείωση 9,7% στις επανακαταδίκες, άνετα πάνω από το όριο, και οι επενδυτές αποπληρώθηκαν με απόδοση. Ο μηχανισμός έχει σημασία επειδή έλυσε ένα συγκεκριμένο πρόβλημα ανάθεσης: η κυβέρνηση ήθελε να πληρώνει για αποτελέσματα και όχι για εισροές, αλλά δεν μπορούσε να απορροφήσει τον οικονομικό κίνδυνο μιας παρέμβασης που μπορεί να μην λειτουργήσει, οπότε η δομή SIB μετέθεσε αυτόν τον κίνδυνο σε επενδυτές πρόθυμους να τον αναλάβουν. Το Government Outcomes Lab (GO Lab) του Blavatnik School of Government της Οξφόρδης διατηρεί σήμερα την πληρέστερη δημόσια βάση τεκμηρίων για την απόδοση των PbR και SIB παγκοσμίως, παρακολουθώντας πολύ περισσότερα από 200 ομόλογα επίδρασης διεθνώς και δημοσιεύοντας έρευνα για το ποια χαρακτηριστικά σχεδιασμού συσχετίζονται με επιτυχία ή αποτυχία. Το μάθημα στο οποίο επιστρέφει επανειλημμένα η βάση τεκμηρίων είναι ότι ο επιλεγμένος δείκτης αποτελέσματος, και το ποιος φέρει τον κίνδυνο της αστοχίας του, καθορίζει σχεδόν όλα τα υπόλοιπα για το πώς συμπεριφέρεται πράγματι μια σύμβαση PbR στην πράξη.

Τα μαθηματικά

Πληρωμή PbR = βασική πληρωμή (αν υπάρχει) + Σ (αποτέλεσμα που επιτεύχθηκε × τιμή μονάδας ανά αποτέλεσμα)

Απόδοση επενδυτή ομολόγου κοινωνικής επίδρασης:
  Δαπάνη επενδυτή   = εκ των προτέρων κεφάλαιο που χρηματοδοτεί την παροχή υπηρεσιών
  Πληρωμή αποτελέσματος = ο αναθέτων πληρώνει μόνο αν αποτέλεσμα ≥ όριο, κλιμακούμενη ανάλογα
                          με το πόσο πάνω από το όριο πέφτει η επίδοση
  Απόδοση επενδυτή  = πληρωμές αποτελεσμάτων που ελήφθησαν − δαπάνη επενδυτή
                      (ρυθμός απόδοσης, συχνά με πλαφόν, που αντανακλά τον κίνδυνο που αναλήφθηκε)

Βασικές παράμετροι σχεδιασμού που καθορίζουν τη συμπεριφορά ολόκληρης της σύμβασης:
  Δείκτης αποτελέσματος   — πρέπει να είναι αποτέλεσμα, όχι εκροή (βλ. outcomes-vs-outputs)
  Σύγκριση/αντιπαραθετικό — συνήθως αντιστοιχισμένη ομάδα (βλ. counterfactual-analysis)
  Όριο πληρωμής           — ελάχιστη βελτίωση πριν ενεργοποιηθεί οποιαδήποτε πληρωμή
  Καμπύλη πληρωμής        — γραμμική, κλιμακωτή ή με πλαφόν πάνω από το όριο
  Έκπτωση απόδοσης/νεκρού βάρους — βλ. additionality-and-deadweight

Επεξεργασμένο παράδειγμα

Peterborough One Service (ενδεικτικοί αριθμοί από δημοσιευμένες αξιολογήσεις):

Κεφάλαιο επενδυτών που συγκεντρώθηκε: £5.000.000
Ομάδα:                                ~3.000 άνδρες κρατούμενοι βραχείας ποινής σε δύο ομάδες
Όριο:                                 ≥7,5% μείωση στα συμβάντα επανακαταδίκης έναντι της αντιστοιχισμένης
                                       εθνικής ομάδας σύγκρισης, αλλιώς καμία πληρωμή
Αποτέλεσμα ομάδας 1:                  8,4% μείωση — κάτω από τη συμβατική μπάρα για
                                       αυτή την ομάδα μόνη της με τους αρχικούς κανόνες
Συνδυασμένο/τελικό αποτέλεσμα ομάδας: 9,7% μείωση — πάνω από το όριο
Πληρωμή αποτελέσματος:                η κυβέρνηση (Υπουργείο Δικαιοσύνης / Big Lottery Fund)
                                       πληρώνει ανά ποσοστιαία μονάδα πάνω από το όριο, χρηματοδοτώντας
                                       την αποπληρωμή των επενδυτών συν απόδοση

Σύμβαση PbR τοπικής αρχής (ενδεικτική): μια υπηρεσία οικογενειακής παρέμβασης ανατίθεται με £4.000 ανά οικογένεια που παραπέμπεται (πληρωμή δραστηριότητας) συν £6.000 ανά οικογένεια χωρίς περαιτέρω παραπομπή για προστασία παιδιού 12 μήνες μετά το κλείσιμο (πληρωμή αποτελέσματος). 200 οικογένειες παραπέμφθηκαν, 150 υποθέσεις έκλεισαν, 96 παραμένουν χωρίς παραπομπή στους 12 μήνες:

Πληρωμή δραστηριότητας = 200 × £4.000 = £800.000
Πληρωμή αποτελέσματος  = 96 × £6.000  = £576.000
Συνολικό κόστος σύμβασης = £1.376.000 για 96 επιβεβαιωμένα διαρκή αποτελέσματα
Κόστος ανά επιβεβαιωμένο αποτέλεσμα ≈ £14.333 (βλ. cost-per-outcome)

Σύνδεση με τη μηχανική λογισμικού

Η πληρωμή βάσει αποτελεσμάτων είναι πρόβλημα ευθυγράμμισης κινήτρων πριν γίνει πρόβλημα δεδομένων, και το σύστημα δεδομένων είναι το σημείο όπου αυτή η ευθυγράμμιση είτε κρατά είτε σπάει. Η ανεξάρτητη, ανθεκτική σε παραποίηση επαλήθευση αποτελεσμάτων είναι το όλο παιχνίδι: ο αναθέτων και ο πάροχος έχουν αντίθετα κίνητρα για το πώς κωδικοποιείται μια διφορούμενη περίπτωση, επομένως το σύστημα που καταγράφει τα αποτελέσματα χρειάζεται ίχνος ελέγχου, μια συμφωνία διαμοιρασμού δεδομένων με τον ανεξάρτητο επαληθευτή (συχνά διαφορετικό φορέα από τον πάροχο, μερικές φορές φορέα επίσημων στατιστικών που αντιστοιχίζει με αρχεία αστυνομίας ή επιδομάτων) και αμετάβλητη έκδοση του ορισμού του αποτελέσματος — το ισοδύναμο PbR της παγίδας «επαναπροσδιορισμός του δείκτη» στους δείκτες KPI του δημόσιου τομέα. Οι υπολογισμοί απόδοσης εξαρτώνται από τις μεθόδους αντιστοιχισμένης ομάδας της αντιπαραθετικής ανάλυσης, που χρειάζονται αναπαραγώγιμο, ελέγξιμο κώδικα, όχι εφάπαξ λογιστικό φύλλο. Και ο ίδιος ο δείκτης πρέπει να είναι γνήσιο αποτέλεσμα, όχι υποκατάστατη δραστηριότητα — βλ. αποτελέσματα έναντι εκροών — επειδή μια σύμβαση PbR που πληρώνει για εκροή απλώς μετονομάζει την κανονική χρηματοδότηση με πρόσθετο συναλλακτικό κόστος. Όπου η κοινωνική απόδοση ενός SIB μοντελοποιείται προοπτικά, αυτή η αξιολόγηση δανείζεται συνήθως άμεσα από τη μεθοδολογία της κοινωνικής απόδοσης επένδυσης.

Παγίδες

  • Η πληρωμή για εύκολα παραποιήσιμο υποκατάστατο αποτέλεσμα: η «παρακολούθηση συνεδριών» είναι δραστηριότητα μεταμφιεσμένη σε αποτέλεσμα· απαιτήστε ένα μέτρο που αντανακλά την πραγματική αλλαγή που επιδιώκεται (υποτροπή, απασχόληση, σταθερότητα στέγασης).
  • Απουσία αξιόπιστου αντιπαραθετικού: χωρίς αντιστοιχισμένη ομάδα σύγκρισης, μια βελτίωση μπορεί να είναι παλινδρόμηση προς τον μέσο όρο ή ευρύτερη τάση, όχι η επίδραση του προγράμματος — βλ. αντιπαραθετική ανάλυση και πρόσθετη επίδραση και νεκρό βάρος.
  • Η υποτίμηση των συναλλακτικών κοστών και των κοστών αξιολόγησης: η ανεξάρτητη επαλήθευση, η σύνδεση δεδομένων και η διαχείριση συμβάσεων για προγράμματα PbR/SIB ανέρχονται συστηματικά σε διψήφια ποσοστά της αξίας της σύμβασης — η βάση τεκμηρίων του GO Lab το τεκμηριώνει ως επαναλαμβανόμενο παράγοντα διακοπής προγραμμάτων.
  • Επιλεκτική επιλογή ή «παρκάρισμα»: οι πάροχοι που πληρώνονται ανά αποτέλεσμα έχουν άμεσο κίνητρο να προτεραιοποιούν πελάτες που ούτως ή άλλως θα πετύχαιναν και να παραμελούν τις δυσκολότερες περιπτώσεις — σχεδιάστε κλίμακες πληρωμής ή προσαρμογή μείγματος περιπτώσεων για να το αντιμετωπίσετε.

Πηγές