Θέμα 32 από 64· Μετρικές επίδοσης και παράδοσης στην κυβέρνηση
Μετρικές εμπιστοσύνης και νομιμοποίησης
Η νομιμοποίηση και η υποστήριξη είναι ένα από τα τρία σκέλη του «στρατηγικού τριγώνου» του Mark Moore στο Creating Public Value (1995) — δίπλα στην ίδια τη δημόσια αξία και την επιχειρησιακή ικανότητα — και είναι το σκέλος που αφήνεται συχνότερα αμέτρητο, επειδή σε αντίθεση με έναν προϋπολογισμό ή μια καταμέτρηση εκροών, η νομιμοποίηση δεν έχει προφανή μοναδικό αριθμό συνδεδεμένο με αυτήν. Οι μετρικές εμπιστοσύνης και νομιμοποίησης είναι η οικογένεια υποκατάστατων μέτρων που χρησιμοποιούν οι κυβερνήσεις για να καλύψουν αυτό το κενό: έρευνες θεσμικής εμπιστοσύνης, βαθμολογίες εμπιστοσύνης φορέων εποπτείας, δεδομένα παραπόνων και προσφυγών, και δείκτες πολιτικής/νομοθετικής υποστήριξης.
Γιατί έχει σημασία
Το επιχείρημα του Moore είναι ότι ένας δημόσιος διευθυντής που παραδίδει πραγματική αξία αλλά χάνει την πολιτική και δημόσια νομιμοποίηση θα χάσει τελικά το περιβάλλον έγκρισης που χρειάζεται για να συνεχίσει να παραδίδει — η χρηματοδότηση περικόπτεται, οι εντολές στενεύουν και η υπηρεσία λιμοκτονεί ανεξάρτητα από το πόσο καλά είναι τα αποτελέσματά της. Η νομιμοποίηση δεν είναι επομένως μια δημοσιοσχεσιακή εκ των υστέρων σκέψη βιδωμένη σε ένα δελτίο βαθμολόγησης παράδοσης· είναι φέρουσα εισροή για το αν η αποστολή μπορεί να συνεχιστεί καθόλου, γι' αυτό και στέκεται ως ισότιμη οπτική σε ένα δελτίο βαθμολόγησης δημόσιας αξίας και όχι ως υποσημείωση. Το πρόγραμμα ερευνών «Trust in Government» του ΟΟΣΑ είναι η κορυφαία διεθνής απόπειρα να ποσοτικοποιηθεί αυτό: παρακολουθεί το μερίδιο των πολιτών των κρατών-μελών του ΟΟΣΑ που λένε ότι έχουν εμπιστοσύνη στην εθνική τους κυβέρνηση, και τα μακροπρόθεσμα στοιχεία του δείχνουν ότι η εμπιστοσύνη είναι εξαιρετικά ευαίσθητη σε σοκ — τόσο η χρηματοπιστωτική κρίση του 2008 όσο και η πανδημία COVID-19 προκάλεσαν απότομες διακυμάνσεις σε εθνικό επίπεδο, συχνά ακολουθούμενες από μόνο μερική ανάκαμψη, με την ανάλυση του ΟΟΣΑ να βρίσκει σταθερά ότι η αντιληπτή ικανότητα (παραδίδει η κυβέρνηση ό,τι λέει ότι θα παραδώσει) και η αντιληπτή δικαιοσύνη/ακεραιότητα (θεωρείται ότι η κυβέρνηση ενεργεί χωρίς διαφθορά ή ευνοιοκρατία) είναι οι δύο ισχυρότεροι παράγοντες του αριθμού εμπιστοσύνης, διακριτοί από την ικανοποίηση με οποιαδήποτε μεμονωμένη συναλλαγή. Οι κυβερνήσεις προσπαθούν όλο και περισσότερο να επιχειρησιακοποιήσουν τη νομιμοποίηση και σε πιο λεπτομερές επίπεδο — οι ανεξάρτητοι ρυθμιστές και επιθεωρητές του ΗΒ (το National Audit Office, ο Parliamentary and Health Service Ombudsman, κλαδικοί ρυθμιστές όπως ο Ofsted και η Care Quality Commission) λειτουργούν ως θεσμοθετημένοι έλεγχοι νομιμοποίησης, μετατρέποντας το «εμπιστεύεται ακόμη το κοινό αυτή την υπηρεσία» σε ελέγξιμες βαθμολογίες.
Τα μαθηματικά
Η εμπιστοσύνη και η νομιμοποίηση είναι θέμα με μορφή πλαισίου, του οποίου τα χρησιμοποιήσιμα ποσοτικά υποκατάστατα είναι:
Δείκτης θεσμικής εμπιστοσύνης (τύπου ΟΟΣΑ)
= % των ερωτηθέντων που απαντούν «ναι» σε ερώτηση εμπιστοσύνης στην κυβέρνηση,
παρακολουθούμενο στον χρόνο, αναλυμένο κατά δημογραφική ομάδα
Σύνολο υποκατάστατων νομιμοποίησης (κανένας μοναδικός αριθμός δεν αντικαθιστά την έννοια):
- Παράπονα που έγιναν δεκτά ανά 1.000 χρήστες υπηρεσίας (δεδομένα διαμεσολαβητή ή εσωτερικά παραπόνων)
- Ποσοστό επιτυχίας δικαστικής αναθεώρησης / προσφυγών έναντι των αποφάσεων του φορέα
- Βαθμολογία ανεξάρτητου ρυθμιστή/επιθεωρητή (π.χ. ζώνες «εξαιρετικό» έως «ανεπαρκές»)
- Ψηφοφορίες εμπιστοσύνης νομοθετικών/εποπτικών επιτροπών ή συχνότητα κριτικών εκθέσεων
- Όγκος αιτημάτων ελευθερίας πληροφόρησης και ποσοστό γνωστοποίησης/άρνησης, ως υποκατάστατο
της αντιληπτής διαφάνειας
Η νομιμοποίηση τεκμηριώνεται, δεν υπολογίζεται: μια υπερασπίσιμη αξιολόγηση νομιμοποίησης
τριγωνοποιεί αρκετά από τα παραπάνω αντί να στηρίζεται σε ένα μοναδικό υποκατάστατο.
Επεξεργασμένο παράδειγμα
Εθνική φορολογική αρχή: τριγωνοποίηση νομιμοποίησης για μια ετήσια έκθεση δημόσιας αξίας.
Υποκατάστατο εμπιστοσύνης τύπου ΟΟΣΑ (έρευνα εμπιστοσύνης ειδική για το υπουργείο):
58% των ερωτηθέντων λένε ότι εμπιστεύονται την αρχή να «με μεταχειριστεί δίκαια» (κάτω από
64% δύο έτη νωρίτερα)
Δεδομένα παραπόνων:
Παράπονα που έγιναν δεκτά: 4,2 ανά 1.000 αλληλεπιδράσεις φορολογουμένων (από 3,1 ανά 1.000)
Παραπομπές στον διαμεσολαβητή:
Παραπομπές στο ανεξάρτητο Adjudicator's Office: 1.850 μέσα στο έτος, από τις οποίες
61% έγιναν δεκτές εν όλω ή εν μέρει εις βάρος της αρχής (από 48% το προηγούμενο έτος)
Διαβάζοντας και τα τρία μαζί: η εμπιστοσύνη πέφτει, τα παράπονα που γίνονται δεκτά αυξάνονται,
και τα ευρήματα του ανεξάρτητου διαμεσολαβητή τάσσονται όλο και περισσότερο εναντίον της αρχής —
τρία ανεξάρτητα σήματα που συγκλίνουν προς την ίδια κατεύθυνση, κάτι που κάνει αυτό ένα
αξιόπιστο εύρημα νομιμοποίησης και όχι θόρυβο σε μία μόνο σειρά.
Η κίνηση ενός μόνο από αυτά τα μεγέθη θα ήταν αδύναμο τεκμήριο· τρία ανεξάρτητα μέτρα που κινούνται μαζί την ίδια περίοδο είναι το μοτίβο που κάνει έναν ισχυρισμό νομιμοποίησης υπερασπίσιμο.
Σύνδεση με τη μηχανική λογισμικού
Οι μετρικές νομιμοποίησης σπάνια παράγονται από το ταμπλό μιας μόνο ομάδας, κάτι που είναι από μόνο του το μάθημα σχεδιασμού: χτίστε αγωγούς αναφοράς που μπορούν να ενσωματώνουν και να συμφιλιώνουν δεδομένα από ανεξάρτητες εξωτερικές πηγές (συστήματα υποθέσεων διαμεσολαβητών, ροές βαθμολογιών ρυθμιστών, πάροχοι ερευνών) αντί να αρχιτεκτονείτε την αναφορά νομιμοποίησης ως αποκλειστικά εσωτερική μετρική, επειδή οι εσωτερικά προερχόμενοι ισχυρισμοί νομιμοποίησης («βαθμολογούμε τους εαυτούς μας ως αξιόπιστους») έχουν μικρό τεκμηριωτικό βάρος — το ίδιο πρόβλημα ανεξαρτησίας που σημειώθηκε για την οπτική νομιμοποίησης σε ένα δελτίο βαθμολόγησης δημόσιας αξίας. Οι αγωγοί δεδομένων παραπόνων και προσφυγών αξίζουν την ίδια αυστηρότητα ποιότητας δεδομένων με κάθε αγωγό αποτελεσμάτων που τροφοδοτεί συμβάσεις πληρωμής βάσει αποτελεσμάτων, αφού ένα υποαναφερόμενο ή κακώς κατηγοριοποιημένο σύνολο δεδομένων παραπόνων υποτιμά σιωπηλά ένα πρόβλημα νομιμοποίησης πριν γίνει ορατό σε μια έρευνα εμπιστοσύνης έναν χρόνο αργότερα. Βλ. μετρικές ικανοποίησης πολιτών για το αντίστοιχο σε επίπεδο συναλλαγής αυτού του θεσμικού μέτρου, και δημόσια αξία για το πλήρες πλαίσιο στρατηγικού τριγώνου του Moore στο οποίο ανήκει αυτό το σκέλος.
Παγίδες
- Η αντιμετώπιση της ικανοποίησης ως υποκατάστατου της νομιμοποίησης: ένας πολίτης μπορεί να είναι ικανοποιημένος με τη διεπαφή μιας μεμονωμένης συναλλαγής ενώ δυσπιστεί στον θεσμό συνολικά (ή αντίστροφα) — βλ. μετρικές ικανοποίησης πολιτών για το γιατί τα δύο πρέπει να αναφέρονται χωριστά.
- Η εξάρτηση από μία μοναδική αυτοαναφερόμενη μετρική: μια εσωτερικά διενεργούμενη έρευνα εμπιστοσύνης χωρίς ανεξάρτητη επιβεβαίωση (δεδομένα διαμεσολαβητή, βαθμολογίες ρυθμιστών) απορρίπτεται εύκολα ως αυτοβαθμολόγηση· τριγωνοποιήστε.
- Η αγνόηση της δημογραφικής ανάλυσης: οι συγκεντρωτικοί εθνικοί αριθμοί εμπιστοσύνης μπορούν να κρύψουν έντονα αποκλίνουσα νομιμοποίηση μεταξύ συγκεκριμένων ομάδων (κατά ηλικία, εθνικότητα, εισόδημα ή περιοχή) — οι εκδόσεις Trust in Government του ΟΟΣΑ αναλύουν ακριβώς γι' αυτόν τον λόγο.
- Η ανάγνωση μιας βουτιάς που προκλήθηκε από ένα σοκ ως μόνιμης τάσης: οι αριθμοί εμπιστοσύνης κινούνται απότομα γύρω από κρίσεις (χρηματοπιστωτικές κρίσεις, πανδημίες, σκάνδαλα υψηλού προφίλ) και ανακτώνται εν μέρει· ένα μοναδικό σημείο δεδομένων μετά το σοκ δεν πρέπει να παρεκτείνεται σε μακροπρόθεσμη πτώση χωρίς περισσότερα δεδομένα.
Πηγές
- Mark H. Moore, Creating Public Value: Strategic Management in Government, Harvard University Press, 1995.
- OECD, «Trust in Government.» https://www.oecd.org/en/topics/trust-in-government.html
- Parliamentary and Health Service Ombudsman, ετήσια στατιστικά υποθέσεων. https://www.ombudsman.org.uk/