Θέμα 19 από 64· Κοινωνική αξία και μέτρηση επίδρασης

Λογικό μοντέλο

Ένα λογικό μοντέλο (logic model) είναι ένα γραμμικό διάγραμμα που συνδέει τις εισροές, τις δραστηριότητες, τις εκροές, τα αποτελέσματα και την επίδραση ενός προγράμματος, διαβαζόμενο από αριστερά προς τα δεξιά ως αλυσίδα λογοδοσίας: μπαίνουν πόροι, γίνονται δραστηριότητες, παράγονται εκροές, αλλάζουν τα αποτελέσματα για τους δικαιούχους και η επίδραση συσσωρεύεται σε ευρύτερη ή μακρύτερη χρονική κλίμακα. Είναι η τυπική δομή απέναντι στην οποία οι χρηματοδότες και οι ελεγκτές περιμένουν να μπορεί να αναφερθεί ένα πρόγραμμα, και το προς τα εμπρός αντίστοιχο της προς τα πίσω χαρτογραφημένης θεωρίας αλλαγής.

Γιατί έχει σημασία

Το Magenta Book του HM Treasury ορίζει το λογικό μοντέλο ως απαιτούμενο στοιχείο του σχεδιασμού αξιολόγησης προγράμματος, και χρηματοδότες όπως το National Lottery Community Fund χτίζουν τα πρότυπα αιτήσεων και αναφοράς τους γύρω από ακριβώς αυτή την αλυσίδα πέντε στηλών. Η αξία του είναι ότι αναγκάζει ένα πρόγραμμα να δηλώσει, σε ένα διάγραμμα, τι θα ξοδέψει, τι θα κάνει με αυτά, τι θα παράγει και — κρίσιμα — τι πρέπει να αλλάξει ως αποτέλεσμα, σε επίπεδο ειδικότητας που μια παράγραφος πεζού λόγου τείνει να θολώνει. Ένα λογικό μοντέλο με συμπληρωμένες στήλες εισροών και δραστηριοτήτων αλλά κενή ή αόριστη στήλη αποτελεσμάτων διαγιγνώσκεται με μια ματιά, κάτι που είναι ακριβώς ο λόγος που οι χρηματοδότες ζητούν ένα.

Τα μαθηματικά

Το λογικό μοντέλο είναι δομική αλυσίδα και όχι τύπος:

Εισροές          Δραστηριότητες    Εκροές               Αποτελέσματα           Επίδραση
(πόροι που       (τι γίνεται με    (άμεσα, μετρήσιμα    (αλλαγή για τους       (μακροπρόθεσμη,
 δεσμεύονται)     αυτούς)           προϊόντα)            δικαιούχους)           πληθυσμιακή ή
                                                                                 συστημική αλλαγή)

Κάθε στήλη πρέπει να είναι πιο συγκεκριμένη από την προηγούμενη: οι εισροές είναι ό,τι ξοδεύετε, οι δραστηριότητες ό,τι κάνετε, οι εκροές ό,τι παραδίδεται ανεξάρτητα από το αποτέλεσμα, τα αποτελέσματα ό,τι αλλάζει ως συνέπεια — η διάκριση που καλύπτεται πλήρως στα αποτελέσματα έναντι εκροών — και η επίδραση είναι η διαρκής, συχνά μόνο εν μέρει αποδιδόμενη, μακροπρόθεσμη αλλαγή.

Επεξεργασμένο παράδειγμα

Τοπική αρχή (ψηφιακή υπηρεσία συμβουλευτικής χρεών):

  • Εισροές: ετήσιος προϋπολογισμός £180.000, 4,0 ισοδύναμοι πλήρους απασχόλησης σύμβουλοι, ένα σύστημα διαχείρισης υποθέσεων.
  • Δραστηριότητες: συνεδρίες προσέγγισης, ατομικά ραντεβού συμβουλευτικής χρεών.
  • Εκροές: 900 ραντεβού που πραγματοποιήθηκαν· 750 σχέδια χρεών και επιδομάτων που εκδόθηκαν.
  • Αποτελέσματα: από τους πελάτες που φτάνουν στην παρακολούθηση 6 μηνών, το 60% (450 από 750) αναφέρει μειωμένα καθυστερούμενα, κατά μέσο όρο μείωση £1.200 ανά πελάτη — £540.000 συνολική μείωση καθυστερούμενων.
  • Επίδραση: μετρήσιμη πτώση των αιτήσεων έλλειψης στέγης από τη βάση πελατών της υπηρεσίας σε δύο έτη, μόνο εν μέρει αποδιδόμενη σε αυτή την υπηρεσία δίπλα σε άλλες παρεμβάσεις (βλ. αντιπαραθετική ανάλυση).

Φιλανθρωπικός οργανισμός (συνεργασία παραπομπών τράπεζας τροφίμων):

  • Εισροές: £45.000, 1,5 ισοδύναμο πλήρους απασχόλησης συντονιστής, συμφωνίες συνεργασίας με 12 φορείς παραπομπής.
  • Δραστηριότητες: τριάζ παραπομπών, συσκευασία και διανομή δεμάτων.
  • Εκροές: 5.000 δέματα τροφίμων διανεμήθηκαν σε 1.100 νοικοκυριά.
  • Αποτελέσματα: 68% των ερωτηθέντων νοικοκυριών (748 από 1.100) αναφέρει βελτιωμένη επισιτιστική ασφάλεια σε τηλεφωνική παρακολούθηση 4 εβδομάδων.
  • Επίδραση: συνεισφορά στη μειωμένη τοπική ζήτηση υπηρεσιών κρίσης, τεκμηριωμένη μόνο σε συγκεντρωτικά στατιστικά της περιοχής, μη αποδιδόμενη σε αυτόν μόνο τον φιλανθρωπικό οργανισμό.

Σύνδεση με τη μηχανική λογισμικού

Το λογικό μοντέλο είναι σχεδόν κυριολεκτικά ένα μοντέλο δεδομένων για ένα σύστημα αποτελεσμάτων: οι εισροές και οι δραστηριότητες είναι επιχειρησιακά δεδομένα που ήδη κατέχετε (δαπάνες, στελέχωση, αρχεία συνεδριών)· οι εκροές εξοπλίζονται εύκολα επειδή μετρώνται στο σημείο παράδοσης· τα αποτελέσματα απαιτούν σκόπιμα σχεδιασμένη συλλογή δεδομένων παρακολούθησης (έρευνες, σύνδεση διοικητικών δεδομένων) που δεν θα υπάρχει αν κάποιος δεν την χτίσει· η επίδραση απαιτεί συνήθως συνδεδεμένα, διαχρονικά ή πληθυσμιακού επιπέδου δεδομένα πέρα από τα συστήματα οποιουδήποτε μεμονωμένου προγράμματος. Οι μηχανικοί που χτίζουν εργαλεία αναφοράς πρέπει να ωθούν τις αναθέτουσες αρχές να ορίζουν δείκτες αποτελεσμάτων και επίδρασης κατά τον σχεδιασμό, αντί να προεπιλέγουν ένα ταμπλό μόνο εκροών επειδή αυτό υποστηρίζουν ήδη τα συναλλακτικά δεδομένα. Βλ. κοινωνική απόδοση επένδυσης για μια μέθοδο που αποτιμά ειδικά τις στήλες αποτελεσμάτων και επίδρασης, και πραγμάτωση οφελών για την παρακολούθηση του αν η στήλη επίδρασης παραδόθηκε πράγματι.

Παγίδες

  • Το σταμάτημα στις εκροές. Ένα ταμπλό που αναφέρει ραντεβού που πραγματοποιήθηκαν ή δέματα που διανεμήθηκαν και υπονοεί όφελος αναφέρει δραστηριότητα, όχι αποτελέσματα — βλ. αποτελέσματα έναντι εκροών.
  • Απουσία δηλωμένου αιτιακού συνδέσμου μεταξύ των στηλών. Ένα λογικό μοντέλο δηλώνει την αλυσίδα αλλά όχι γιατί οι δραστηριότητες πρέπει να παράγουν εκροές που πρέπει να παράγουν αποτελέσματα· αυτός ο συλλογισμός ανήκει σε μια θεωρία αλλαγής, και ένα λογικό μοντέλο χωρίς μία πίσω του είναι ανέλεγκτο.
  • Η αντιμετώπιση ως εφάπαξ εγγράφου πρότασης. Τα λογικά μοντέλα που παράγονται μόνο για να ικανοποιήσουν μια αίτηση χρηματοδότησης και δεν ενημερώνονται ποτέ παύουν να αντικατοπτρίζουν τι κάνει πραγματικά το πρόγραμμα.
  • Ολίσθηση απόδοσης στη στήλη επίδρασης. Η διεκδίκηση πληθυσμιακού επιπέδου αλλαγής ως αποκλειστικά προκληθείσας από ένα πρόγραμμα, χωρίς αντιπαραθετικό, υπερβάλλει ό,τι υποστηρίζουν τα τεκμήρια.

Πηγές