Θέμα 33 από 64· Μετρικές κοινωνικού τομέα και φιλανθρωπίας

Κόστος ανά αποτέλεσμα

Το κόστος ανά αποτέλεσμα είναι η συνολική δαπάνη του προγράμματος διαιρεμένη με τον αριθμό των ανθρώπων που πετυχαίνουν μια καθορισμένη, ουσιαστική αλλαγή στις συνθήκες τους — όχι με τον αριθμό όσων απλώς έλαβαν μια υπηρεσία. Είναι η οξύτερη μετρική αποδοτικότητας που μπορεί να χρησιμοποιήσει ένας χρηματοδότης ή μια ομάδα παράδοσης, επειδή αναγκάζει ένα προηγούμενο ερώτημα που οι περισσότεροι φιλανθρωπικοί οργανισμοί αποφεύγουν: τι ακριβώς μετράει ως επιτυχία;

Γιατί έχει σημασία

Μια τράπεζα τροφίμων μπορεί να αναφέρει δύο πολύ διαφορετικούς αριθμούς από τα λογιστικά βιβλία της ίδιας χρονιάς. Το κόστος ανά δέμα τροφίμων που διανεμήθηκε μπορεί να είναι £15. Το κόστος ανά νοικοκυριό που φτάνει στη συνέχεια σε επισιτιστική ασφάλεια — δεν χρειάζεται πλέον έκτακτη επισιτιστική βοήθεια, επαληθευμένο σε σημείο παρακολούθησης — μπορεί να είναι £340. Και τα δύο είναι αληθινά. Μόνο το ένα λέει σε έναν χρηματοδότη αν το χρήμα δουλεύει. Το χάσμα μεταξύ τους είναι το χάσμα μεταξύ εκροής και αποτελέσματος: ένα δέμα που παραδόθηκε είναι εκροή· ένα νοικοκυριό που δεν βρίσκεται πια σε κρίση είναι αποτέλεσμα. Βλ. αποτελέσματα έναντι εκροών.

Ο βρετανικός τρίτος τομέας έχει περάσει δύο δεκαετίες χτίζοντας υποδομή για να επιβάλει αυτή τη διάκριση. Η «προσέγγιση τεσσάρων πυλώνων» του New Philanthropy Capital για την αποτελεσματικότητα των φιλανθρωπικών οργανισμών ζητά ρητά από τους οργανισμούς να δηλώνουν τα αποτελέσματά τους πριν από τις εκροές τους, και το Inspiring Impact — η συνεργασία μέτρησης επίδρασης με υποστήριξη χρηματοδοτών στο ΗΒ — δημοσιεύει έναν Outcomes Matrix που πολλές αιτήσεις επιχορήγησης ζητούν πλέον από τους φιλανθρωπικούς οργανισμούς να συμπληρώσουν. Το ετήσιο ερευνητικό πρόγραμμα «State of Hunger» του Trussell Trust, που εκτελείται με το Heriot-Watt University, υπάρχει ακριβώς επειδή οι μετρήσεις δεμάτων από μόνες τους δεν λένε τίποτα για το αν οι άνθρωποι ξεφεύγουν από την επισιτιστική ανασφάλεια.

Το κόστος ανά αποτέλεσμα σημαίνει κάτι μόνο όταν έχει καθοριστεί το αντιπαραθετικό: ένα αποτέλεσμα που επιτεύχθηκε «ούτως ή άλλως» δεν είναι αποτέλεσμα που αγόρασε το πρόγραμμα. Βλ. αντιπαραθετική ανάλυση και μετατόπιση και απόδοση.

Τα μαθηματικά

Κόστος ανά αποτέλεσμα = Συνολικό κόστος προγράμματος / Αριθμός δικαιούχων που πετυχαίνουν το καθορισμένο αποτέλεσμα

όπου:
  Συνολικό κόστος προγράμματος = άμεσο κόστος παράδοσης + δίκαιο μερίδιο γενικών εξόδων
  Καθορισμένο αποτέλεσμα       = προκαθορισμένη, μετρήσιμη αλλαγή κατάστασης
                                  (π.χ. «σε επισιτιστική ασφάλεια στην παρακολούθηση 6 μηνών»,
                                  όχι «έλαβε ένα δέμα τροφίμων»)

Συγκρίνετε με τις βάσεις δεδομένων κόστους μονάδας (π.χ. κλαδικά σημεία αναφοράς κόστους μονάδας) για να κρίνετε αν ένα δεδομένο κόστος ανά αποτέλεσμα είναι καλό, μέσο ή κακό σε σχέση με συγκρίσιμες παρεμβάσεις.

Επεξεργασμένο παράδειγμα

Τράπεζα τροφίμων, ένα έτος:

  • Συνολικό κόστος προγράμματος: £450.000
  • Δέματα που διανεμήθηκαν: 30.000
  • Κόστος ανά δέμα (μετρική εκροής): £450.000 / 30.000 = £15

Ο φιλανθρωπικός οργανισμός διεξάγει επίσης έρευνα παρακολούθησης έξι μηνών σε ένα δείγμα νοικοκυριών, διαπιστώνοντας ότι το 35% των νοικοκυριών που έλαβαν τρία ή περισσότερα δέματα αναφέρει ότι δεν χρειάζεται πλέον έκτακτη επισιτιστική βοήθεια και βαθμολογεί πάνω από το όριο επισιτιστικής ασφάλειας σε μια τυπική ενότητα έρευνας επισιτιστικής ασφάλειας. Από τα 1.800 νοικοκυριά που έλαβαν τρία ή περισσότερα δέματα εκείνο το έτος, τα 630 πετυχαίνουν αυτό το αποτέλεσμα.

Κόστος ανά αποτέλεσμα = £450.000 / 630 = £714 ανά νοικοκυριό που πετυχαίνει επισιτιστική ασφάλεια

Αυτός ο αριθμός των £714 είναι αυτός που πρέπει να χρησιμοποιήσει ένας χρηματοδότης που συγκρίνει αυτόν τον φιλανθρωπικό οργανισμό με ένα πιλοτικό μεταφοράς μετρητών ή μια υπηρεσία συμβουλευτικής χρεών — όχι τα £15. Αν ένα συγκρίσιμο πρόγραμμα μεταφοράς μετρητών στην ίδια περιφέρεια πετυχαίνει επισιτιστική ασφάλεια με £500 ανά νοικοκυριό, η τράπεζα τροφίμων δεν είναι προφανώς η πιο αποδοτική οδός προς το ίδιο αποτέλεσμα, παρόλο που το κόστος της ανά δέμα φαίνεται φθηνό.

Σύνδεση με τη μηχανική λογισμικού

Τα περισσότερα συστήματα διαχείρισης υποθέσεων χτίζονται για να καταγράφουν εκροές, επειδή οι εκροές είναι ό,τι συμβαίνει μέσα στη συναλλαγή (παραδίδεται ένα δέμα, υποβάλλεται μια φόρμα). Τα αποτελέσματα συμβαίνουν συνήθως αργότερα, συχνά εκτός του κανονικού παραθύρου καταγραφής του συστήματος, και απαιτούν μια σκόπιμη σχεδιαστική απόφαση: χτίστε έναν μηχανισμό παρακολούθησης (έναν ενεργοποιητή έρευνας, μια ροή εργασιών επανεπικοινωνίας, μια άσκηση σύνδεσης δεδομένων) ως χαρακτηριστικό πρώτης τάξης, όχι ως εκ των υστέρων σκέψη βιδωμένη για μια ετήσια έκθεση. Οι μηχανικοί που χτίζουν πλατφόρμες διαχείρισης επιχορηγήσεων ή υποθέσεων για τον τομέα πρέπει να αντιμετωπίζουν το «ποιο είναι το συμβάν αποτελέσματος και πώς το παρατηρούμε» ως ερώτημα απαιτήσεων που τίθεται πριν σταθεροποιηθεί το μοντέλο δεδομένων — είναι πολύ δυσκολότερο να προσθέσετε εκ των υστέρων ένα πεδίο αποτελέσματος από έναν μετρητή εκροών. Βλ. αποτελέσματα έναντι εκροών και λογικό μοντέλο για το πώς να δομήσετε αυτή τη συζήτηση απαιτήσεων, και κόστος ανά δικαιούχο για την ταχύτερη, πιο ωμή μετρική στην οποία καταφεύγουν οι ομάδες όταν η παρακολούθηση αποτελεσμάτων δεν έχει ακόμη χτιστεί.

Παγίδες

  • Η αναφορά εκροών μεταμφιεσμένων σε αποτελέσματα. Το «άνθρωποι που προσεγγίστηκαν» δεν είναι «άνθρωποι που βοηθήθηκαν». Αν η μετρική μπορεί να παραχθεί από ένα αρχείο καταγραφής συστήματος χωρίς επαφή παρακολούθησης, είναι σχεδόν σίγουρα εκροή.
  • Η παραποίηση του παρονομαστή. Η στένεψη του πληθυσμού αποτελεσμάτων σε «όσους ολοκλήρωσαν το πρόγραμμα» αφήνει σιωπηλά έξω όσους αποχώρησαν — συχνά τις πιο δύσκολες περιπτώσεις — και φουσκώνει το φαινομενικό ποσοστό. Δηλώστε τον παρονομαστή ως όλους όσοι ξεκίνησαν, όχι όλους όσοι τελείωσαν.
  • Απουσία αντιπαραθετικού. Η καταμέτρηση όλων όσων πέτυχαν το αποτέλεσμα, συμπεριλαμβανομένων όσων θα το πετύχαιναν ούτως ή άλλως, υπερβάλλει ό,τι αγόρασε το πρόγραμμα. Βλ. αντιπαραθετική ανάλυση.
  • Η σύγκριση μεταξύ ασυμβίβαστων ορισμών αποτελέσματος. Η «επισιτιστική ασφάλεια» που μετράται με επικυρωμένη ενότητα έρευνας δεν συγκρίνεται με την «επισιτιστική ασφάλεια» που αυτοαναφέρεται σε μια φόρμα ικανοποίησης· ένας πίνακας κατάταξης κόστους ανά αποτέλεσμα είναι έντιμος μόνο όταν οι ορισμοί αποτελεσμάτων ταιριάζουν.

Πηγές