Тема 32 із 64· Метрики результативності та надання в уряді
Метрики довіри й легітимності
Легітимність і підтримка — одне з трьох плечей «стратегічного трикутника» Марка Мура з Creating Public Value (1995) — поряд із самою публічною цінністю та операційною спроможністю — і це плече найчастіше лишають невимірюваним, бо на відміну від бюджету чи кількості продуктів легітимність не має очевидного єдиного числа. Метрики довіри й легітимності — сімейство замінних заходів, якими уряди заповнюють цю прогалину: опитування інституційної довіри, рейтинги довіри наглядових органів, дані про скарги та апеляції і індикатори політичної/законодавчої підтримки.
Чому це важливо
Аргумент Мура полягає в тому, що публічний керівник, який забезпечує справжню цінність, але втрачає політичну й громадську легітимність, зрештою втратить уповноважувальне середовище, потрібне для продовження забезпечення, — фінансування скорочують, мандати звужують, і послугу зморюють голодом незалежно від того, наскільки добрі її результати. Легітимність, отже, — не додаток для зв'язків із громадськістю, прикріплений до картки показників надання; це несучий вхід до того, чи може місія взагалі тривати, і саме тому вона стоїть як рівноправна перспектива в картці показників публічної цінності, а не виноскою. Програма опитувань OECD «Trust in Government» — провідна міжнародна спроба кількісно виміряти це: вона відстежує частку громадян у країнах-членах OECD, які кажуть, що мають довіру до свого національного уряду, а її довготривалі дані показують, що довіра дуже чутлива до шоків — і фінансова криза 2008 року, і пандемія COVID-19 викликали різкі коливання на національному рівні, часто з наступним лише частковим відновленням, причому аналіз OECD послідовно виявляє, що сприйнята компетентність (чи уряд виконує те, що обіцяє) і сприйнята справедливість/доброчесність (чи вважають, що уряд діє без корупції чи фаворитизму) — два найсильніші чинники числа довіри, відмінні від задоволеності будь-якою окремою транзакцією. Уряди дедалі частіше намагаються операціоналізувати легітимність і на детальнішому рівні — британські незалежні регулятори та інспекції (National Audit Office, Parliamentary and Health Service Ombudsman, галузеві регулятори як-от Ofsted і Care Quality Commission) функціонують як інституціоналізовані перевірки легітимності, перетворюючи «чи публіка досі довіряє цій послузі» на придатні до аудиту рейтинги.
Математика
Довіра й легітимність — тема у формі рамки, чиї придатні кількісні замінники такі:
Індекс інституційної довіри (у стилі OECD)
= % респондентів, що відповідають «так» на питання про довіру до уряду,
відстежується в часі, розбивається за демографічною групою
Набір замінників легітимності (жодне єдине число не замінює конструкт):
- Задоволені скарги на 1000 користувачів послуги (дані омбудсмена чи внутрішні дані про скарги)
- Рівень успіху судового перегляду / апеляцій проти рішень органу
- Рейтинг незалежного регулятора/інспекції (напр. смуги від «видатний» до «недостатній»)
- Голосування довіри законодавчого/наглядового комітету чи частота критичних звітів
- Обсяг запитів на доступ до публічної інформації та рівень розкриття/відмов, як замінник
сприйнятої прозорості
Легітимність підтверджується, а не обчислюється: обґрунтована оцінка легітимності
тріангулює кілька з наведеного, а не покладається на будь-який окремий замінник.
Робочий приклад
Національний податковий орган: тріангуляція легітимності для річного звіту про публічну цінність.
Замінник довіри у стилі OECD (опитування довіри, специфічне для відомства):
58% респондентів кажуть, що довіряють органу «поставитися до мене справедливо» (спад
з 64% два роки тому)
Дані про скарги:
Задоволені скарги: 4,2 на 1000 взаємодій з платниками податків (вгору з 3,1 на 1000)
Направлення до омбудсмена:
Направлення до незалежного Adjudicator's Office: 1850 за рік, з яких
61% задоволено повністю чи частково проти органу (вгору з 48% попереднього року)
Читаючи всі три разом: довіра падає, задоволені скарги зростають, а незалежні
висновки омбудсмена дедалі частіше стають на бік, протилежний органу — три незалежні
сигнали, що сходяться в одному напрямку, що й робить це достовірним
висновком про легітимність, а не шумом в одному ряду.
Рух одного з цих чисел був би слабким доказом; три незалежні заходи, що рухаються разом за той самий період, — шаблон, який робить твердження про легітимність обґрунтованим.
Зв'язок з програмною інженерією
Метрики легітимності рідко створюються панеллю однієї команди, що саме по собі — урок дизайну: будуйте конвеєри звітності, здатні приймати й узгоджувати дані з незалежних зовнішніх джерел (системи розгляду справ омбудсмена, потоки рейтингів регуляторів, постачальники опитувань), замість проєктування звітності про легітимність як суто внутрішньої метрики, бо внутрішньо отримані твердження про легітимність («ми оцінюємо себе як надійних») мають малу доказову вагу — та сама проблема незалежності, відзначена для перспективи легітимності в картці показників публічної цінності. Конвеєри даних про скарги й апеляції заслуговують на ту саму ретельність якості даних, що й будь-який конвеєр результатів, який живить договори оплати за результати, бо недозвітований або погано категоризований набір скарг непомітно занижує проблему легітимності, перш ніж вона стане видимою в опитуванні довіри через рік. Див. метрики задоволеності громадян щодо відповідника цього заходу рівня інституції на рівні транзакції та публічну цінність щодо повної рамки стратегічного трикутника Мура, до якої належить це плече.
Пастки
- Вважати задоволеність замінником легітимності: громадянин може бути задоволений інтерфейсом окремої транзакції, не довіряючи інституції загалом (або навпаки) — див. метрики задоволеності громадян щодо того, чому обидва мають повідомлятися окремо.
- Покладання на одну самозвітовану метрику: опитування довіри, проведене внутрішньо без незалежного підтвердження (дані омбудсмена, рейтинги регулятора), легко відхилити як самооцінювання; тріангулюйте.
- Ігнорування демографічної розбивки: сукупні національні числа довіри можуть маскувати різко розбіжну легітимність серед конкретних груп (за віком, етнічною приналежністю, доходом чи регіоном) — публікації OECD Trust in Government самі розбивають дані саме з цієї причини.
- Читання одного спаду, викликаного шоком, як постійного тренду: числа довіри різко рухаються навколо криз (фінансові крахи, пандемії, гучні скандали) і частково відновлюються; одну точку даних після шоку не слід екстраполювати на довготривалий спад без додаткових даних.
Джерела
- Mark H. Moore, Creating Public Value: Strategic Management in Government, Harvard University Press, 1995.
- OECD, "Trust in Government." https://www.oecd.org/en/topics/trust-in-government.html
- Parliamentary and Health Service Ombudsman, annual casework statistics. https://www.ombudsman.org.uk/