Тема 29 із 64· Метрики результативності та надання в уряді

Продуктивність публічних послуг

Продуктивність публічних послуг вимірює, наскільки ефективно публічні витрати перетворюють ресурси (персонал, капітал, товари й послуги) на продукти, скориговані за якістю, для послуг — охорони здоров'я, освіти, поліції, соціальної опіки — які не мають ринкової ціни і тому не мають показника доходу, на який можна поділити витрати. Британський Office for National Statistics публікує цей ряд з середини 2000-х, і він лишається методологічно найрозвиненішою національною спробою відповісти на питання «чи стає уряд кращим чи гіршим у перетворенні грошей на публічні послуги?».

Чому це важливо

На ринку продуктивність — це (цінність продукту) / (вартість ресурсу), а цінність продукту спостережувана, бо хтось за неї платить. Заміна кульшового суглоба, шкільне місце й поліцейський патруль не мають ціни продажу, тож наївно можна виміряти лише ресурси (що витрачено) — що спокушає коментаторів вважати зростання публічних витрат автоматично поганим, бо більше ресурсів при плоскій заголовній діяльності виглядає як падіння продуктивності. Методологія ONS, викладена в її публікаціях «Sources and Methods» щодо продуктивності публічних послуг, розв'язує це, будуючи індекс продукту з обсягів діяльності (проведені операції, навчені учні, розслідувані злочини) і потім коригуючи цей індекс за якістю — для охорони здоров'я, включаючи показники виживання та час очікування; для освіти, включаючи досягнення; для поліції, включаючи результати на кшталт вирішення справ — так що послуга, яка виконує ту саму кількість операцій, але досягає кращих показників виживання, реєструється як продуктивніша, а не лише дорожча. Заголовна знахідка, що повторюється в публікаціях ONS, отверезна для сектору: продуктивність британських публічних послуг різко впала під час пандемії COVID-19 і за власними публікаціями ONS середини 2020-х ще не відновилася до рівнів 2019 року в кількох підсекторах, включно з охороною здоров'я, попри зростання витрат — розрив, що переформульовує «більше фінансування» і «більше продуктивності» як два цілком окремі питання.

Математика

Індекс продукту (обсяг) = Σ (діяльність_i × відносна вага одиничної вартості_i), зважений
                           базовим роком по всіх діяльностях послуги (напр. операції на
                           стегнах, операції при катаракті, консультації сімейного лікаря),
                           аналогічно до індексу обсягу Ласпейреса/Пааше

Коригування за якістю   = індекс продукту × фактор коригування якості
                           (напр. включення зміни показників виживання, часу очікування,
                           досягнень чи рецидиву як мультиплікатора до сирого обсягу)

Індекс ресурсів         = Σ (години праці × вага вартості праці) + (вартість товарів/послуг,
                           дефльована) + (споживання капіталу)

Зростання сукупної факторної продуктивності = % зміни індексу продукту, скоригованого
                                               за якістю − % зміни індексу ресурсів

Робочий приклад

Ілюстративний розрахунок продуктивності гострого сектору NHS (структура відповідає методології ONS):

Рік 1: індекс обсягу продукту = 100,0 (базовий рік), індекс ресурсів = 100,0
       → індекс продуктивності = 100,0

Рік 2: обсяг діяльності зростає на 3,0% (більше операцій, більше прийомів)
       але середній час очікування погіршується, застосовуючи знижку коригування
       якості −1,0%
       Індекс продукту, скоригований за якістю = 100 × 1,030 × 0,990 = 101,97

       Ресурси зростають: чисельність персоналу +4,0%, інші витрати (дефльовані) +1,5%,
       зважений індекс ресурсів = 100 × 1,032 = 103,2

Зростання продуктивності = (101,97 / 100 − 1) − (103,2 / 100 − 1)
                         = 1,97% − 3,2% = −1,23 процентного пункта

Інтерпретація: діяльність зросла, але ресурси зросли швидше, а якість трохи
впала, тож продуктивність — продукт на одиницю ресурсу — знизилася, хоча
«надано більше допомоги».

Це саме той шаблон, про який публікації ONS неодноразово повідомляли для частин NHS після пандемії: зростання витрат і зростання сирої діяльності, що співіснують зі спадом виміряної продуктивності, коли враховано і коригування якості, і зростання ресурсів.

Зв'язок з програмною інженерією

Продуктивність публічних послуг — аналог на рівні популяції дебатів про продуктивність інженерії (доставлені story points проти метрик DORA проти метрик потоку): сира пропускна здатність без коригування якості оманлива в лікарні так само, як «доставлені рядки коду» у програмній команді. Команди, що створюють конвеєри даних результативності для відомств, мають розглядати коригування якості як першокласний, версіонований етап перетворення, а не виноску — бо довіра самого ONS спирається на те, що це коригування прозоре, відтворюване й переглядається в міру надходження кращих даних про якість (ONS переглядає оцінки продуктивності минулих років, коли лежачі в основі дані про якість — напр. показники виживання — остаточно визначаються, тож будь-яка кінцева система, що споживає цю статистику, мусить обробляти ретроспективні перегляди, а не лише додавати нові періоди). Це також безпосередньо перетинається із загальною вартістю володіння та продуктивністю ШІ в публічному секторі: система, що збільшує сирий обсяг діяльності без покращення чи збереження якості, за власним визначенням ONS не є покращенням продуктивності.

Пастки

  • Вважати зростання ресурсів зростанням продуктивності: більше витрат, що фінансують більше персоналу, дає більше діяльності, а не більше продуктивності, якщо продукт на одиницю ресурсу також не зростає — обидва рутинно плутаються в політичних коментарях.
  • Повне ігнорування коригування якості: індекс продукту, побудований лише з сирих кількостей діяльності, покаже «виграші продуктивності» від виконання більше чогось менш цінного чи нижчої якості; коригування якості ONS існує саме для того, щоб це вловити.
  • Порівняння індексів продуктивності між підсекторами без узгодження вінтажу методології: продуктивність охорони здоров'я, освіти й поліції побудована з різних джерел даних про діяльність та якість у різних циклах перегляду — наївне міжсекторне порівняння порівнює несумісні інструменти.
  • Читання спаду продуктивності одного року як постійного тренду: числа продуктивності пандемічної та післяпандемічної доби виявляли значну мінливість рік у рік, коли самі дані про якість (напр. списки очікування, відновлення планових процедур) зсувалися; ONS послідовно застерігає від надінтерпретації рухів одного року.

Джерела