Тема 58 із 64· Програмна інженерія та цифрове надання

Метрики DORA для публічної цінності

Метрики DORA (DevOps Research and Assessment) — частота розгортань, час виконання змін, рівень збоїв змін і час відновлення послуги, плюс надійність як п'ята — найвалідованіші еталони результативності надання в програмній індустрії. Перекладені в терміни підзвітності публічного сектору, кожна з них є прямим замінником того, наскільки швидко й наскільки безпечно публічна цінність досягає громадянина.

Чому це важливо

Десятиліття досліджень DORA, що публікуються щороку як Accelerate State of DevOps Report (методологія Форсгрен, Гамбла та Кіма, нині під керівництвом Google Cloud), кластеризують команди на елітні, високі, середні та низькі за результативністю. Елітні команди розгортають на вимогу, витрачають менш як добу від коміту до продуктивного середовища, мають збої приблизно в 5% змін і відновлюються менш як за годину; низькі розгортають раз на місяць або рідше, витрачають місяці, мають збої близько 40% змін і відновлюються тижнями. В уряді це не інженерні метрики марнославства: Service Standard Government Digital Service вимагає від команд «ітерувати й покращувати часто» та вміти швидко реагувати на потребу користувачів, а департаменти, що не можуть розгортати безпечно й часто, структурно нездатні відповідати цьому стандарту, що б не казали їхні дослідження користувачів. Власна робота Cabinet Office з цифрової ефективності виявила, що відштовхування громадянина від невдалої чи повільної цифрової транзакції до телефонного чи паперового каналу дороге — звіт GDS про цифрову ефективність 2012 року оцінив, що деякі цифрові транзакції коштують лише 20 пенсів проти телефонних чи особистих контактів до 8,62 £ — тож збій зміни в послузі, зверненій до публіки, коштує не лише інженерного часу, а й перекладає реальні фунти на бюджет кол-центру (див. заощадження від зміщення каналів).

Математика

Частота розгортань     = продуктивні розгортання / час
Час виконання змін     = t(розгортання) − t(коміт), медіана
Рівень збоїв змін      = невдалі зміни / усі зміни × 100
Час відновлення (MTTR) = t(відновлено) − t(збій), медіана
Надійність             = досягнення SLO (доступність, затримка, коректність)

Переклади в публічну цінність:

Час виконання    → тижні в конвеєрі × CoD, див. cost-of-delay-in-public-programmes
Рівень збоїв     → рівень інцидентів, видимих громадянам: CFR × вартість на перенаправлений
                   дзвінок до кол-центру (або на невдалу законодавчу транзакцію)
Час відновлення  → шкода від простою послуги: MTTR × (заяви/звернення, заблоковані
                   щогодини) × подальша вартість чи втрата добробуту на одиницю
Надійність       → знижка вигоди: послуга з доступністю 99% доставляє
                   ≈ 0,99 свого змодельованого ефекту — аналог надання
                   нестачі використання чи відповідності

Робочий приклад

Команда порталу заяв на допомоги місцевої влади до та після інвестиції в інженерію надання:

                    До          Після
Розгортання         щомісяця    щотижня
Час виконання       8 тижнів    5 днів
CFR                 30%         10%
MTTR                3 дні       4 години

Команда випускає близько 25 покращень на рік із середньою цінністю 8000 £/тиждень (вартість затримки). Скорочення часу виконання приблизно на 7,3 тижня наближає потік вигод кожного покращення: 25 × 7,3 × 8000 ≈ 1 460 000 £/рік цінності, доставленої раніше. Щодо рівня збоїв: 25 × (0,30 − 0,10) = 5 менше невдалих змін на рік; кожна невдала зміна на публічному порталі зазвичай перенаправляє оціночно 2000 громадян до телефонного каналу за 8,62 £ проти 20 п, чиста вартість приблизно 8,42 £ × 2000 ≈ 16 840 £ на інцидент, тож уникнення 5 інцидентів заощаджує ≈ 84 200 £/рік. Інвестиція в інженерію надання оцінена в тій самій валюті, що й будь-який інший кейс публічної цінності.

Робочий приклад, продовження: надійність

Якщо портал працює з доступністю 97%, а не цільових 99,5%, і кожен відсотковий пункт простою моделюється як 2% заяв, втрачених через покидання, послуга доставляє приблизно 0,975 свого змодельованого ефекту 2 млн £/рік — знижка вигоди 50 000 £/рік, яку чиста панель часу безвідмовної роботи ніколи не виявить.

Зв'язок з програмною інженерією

Метрики DORA — операційні метрики публічної послуги в іншому вбранні: час виконання відображається на стандарти послуг і метрики транзакцій; рівень збоїв змін — на рівні переробки та скарг; MTTR — на те, як довго законодавча послуга недоступна заявникам. Техніки покращення переносяться в обох напрямках, бо обидві є системами черг під обмеженнями підзвітності — див. метрики потоку в урядовому наданні щодо лежачої в основі математики черг. Зверніть також увагу на висновок DORA 2025 року, що впровадження ШІ корелює з вищою пропускною здатністю, але гіршою стабільністю — втручання як з ефективністю, так і з побічними ефектами, саме той аналіз чистої вигоди, який розбирає тема продуктивності ШІ цього розділу.

Пастки

  • Маніпуляція метриками: роздування кількості розгортань порожніми випусками або виключення термінових виправлень з підрахунку збоїв змін. Визначайте події так само точно, як стандарт законодавчої послуги визначає «успішну транзакцію».
  • Міждепартаментні рейтингові таблиці: кластери DORA порівнюють практики надання, а не послуги з різними профілями ризику; система сплати податків, оцінена як «висока», може бути правильною позицією там, де «елітна» була б безрозсудною з огляду на вимоги гарантій.
  • Оптимізація лише однієї метрики: швидкість без рівня збоїв змін — класичний компроміс пропускна здатність–нестабільність; повідомляйте всі чотири разом, а не як єдиний бал.

Джерела

  • DORA research and the annual Accelerate State of DevOps Report. https://dora.dev/
  • Forsgren N, Humble J, Kim G, Accelerate: The Science of Lean Software and DevOps, IT Revolution Press, 2018.
  • Cabinet Office, Digital Efficiency Report, 2012.
  • DORA, 2025 State of AI-assisted Software Development report. https://dora.dev/dora-report-2025/