Тема 6 из 64· Основы общественной ценности

Дополнительность и «мёртвый груз» (deadweight)

Дополнительность отвечает на вопрос, действительно ли вмешательство стало причиной результата, который иначе бы не наступил. «Мёртвый груз» (deadweight) — её зеркальное отражение: доля результата, которая произошла бы в любом случае, даже без программы, гранта или субсидии. Почти любое заявление о влиянии со стороны государственной программы или благотворительной организации завышает эффект до тех пор, пока «мёртвый груз» не вычтен, поэтому британские методические рекомендации по оценке программ считают эту поправку первой и важнейшей при работе с любой итоговой цифрой.

Почему это важно

Фраза «мы помогли 500 предприятиям вырасти» звучит как достижение, но если 300 из этих предприятий выросли бы и без программы — потому что местная экономика восстанавливалась, потому что у них были другие источники финансирования, потому что они и так уже находились на траектории роста, — то реальный дополнительный вклад программы составляет 200, а не 500. «Magenta Book» казначейства Великобритании (HM Treasury) и давно действующее «Руководство по дополнительности» HM Treasury/BIS (изначально разработанное для программ регионального развития и регенерации территорий и с тех пор широко используемое в оценке государственных программ Великобритании) закрепляют вычет «мёртвого груза» как первый шаг стандартной последовательности расчёта чистого эффекта: валовой эффект минус «мёртвый груз», минус вытеснение, минус утечка, с поправкой на мультипликативные эффекты, равно чистому дополнительному эффекту. Пропуск этого шага — самый распространённый способ, которым заявления о влиянии в государственном и некоммерческом секторах завышаются, намеренно или нет: грантовая программа, измеряющая только валовые результаты участников без контрольной группы, не может отличить собственный эффект от того, что произошло бы в любом случае.

«Мёртвый груз» — не фиксированный процент; он полностью зависит от контрфактического сценария для конкретной группы населения и вмешательства (см. контрфактический анализ). Английские оценки программ регионального развития времён прежних региональных агентств развития (Regional Development Agencies) обычно фиксировали уровень «мёртвого груза» в диапазоне 20–60% в зависимости от типа поддержки бизнеса, поэтому достоверные оценки программ публикуют диапазон с учётом «мёртвого груза», а не единую предполагаемую цифру, и именно поэтому такие фонды, как National Lottery Community Fund и Big Society Capital, требуют от грантополучателей прямо учитывать «мёртвый груз» в отчётности о результатах, а не сообщать валовое число участников.

Математика

Стандартная последовательность расчёта чистого эффекта, изложенная в британских методических рекомендациях по оценке (Magenta Book; Additionality Guide HM Treasury/BIS; методические указания по оценке структурных фондов ESIF):

Gross outcome
  − Deadweight       (what would have happened anyway)
  − Displacement     (activity/benefit shifted from elsewhere, not created — see
                       displacement-and-attribution)
  − Leakage          (benefit accruing outside the target group/area)
  × Multiplier        (additional indirect/induced economic activity, where positive)
  = Net additional impact

Доля «мёртвого груза»:

Deadweight rate = outcomes that would have occurred without the intervention
                   / total gross outcomes observed

Net additional outcomes = Gross outcomes × (1 − Deadweight rate)

Практический пример

Программа грантов для поддержки бизнеса: региональная грантовая схема сообщает, что 500 поддержанных предприятий увеличили занятость в следующем году в среднем на 3 рабочих места каждое — валовое заявление о 1500 рабочих местах.

Сопоставленная контрольная группа схожих неподдержанных предприятий (см. контрфактический анализ) показывает, что 40% роста занятости у поддержанных предприятий произошло бы в любом случае, судя по показателям сопоставленной группы за тот же период.

Deadweight rate = 40%
Net additional jobs = 1,500 × (1 − 0.40) = 900 jobs

Честно заявляемое достижение программы — 900 рабочих мест, а не 1500 — сокращение на 40% только за счёт поправки на «мёртвый груз», ещё до учёта вытеснения или утечки.

Программа трудоустройства благотворительной организации: благотворительная организация трудоустраивает 200 длительно безработных людей стоимостью 600 000 £ (3000 £ на одно трудоустройство, валовая цифра). Национальные данные рынка труда показывают, что без какого-либо вмешательства примерно 15% сопоставимой когорты длительно безработных находят работу за тот же период за счёт естественной текучести на рынке труда.

Deadweight rate = 15%
Net additional placements = 200 × (1 − 0.15) = 170
True cost per additional placement = £600,000 / 170 ≈ £3,529

Валовая цифра стоимости одного трудоустройства (3000 £) занижает реальную стоимость дополнительного вклада организации примерно на 15%.

Связь с разработкой программного обеспечения

Дополнительность и «мёртвый груз» напрямую важны для всех, кто разрабатывает программное обеспечение для измерения влияния или управления грантами в государственном или некоммерческом секторе:

  • Системы отчётности о результатах должны изначально предусматривать захват сравнительной или базовой группы, а не только результатов участников — добавить контрфактический сценарий постфактум в систему, запущенную без него, намного сложнее, чем заложить эту возможность с самого начала (см. контрфактический анализ).
  • Панели показателей, отражающие только валовое число участников, будут систематически завышать влияние перед донорами и надзорными органами; там, где оценки «мёртвого груза» существуют (из литературы по оценке или из контрольной группы), программное обеспечение должно показывать цифру за вычетом «мёртвого груза» наряду с валовой, а не вместо неё.
  • Это напрямую связано с социальной отдачей от инвестиций, чей коэффициент SROI достоверен только после вычета «мёртвого груза» (и вытеснения) из валовых заявленных результатов — калькулятор SROI, пропускающий этот шаг, выдаёт завышенные коэффициенты, не выдерживающие проверки.

Подводные камни

  • Представление валовых результатов так, будто все они дополнительны. Это самая распространённая ошибка измерения влияния в отчётности по грантам и программам; всегда спрашивайте «произошло бы это в любом случае?», прежде чем публиковать итоговую цифру.
  • Предположение, что единый процент «мёртвого груза» применим повсеместно. «Мёртвый груз» сильно варьируется в зависимости от сектора, группы населения и местных экономических условий; используйте контрольную группу или отраслевые данные, а не переносите цифру из не связанной с этим оценки.
  • Смешение «мёртвого груза» с вытеснением. «Мёртвый груз» касается контрфактических результатов для тех же участников; вытеснение касается эффектов для других людей или мест — см. вытеснение и атрибуция. Их смешение приводит к двойному учёту или недоучёту поправки.
  • Самооценка «мёртвого груза» участниками. Вопрос к получателям помощи «произошло бы это без нашей помощи?» систематически даёт заниженные оценки «мёртвого груза» (участники склонны приписывать заслугу программе); независимая контрольная группа гораздо надёжнее.

Источники

  • HM Treasury, "The Magenta Book: Central Government Guidance on Evaluation" (2020). https://www.gov.uk/government/publications/the-magenta-book
  • HM Treasury / Department for Business, Innovation and Skills, "Additionality Guide: A Standard Approach to Assessing the Additional Impact of Interventions" (3rd edition), originally developed with English Partnerships and the Housing Corporation.
  • European Commission, "Evalsed: The Resource for the Evaluation of Socio-Economic Development" — guidance on deadweight, displacement, and leakage in structural-funds evaluation.
  • National Lottery Community Fund, "Guidance on Outcomes and Impact Reporting." https://www.tnlcommunityfund.org.uk/