주제 19 / 64· 사회적 가치와 임팩트 측정

로직 모델

로직 모델은 프로그램의 투입물, 활동, 산출물, 성과, 임팩트를 연결하는 선형 다이어그램이며, 좌에서 우로 설명책임 연쇄로 읽힌다. 자원이 들어가고, 활동이 일어나고, 산출물이 생산되고, 수혜자를 위해 성과가 변화하고, 더 넓거나 더 긴 시간 척도에서 임팩트가 발생한다. 이는 자금제공자와 감사자가 프로그램이 보고 가능하기를 기대하는 표준 구조이며, 역방향으로 지도화된 변화의 이론의 전방향 대응물이다.

중요한 이유

HM Treasury의 Magenta Book은 로직 모델을 프로그램 평가 설계의 필수 요소로 명시하며, National Lottery Community Fund와 같은 자금제공자는 정확히 이 다섯 열 연쇄를 중심으로 신청과 보고 템플릿을 구축한다. 그 가치는, 프로그램이 무엇을 쓸 것인지, 그것으로 무엇을 할 것인지, 무엇을 생산할 것인지, 그리고——결정적으로——그 결과로 무엇이 변화해야 하는지를, 산문 단락이 흔히 흐리게 만드는 구체성 수준으로 하나의 다이어그램에서 진술하도록 강제한다는 것이다. 투입물과 활동 열은 채워져 있지만 성과 열은 비어 있거나 모호한 로직 모델은 한눈에 진단 가능하며, 이것이 정확히 자금제공자가 그것을 요청하는 이유다.

계산식

로직 모델은 공식이라기보다 구조적 연쇄다.

투입물          활동              산출물              성과              임팩트
(투입된 자원)  (그것으로        (직접적이고        (수혜자를       (장기적,
                  무엇을 하는가)  세어지는 산물)      위한 변화)       인구 수준
                                                                      또는 체계적
                                                                      변화)

각 열은 이전 열보다 더 구체적이어야 한다. 투입물은 당신이 쓰는 것이고, 활동은 당신이 하는 것이며, 산출물은 효과와 무관하게 전달되는 것이고, 성과는 그 결과로 변화하는 것이며——이 구별은 성과와 산출물에서 완전히 다루어진다——임팩트는 흔히 부분적으로만 귀속될 수 있는 지속적인 장기적 변화다.

계산 예시

지방자치단체(디지털 부채 상담 서비스):

  • 투입물: 연간 예산 180,000파운드, 상담사 4.0 상근환산, 케이스 관리 시스템.
  • 활동: 아웃리치 세션, 일대일 부채 상담 약속.
  • 산출물: 900건의 약속이 전달됨; 750건의 부채 및 급여 계획이 발행됨.
  • 성과: 6개월 후속 조치에 도달한 고객 중 60%(750명 중 450명)가 체납 감소를 보고하며, 고객당 평균 1,200파운드 감소——총 540,000파운드의 체납 감소.
  • 임팩트: 2년에 걸친 서비스 고객 기반의 노숙 신청 감소가 측정 가능하지만, 다른 개입과 함께 이 서비스에만 부분적으로만 귀속됨(반사실 분석 참조).

자선단체(푸드뱅크 의뢰 파트너십):

  • 투입물: 45,000파운드, 조정관 1.5 상근환산, 12개 의뢰 기관과의 파트너십 협약.
  • 활동: 의뢰 심사, 소포 포장 및 배포.
  • 산출물: 1,100가구에 5,000개의 식료품 소포가 배포됨.
  • 성과: 조사된 가구의 68%(1,100명 중 748명)가 4주 후속 통화에서 향상된 식량 안보를 보고.
  • 임팩트: 지역 위기 서비스 수요 감소에 대한 기여, 집계된 지역 통계로만 입증되며 이 자선단체에만 귀속되지 않음.

소프트웨어 개발과의 연관성

로직 모델은 성과 시스템을 위한 거의 문자 그대로의 데이터 모델에 가깝다. 투입물과 활동은 이미 보유하고 있는 운영 데이터(지출, 인력 배치, 세션 로그)이고; 산출물은 전달 시점에 계산되기 때문에 계측하기 쉽고; 성과는 누군가 그것을 구축하지 않는 한 존재하지 않을 의도적으로 설계된 후속 데이터 수집(설문조사, 행정 데이터 연계)을 필요로 하며; 임팩트는 보통 단일 프로그램 시스템을 넘어선 연결되고 종단적이거나 인구 수준의 데이터를 필요로 한다. 보고 도구를 구축하는 엔지니어는, 거래 데이터가 이미 지원한다는 이유로 산출물만의 대시보드를 기본값으로 삼는 대신, 위탁 기관이 설계 시점에 성과 및 임팩트 지표를 정의하도록 밀어붙여야 한다. 성과와 임팩트 열을 구체적으로 평가하는 방법에 대해서는 사회적 투자수익률을, 임팩트 열이 실제로 전달되었는지 추적하는 것에 대해서는 편익 실현을 참조.

함정

  • 산출물에서 멈추는 것. 전달된 약속이나 배포된 소포를 보고하며 편익을 암시하는 대시보드는 결과가 아니라 활동을 보고하는 것이다——성과와 산출물 참조.
  • 열 사이의 인과적 연결이 명시되지 않은 것. 로직 모델은 연쇄를 명시하지만 왜 활동이 산출물을 생산해야 하고 산출물이 성과를 생산해야 하는지는 명시하지 않는다. 그 추론은 변화의 이론에 속하며, 그것이 뒷받침되지 않은 로직 모델은 검증되지 않은 것이다.
  • 일회성 신청 문서로 취급하는 것. 자금 신청을 만족시키기 위해서만 생산되고 결코 업데이트되지 않는 로직 모델은 프로그램이 실제로 하는 것을 반영하지 않게 된다.
  • 임팩트 열에서의 귀속 확대. 반사실 없이 인구 수준의 변화가 오직 하나의 프로그램에 의해 유발되었다고 주장하는 것은 증거가 뒷받침하는 것을 과대평가한다.

출처