موضوع 27 از 64· سنجه‌های عملکرد و تحویل دولتی

پاسخ‌گویی پیامدمحور

پاسخ‌گویی پیامدمحور (OBA)، که پاسخ‌گویی نتیجه‌محور (RBA) هم نامیده می‌شود، چارچوب مارک فریدمن برای جداکردن دو پرسشی است که گزارش‌دهی بخش عمومی عادتاً درهم می‌آمیزد: «آیا جمعیت وضع خوبی دارد؟» (پاسخ‌گویی جمعیتی) و «آیا این برنامه‌ی مشخص عملکرد خوبی دارد؟» (پاسخ‌گویی عملکردی). به روایت فریدمن، خلط این دو رایج‌ترین دلیل است که برنامه‌های خوب اداره‌شده به‌خاطر روندهای جمعیتی سرزنش می‌شوند که هرگز قدرت تغییرشان را نداشته‌اند.

چرا اهمیت دارد

فریدمن چارچوب را در Trying Hard Is Not Good Enough (2005) بیان کرد و استدلال کرد بیشتر گزارش‌دهی عمومی یا تصمیم‌گیران را در آمارهای سطح جمعیت غرق می‌کند که هیچ نهاد واحدی کنترل نمی‌کند (نرخ بارداری نوجوانان، نرخ بیکاری، امید به زندگی) یا در شمارش‌های فعالیتِ سطح برنامه (مراجعان پذیرفته‌شده، ارجاع‌های انجام‌شده) که درباره‌ی بهبود زندگی کسی چیزی نمی‌گویند. سهم RBA واژگانی کوچک و منضبط است که این دو را از هم جدا نگه می‌دارد: نتایج جمعیتی (شرایط رفاه برای کل یک جمعیت، مانند «کودکان سالم زاده می‌شوند») به هیچ نهاد واحدی تعلق ندارند و به حرکت هم‌زمان شرکای بسیار نیاز دارند؛ سنجه‌های عملکرد (اینکه یک برنامه‌ی مشخص چقدر خوب به مراجعان مشخصش خدمت می‌دهد) به یک نهاد تعلق دارند و فقط باید در برابر آن‌چه آن نهاد واقعاً می‌تواند بر آن اثر بگذارد قضاوت شوند. «سه پرسش عملکرد» فریدمن ــ چقدر انجام دادیم، چقدر خوب انجام دادیم، و آیا کسی وضع بهتری پیدا کرده است؟ ــ اکنون در قراردادهای خدمات انسانی ایالتی و شهرستانی آمریکا جا افتاده و از طریق Clear Impact، شرکت مشاوره و جعبه‌ابزار هم‌راستا با RBA، در سفارش‌دهی حکومت محلی در بریتانیا و کشورهای مشترک‌المنافع هم بسیار به کار می‌رود. پیامد عملی قراردادی است: برنامه‌ی مسکن نباید به این دلیل که نرخ بی‌خانمانی شهر به علل کلان اقتصادی خارج از دسترس آن بالا رفته بی‌بودجه شود، اما اگر مراجعان خودش را خانه‌دار نمی‌کند قطعاً باید بی‌بودجه شود.

ریاضیات

Population accountability (the "big picture" a community, region, or nation shares):
  Result       — a condition of wellbeing (e.g. "residents are economically secure")
  Indicator(s) — a measure of that condition (e.g. unemployment rate, median household income)
  → no single programme owns the indicator; movement requires many contributors

Performance accountability (what one programme is responsible for):
  How much did we do?      — activity volume (clients served, units delivered)
  How well did we do it?   — quality/efficiency (% completing programme, cost per client)
  Is anyone better off?    — the outcome that matters (% in employment 6 months after
                              programme, before/after or against a comparison group)

A programme is judged on the third performance question, never on the population
indicator directly, unless its scale and design could plausibly move it alone.

مثال عملی

برنامه‌ی حمایت از اشتغال با بودجه‌ی شهر، با 500 شرکت‌کننده در سال، که یک مقام محلی در چارچوب عملکردی به سبک RBA با آن قرارداد بسته است:

Population indicator (context, not the programme's scorecard):
  City unemployment rate: 6.2% (up from 5.8% the prior year, driven by a factory closure
  outside the programme's control)

Performance measures (the programme's actual accountability):
  How much:   500 participants enrolled (target 480) — met
  How well:   78% completion rate; cost per completer = £340,000 / 390 completers ≈ £872
  Better off: of 390 completers, 260 in sustained employment at 6 months = 66.7%
              versus a matched comparison group's 41% (see counterfactual-analysis)

با خوانش پاسخ‌گویی جمعیتی، برنامه شکست‌خورده به نظر می‌رسد ــ نرخ بیکاری شهر در دوره‌ی آن بالا رفت. با خوانش پاسخ‌گویی عملکردیِ RBA، برنامه موفق است: به هدف حجمی‌اش رسید، کیفیت را ثابت نگه داشت و پیامد اشتغالی تولید کرد که 25.7 واحد درصد بالاتر از گروه مقایسه‌ی همتاست، در حالی که شاخص جمعیتی به دلایلی (تعطیلی یک کارخانه) کاملاً بیرون از کنترل برنامه تغییر کرد.

پیوند با مهندسی نرم‌افزار

RBA مستقیماً بر یک تمایز آشنای SRE منطبق است: شاخص‌های جمعیتی مانند سنجه‌های «ستاره‌ی شمالی» سطح کسب‌وکارند که هیچ تیم مهندسی‌ای از ابتدا تا انتها مالک آن‌ها نیست (درآمد شرکت، سهم بازار)، در حالی که سنجه‌های عملکرد مانند SLOهای خود تیم‌اند ــ چیزهایی که تصمیم‌های طراحی همان تیم واقعاً آن‌ها را حرکت می‌دهد. داشبوردی که هر دو را بدون برچسب‌زدن بگوید کدام است، دقیقاً همان انتساب نادرستی را دعوت می‌کند که RBA برای جلوگیری از آن ساخته شد: مهندس آنکال که برای سنجه‌ای که تیم وابسته کنترل می‌کند سرزنش می‌شود. هنگام سفارش یا ساخت ابزار گزارش‌دهی برای قراردادهای پیامدمحور، سه‌گانه‌ی «چقدر / چقدر خوب / وضع بهتر» را به‌صورت فیلدهای درجه‌یک و جداگانه‌ی قابل پالایش بسازید، نه یک KPI ترکیبی واحد ــ این همان انضباط جداسازی شاخص‌های پیشرو و پیرو در KPIهای بخش عمومی است. RBA همچنین منطق پاسخ‌گویی در بُن پرداخت بر پایه‌ی نتیجه و اوراق اثر اجتماعی است: قرارداد PbR فقط می‌تواند منصفانه بر پایه‌ی سنجه‌ی عملکردِ «وضع بهتر» پرداخت کند، نه بر شاخص جمعیتی، مگر اینکه مداخله واقعاً محرک غالب آن باشد.

دام‌ها

  • پرداخت یا جریمه‌ی یک برنامه بر پایه‌ی شاخص جمعیتی که نمی‌تواند کنترلش کند: این همان یک اشتباهی است که RBA برای جلوگیری از آن وجود دارد؛ پیش از اعمال پیامد، همیشه بررسی کنید برنامه سهم عمده‌ای از نتیجه‌ی جمعیتی دارد یا فرعی.
  • گزارش «چقدر» به‌جای «وضع بهتر»: شمارش فعالیت (مراجعان پذیرفته‌شده) آسان‌ترین داده برای گردآوری و کم‌اطلاعات‌ترین است؛ اصرار کنید پرسش «آیا کسی وضع بهتری پیدا کرده» با داده‌ی پیامد واقعی، ترجیحاً در برابر وضعیت خلاف‌واقع، پاسخ داده شود (نگاه کنید به تحلیل وضعیت خلاف‌واقع).
  • ثابت‌انگاشتن شاخص‌های RBA برای همیشه: روش فریدمن صراحتاً تکرارشونده است ــ چرخه‌ی «داده، روایت، چه کار می‌کند، برنامه‌ی اقدام» ــ نه تمرین یک‌باره‌ی طراحی کارت امتیازی.
  • نبود گروه مقایسه برای «وضع بهتر»: تغییر پیش/پس بدون وضعیت خلاف‌واقع اثر برنامه را با روندی که جمعیت به هر حال نشان می‌داد درهم می‌آمیزد.

منابع