設計・セオリーSMART基準ベースラインモニタリング指標量的指標質的指標
指標設計
Indicator Design
別名: 評価指標の設定、パフォーマンス指標、KPI設計
事業の成果・プロセスを測定するための指標を SMART 基準に基づいて設計するプロセス。ベースライン・ターゲット値・量的指標・質的指標の組み合わせと proxy 指標の活用が実務の核心。
難易度 中級 ●●●費用 低 ●●●期間 半日〜2日(評価クエスチョン・ロジックモデル完成後)
概要
指標設計(Indicator Design)は、評価クエスチョンや事業目標に対して「何をどう測るか」を具体化するプロセス。SMART(Specific: 具体的・Measurable: 測定可能・Achievable: 達成可能・Relevant: 関連性がある・Time-bound: 期限がある)基準は、国連開発計画(UNDP)、USAID、JICA などが共通的に用いる指標設計の基本原則として定着している。
実務では、測定が比較的容易な量的指標(例:受益者数・合格率・収入増加額)と、変化の質・文脈を捉える質的指標(例:自己効力感の変化・コミュニティの信頼関係の変化)の両方を設計することが推奨される。直接測定が困難なアウトカム(例:社会的孤立の解消・権利意識の変化)には、その変化を代理で示す proxy 指標(代理指標)を用いる。ベースライン(事業開始時の基準値)とターゲット値(達成を目指す水準)の設定は、指標が評価に使える状態にするための必須要件である。
✓ こんな時に使う
- ロジックモデルや ToC の各アウトカム要素に測定方法を割り当てるとき
- 評価デザインマトリクスの指標欄を具体化するとき
- モニタリング計画を作成し、進捗管理に使える定期測定指標を設定するとき
- 助成金・事業計画書で「成果指標」の提示が求められるとき
✕ 向かない場面
- 事業目標がまだ曖昧で確定していない段階 — 目標の明確化が先決
- 指標の測定が目的化し、「指標に表れない重要な変化」への注意を失う本末転倒なKPI管理
実施手順
- 測定対象の確認ロジックモデル・ToC の各アウトカム要素と評価クエスチョンを対照し、指標を設定すべき要素をリストアップする。投入・活動・産出・各段階のアウトカム別に整理する。
- 指標候補の洗い出し各要素について複数の指標候補を挙げる。量的・質的の両面から、また対象者の変化・事業プロセスの両面から検討する。類似事業・文献の指標も参照する。
- SMART 基準による評価と選定各候補を SMART 基準で評価し、測定可能性・コスト・実現可能性のバランスを確認して主指標と補助指標を選定する。
- ベースライン計画の設定各指標のベースライン収集方法・時期・担当者を決める。事業開始前にベースラインが収集できない場合の代替策(回顧的ベースライン等)も検討する。
- ターゲット値の設定「いつまでに・どの水準を達成するか」を文献・類似事業・専門家協議に基づいて設定する。根拠のない野心的な数値は評価を歪める。
- proxy 指標の検討直接測定が困難なアウトカム(感情・態度・権利意識・社会関係資本等)について、代理で測定できる proxy 指標を検討し、その限界も明記する。
- 指標シートへの整理各指標を「指標名・定義・測定方法・頻度・データ源・担当者・ベースライン・ターゲット値」の形式で一覧化し、評価デザインマトリクスに統合する。
長所と限界
長所
- 「何を達成したか」を客観的に示せる根拠となり、説明責任と学習の両方に使える
- 量的・質的指標の組み合わせにより、変化の大きさと質・文脈の両方を捉えられる
- モニタリングとの連動で、事業実施中の軌道修正に役立てられる
限界
- 測定可能なものに指標が偏り、重要だが捉えにくい変化(wellbeing・エンパワーメント等)が軽視されやすい
- ターゲット値の設定が過度に政治的となり、達成しやすい低い目標が設定される「数値操作」が起きることがある
- 指標の測定が自己目的化し、指標に現れない変化を無視するリスクがある
⚠ よくある落とし穴
- 指標が多すぎてモニタリングが機能不全に陥る — 重要な5〜10指標に絞るのが実務の原則
- ベースラインを事業開始後に思い出したように収集しようとするが、事業開始後では測定できていないことが多い
- 全て量的指標に偏り、受益者の経験・文脈の変化を見逃す
- 指標の「定義」を書かずに名前だけ記載し、収集者によって測り方が変わる