総合フレームワーク評価活用ステークホルダー関与意図された利用者Patton

実用重視評価

Utilization-Focused Evaluation
別名: UFE、活用志向評価

「意図された利用者による意図された利用」を最優先に評価を設計・実施するアプローチ。Michael Quinn Pattonが提唱。評価の技術的な完成度より活用可能性を重視する。

難易度 中級 ●●費用 ●●期間 利用者特定・フォーカシングに1〜4週間。評価全体は規模による

概要

Michael Quinn PattonがMinnesota大学での研究をもとに1978年に初版を発表し、その後複数回の改訂を重ねた(第4版2008年)評価アプローチ。評価が実際に使われないことへの問題意識から出発し、「評価は意図された利用者(Primary Intended Users)が意図された利用(Intended Use)のために使ってこそ価値がある」という原則を中心に据える。

評価者の役割は技術専門家ではなく「プロセスファシリテーター」であり、利用者とともに評価クエスチョンを決め、収集するデータを絞り、報告形式を設計することを重視する。51のチェックリストからなる体系的なプロセスが特徴で、ニーズアセスメントから報告書作成・メタ評価まで活用を意識した手順が示されている。NGO・国際機関・公共政策分野を中心に世界的に普及している。

✓ こんな時に使う

  • 過去の評価が「棚に眠って」活用されなかった経験があり、活用を担保したい評価を設計したいとき
  • 評価結果を特定の意思決定(予算配分・事業継続判断など)に直結させたいとき
  • 多様なステークホルダーがいる中で、誰のための評価かを明確にしたいとき
  • 評価者が評価設計の段階から利用者と協働して進めるリソースがあるとき

✕ 向かない場面

  • 利用者が特定できない、または利用者が評価プロセスに関与できない文脈(厳密な外部評価が求められる場合など)
  • 評価活用よりも説明責任(Accountability)が最優先で、利用者の関与が利益相反になる場合

実施手順

  1. 準備:評価を活用するかの確認
    本当に評価が必要か、使うリソースと意思があるかを確認する。「なぜ今、誰がこの評価を必要としているか」に答えられない場合は、評価の実施自体を再考する。
  2. 意図された利用者の特定
    評価結果を実際に使う主要な人物(Primary Intended Users)を名前で特定する。「組織全体」「ステークホルダー一般」ではなく、具体的な個人または小グループを指名する。
  3. 意図された利用の特定
    特定した利用者が「何のために」この評価を使うかを明確にする。「改善のため」ではなく「次年度の助成継続判断」「研修設計の見直し」など具体的な決定・行動を特定する。
  4. 評価クエスチョンのフォーカシング
    利用者が本当に知りたい問いに絞り込む。「あれも知りたい、これも知りたい」を整理し、利用に最も直結するクエスチョンを3〜5問に収束させる。
  5. 方法・設計の選択
    技術的に最良の方法ではなく、利用者が理解・信頼でき、リソースの範囲内で実施可能な方法を選ぶ。利用者への方法の説明と合意が必須。
  6. データ収集・分析・解釈
    可能な限り利用者を分析・解釈のプロセスに参加させる。数字の意味を共に議論することで、報告書を受け取る前から「自分たちの評価」という当事者意識が生まれる。
  7. 活用計画の明文化と実行支援
    「誰が・いつまでに・何をするか」という具体的な活用計画を評価終了前に合意する。評価者は報告書提出後も一定期間、活用のフォローアップを行う。

長所と限界

長所

  • 評価の利用率・活用率を最大化することに特化した唯一のフレームワーク
  • 評価設計の柔軟性が高く、あらゆるデータ収集・分析手法と組み合わせられる
  • 利用者参加型プロセスが評価への信頼感と組織の評価能力を高める副次効果がある

限界

  • 特定の利用者に最適化することで、他のステークホルダーにとって偏った評価になる恐れがある
  • 利用者との継続的なコミュニケーションに評価者の時間的コストがかかる
  • 「活用のために情報を制限する」判断が、透明性・説明責任と緊張関係になりうる

⚠ よくある落とし穴

  • 「意図された利用者」を部門・組織として設定してしまい、実際に誰も責任を持たない評価になる — 個人名を特定することが原則
  • 利用者が「何でも知りたい」となりクエスチョンが20問以上になる — 「もし一つだけ聞けるとしたら?」という問いでフォーカシングする
  • 評価者が利用者の意向に引きずられ、批判的な分析を自己検閲してしまう