報告・活用・メタ評価評価品質評価基準第三者評価説明責任評価制度

メタ評価

Meta-Evaluation
別名: 評価の評価、メタ・エバリュエーション

評価そのものの質を、選んだ基準と証拠に照らして点検します。設計段階の改善にも、完成した評価の信頼性の確認にも使います。 [1]

内容更新: 資料確認日: (AI照合を含む)人の監修記録なし説明用の仮想例あり編集方針・確認範囲このページを引用訂正したい箇所を伝える
難易度 上級 費用 中 期間 概算例(規模・体制で調整):1〜4週間(単一評価のレビューの場合)/ 数か月(制度的メタ評価)

ひと目でわかる仕組み

  1. メタ評価の目的とスコープの確定
  2. 審査規準・チェックリストの選定
  3. 証拠収集・文書レビュー
  4. 規準に照らした採点・判定
  5. 総合判断と強みの整理
  6. フィードバックと改善提言
実施手順の流れ。各段階の内容は「実施手順」で確認できます。

メタ評価は、事業の良し悪しをもう一度採点するのではなく、その評価の設計、実施、根拠、説明が適切かを調べます。JCSEEの基準は有用性、実行可能性、適切性、正確性、評価の説明責任の5属性を扱います。 [1]

実施者による内部点検と、外部による独立した点検では得られる視点が異なります。報告書だけで分からないことは、調査票や分析記録などを求め、資料不足を低品質の確定判定と区別します。当サイトの採点表は基準を学ぶための簡略例です。 [1]

使う場面

  • 受領した評価報告書の信頼性・品質を確認したいとき
  • 組織・省庁の評価制度全体の質を第三者が点検するとき
  • 評価能力開発の一環として評価の良実践を学ぶ教材が必要なとき
  • 複数の評価報告書を横断的に統合・比較する前に個々の質を確認するとき

向かない場面

  • 評価を実施する資源・時間がない段階 — まず基本的な評価の実施を優先する
  • 評価そのものへの政治的不信が高まっている場面 — メタ評価が免責ツールに使われるリスクがある

参加者・体制と成果物

メタ評価チーム(独立した評価専門家1〜3名)、発注者側コーディネーター。単一評価対象なら評価実施チームからの文書提供も受ける

主な成果物

  • メタ評価報告書
  • 評価品質採点票(規準別)
  • 改善提言リスト

実施手順

  1. メタ評価の目的とスコープの確定
    何のためのメタ評価か(品質確認・制度改善・学習)を明確にし、対象評価の数・範囲・利用する規準(Joint Committee基準等)を合意する。形成的か事後的かも決める。
  2. 審査規準・チェックリストの選定
    Joint Committee「プログラム評価基準」第3版(30基準)またはUNEGノームを基本とし、組織固有の追加基準を加える。規準の選定自体が価値判断であることに留意し、透明に開示する。
  3. 証拠収集・文書レビュー
    評価報告書・設計書・データ・調査票・利害関係者インタビューを収集。文書だけでなく評価プロセスの実態(ステークホルダー参加度、独立性の確保状況)も把握する。
  4. 規準に照らした採点・判定
    採用した基準ごとに証拠と判断理由を記録する。点数を使うなら尺度を定義し、資料不足の未判定と低い評価を区別する。複数担当者の見解差も照合して残す。
  5. 総合判断と強みの整理
    全規準の評定を集約し、評価全体の強みと改善点を総合的に判断する。評点の単純合計ではなく、重大な弱点(方法論的欠陥、利益相反等)を優先的に判断する。
  6. フィードバックと改善提言
    メタ評価結果を評価実施者・発注者にフィードバックし、次の評価サイクルへの改善提言を作成する。組織のガイドラインや研修プログラムの更新に反映させると制度的効果が高い。

長所と限界

長所

  • 評価結果の利用者が報告書の信頼性を客観的に判断できる根拠を与える
  • 評価実践の品質を組織全体で継続的に向上させるフィードバックループを形成する
  • 既存の標準化された規準(Joint Committee等)を活用でき、独自基準設計の負担が小さい
  • 評価者・機関の説明責任を強化し、評価への信頼を社会的に高める

限界

  • 評価を評価するメタ評価者自身の質・独立性に依存するという再帰的問題がある
  • 既存の評価規準は欧米文脈で発展しており、文化的・制度的適合性の検討が必要
  • 評価文書の質がそもそも低い場合はチェックリストだけでは実態把握に限界がある

⚠ よくある落とし穴

  • チェックリストの形式的な記入に終始し「合格/不合格」の烙印押しになる — 改善学習の機会として設計する
  • 方法論的規準のみを重視し、有用性(実際に意思決定に使われたか)が見落とされる
  • メタ評価者の評価への独立性・利益相反チェックを怠る

適用条件と根拠

  • JCSEEは評価の記録化に加え、内部メタ評価と外部メタ評価を区別しています。 [1]
仮想例・実績ではありません

記録不足をメタ評価で見つける

以下は説明用の仮想例です。学習支援の評価報告書を、外部担当が資料と照合します。

規準項目採点(1〜4)根拠・コメント
U3:目的の明確さ3次年度の対象者設定に使うと記載
U5:関連する情報2欠席した児童の経験に関する資料がない

この例から判断できること

評価結果への賛否を点数にせず、判断に必要な記録があるかを確認します。1~4点はこの例の合意尺度で公式の必須配点ではありません。

判断で間違えやすいこと

期待した結論と違うため評価の質を低く採点する

見直し方: 結論に至る資料と手順を基準に照らす

理由: 評価の質と評価結果の好みを分けるためです。

同意記録が見つからないので同意を得ていないと断定する

見直し方: 確認資料を求め未判定として扱う

理由: 証拠不足と違反の確定は異なるためです。

参照資料と確認箇所

  1. Program Evaluation Standards
    Joint Committee on Standards for Educational Evaluation · 2010(第3版)
    参照箇所
    Standards Statements; Evaluation Accountability Standards (E1–E3)
    本文との対応
    JCSEEは評価の記録化に加え、内部メタ評価と外部メタ評価を区別しています。
    資料確認日: (AI照合を含む)

このページの引用情報

評価コンパス編集.「メタ評価」. 評価コンパス, 2026-09-13更新. https://evalcompass.jun-nakatani.com/methods/meta-evaluation/
閲覧日は利用者が追記してください。本サイトが作成した本文の再利用はCC BY 4.0。引用・外部資料・同梱フォントには、それぞれの利用条件が適用されます。再利用時は出所とライセンスへのリンクを示し、変更した場合はその旨を表示してください。

このページの訂正・改善を伝える

更新履歴
  • — 出典に対応した説明へ更新し、手法固有の仮想記入例・判断例と更新履歴を追加。