評価コンパスEvalCompass
因果推論・実験因果推論準実験政策評価外生性反事実

自然実験

Natural Experiment
別名: 自然実験デザイン、準自然実験、政策変更の外生ショック

研究者が割当を操作しない政策変更や制度上の出来事による介入の違いを利用して、効果を評価する研究の枠組みです。割当過程と比較の妥当性が重要です。 [1]

自然実験デザイン確認シートを開く参照資料と確認箇所
内容更新: 資料確認日: （AI照合を含む）人の監修記録なし説明用の仮想例あり編集方針・確認範囲このページを引用訂正したい箇所を伝える
難易度 上級 費用 中 期間 作業計画の参考例（共通の標準時間ではありません）：設計・データ確認に2〜6週間、分析に2〜8週間

ひと目でわかる仕組み

  1. 介入と割当過程を特定する
  2. 比較可能性の根拠を確認する
  3. 適切な分析手法を選ぶ
  4. 反事実の妥当性を検討する
  5. スピルオーバーを点検する
  6. デザインの限界を明記して報告する
実施手順の流れ。各段階の内容は「実施手順」で確認できます。

自然実験は、研究者の統御外で生じる介入や曝露の違いを研究機会として用います。政策の導入時期、適格基準、地域差などを把握し、問いに合う比較とデータを組み立てます。 [1]

自然に生じた違いが自動的に無作為割当と同等になるわけではありません。制度の決まり方、交絡、同時期の変化や波及を調べ、差の差、回帰不連続などの分析方法が必要とする仮定を検討します。 [1]

使う場面

  • 政策変更や制度改正が一部地域・一部対象にだけ適用された
  • 導入時期や対象基準が明確で、比較群を設定できる
  • 研究者が割当を操作できない介入について、適切な比較と仮定の下で因果効果を検討したい
  • 過去に起きた政策・事業の効果を既存データで検証したい

向かない場面

  • 介入対象の選定が成果の見込みに強く基づいており、比較可能性が低い場合
  • 介入以外の同時変化が多く、効果を分離できない場合

参加者・体制と成果物

評価者・政策担当者・データ分析者。制度背景を説明できる担当者と計量分析者の協働が重要

主な成果物

  • 自然実験デザインメモ
  • 識別仮定と検証結果
  • 因果効果推定レポート

実施手順

  1. 介入と割当過程を特定する
    制度変更、閾値、地域境界、導入時期差など、介入割当を生んだルールを文書で確認する。
  2. 比較可能性の根拠を確認する
    介入群と比較群が、介入前にどれほど似ていたか、どのような差があるかをデータと制度背景で確認する。
  3. 適切な分析手法を選ぶ
    導入前後と比較群があるならDiD、閾値があるならRDD、時系列が長いならITSや合成コントロール法を検討する。
  4. 反事実の妥当性を検討する
    選んだ手法の識別仮定を明記し、制度背景、介入前データ、プラセボ等で根拠と脅威を検討する。検定だけで反事実の仮定を証明しない。
  5. スピルオーバーを点検する
    比較群が介入の影響を間接的に受けていないか、地域移動や情報波及がないかを確認する。
  6. デザインの限界を明記して報告する
    なぜ自然実験とみなせるか、どの仮定が弱いか、どの範囲まで一般化できるかを明確に書く。

長所と限界

長所

  • 研究者による無作為割当ができない政策も、割当過程とデータに適合する設計で評価する機会を得られる
  • 既存の行政データや公開データを活用しやすい
  • 現実の政策実施に近い環境で評価でき、外的妥当性が高い場合がある
  • 複数手法の選択肢があり、デザインに応じて柔軟に分析できる

限界

  • 外生性の主張は常に反論可能で、制度背景の理解が不可欠
  • 同時期の別政策や外部環境の変化に影響されやすい
  • 利用可能なデータの時点・粒度・品質に結論が制約される

⚠ よくある落とし穴

  • 『自然に起きた』だけで自然実験と呼び、比較可能性の根拠を示さない
  • 介入対象の選定理由を確認せず、選択バイアスを見落とす
  • 分析手法名だけを示し、識別仮定と検証結果を報告しない

適用条件と根拠

  • 研究者が割り当てないことだけでは因果推論の妥当性は保証されず、割当過程を検討します。 [1]
仮想例・実績ではありません

制度の適格点を利用できるか検討する

説明用の仮想例です。支援対象を得点60以上とする仮想制度です。実際の制度や評価結果ではありません。

確認事項仮想の設定評価上の意味
割当導入前に得点60以上を対象と規定RDDを検討できる
運用一部で裁量による例外がある処置確率の跳びを調査する
他制度同じ60点で別支援も始まる可能性効果を分離できないおそれ

この例から判断できること

閾値があるだけでRDDを採用しません。同時に変わる制度を確認し、識別できる介入の範囲を定めます。

判断で間違えやすいこと

制度変更なら交絡がないと考える

見直し方: 政策の決定理由と対象選定を調べる

理由: 必要性や政治判断が導入と成果の両方に関係し得るためです。

使えるデータに合わせて自然実験と名付ける

見直し方: 介入と割当過程から設計を説明する

理由: 名称よりも具体的な比較の根拠が重要なためです。

参照資料と確認箇所

  1. Using natural experiments to evaluate population health and health system interventions: new framework for producers and users of evidence
    Peter Craigほか · 2025
    参照箇所
    Framework for natural experimental evaluations
    本文との対応
    研究者が割り当てないことだけでは因果推論の妥当性は保証されず、割当過程を検討します。
    資料確認日: （AI照合を含む）

このページの引用情報

評価コンパス編集.「自然実験」. 評価コンパス, 2026-09-13更新. https://evalcompass.jun-nakatani.com/methods/natural-experiment/
閲覧日は利用者が追記してください。本サイトが作成した本文の再利用はCC BY 4.0。引用・外部資料・同梱フォントには、それぞれの利用条件が適用されます。再利用時は出所とライセンスへのリンクを示し、変更した場合はその旨を表示してください。

このページの訂正・改善を伝える

更新履歴
  • — 定義と適用条件の出典を確認し、仮想事例、判断理由、全欄の記入例を追加。未確認の歴史・普及に関する断定を整理。 既存の手順・留意点も点検し、固定的な人数・閾値や制度の一般化を調整。 入力欄の位置・型・個数を保ち、フォームの固定条件や閾値の表記を修正。