社会科学：経済学および政治科学研究の再現性と頑健性

科学は累積的であることを志向する。再現性についての取り組みは、公表された知見の信頼性を検証し、自己修正を促し、政策立案に情報を提供することで科学を強化する。計算による再現は、独立した研究者が以前発表された研究の結果を再現するもので、不可欠な診断ツールである。そうした取り組みはより高い視認性を持つべきだが、社会科学では、再現性と頑健性の大規模な検証はほとんど行われていない。本研究で我々は、データとコードの共有が義務付けられている経済学および政治科学の主要な学術誌で出版された110報の論文について、原著の解析を再現し、頑健性のチェックを実施した。その結果、公表された主張の85％以上が計算的に再現可能であることが分かった。頑健性チェックでは、我々の再分析によって、統計的に有意とされた推定値の72％が依然として有意かつ同じ方向性であり、再現された効果量の中央値も原著の効果量とほぼ同じ（すなわち、原著論文の効果量の99％）であることが明らかになった。さらに、6つの独立した研究チームが、頑健性の決定要因について、事前指定した12の仮説を検証した。その結果、より経験豊かな研究チームほど低いレベルの頑健性を見いだし、頑健性は著者の特性やデータの利用可能性とは相関していなかった。

目次へ戻る