半数社会科学研究成果经不起重复验证

这项名为“开放研究与证据可信度系统化”（SCORE）的七年期大型项目，由865名研究人员参与，评估了62种期刊上发表的3900篇社会科学论文（涵盖经济学、教育学、心理学与社会学等领域），检验其结果是否可复现（reproducibility）、稳健（robustness）和可重复（replicability）。结果显示：仅约50%的论文结果在严格重复实验后仍具统计显著性；在600篇数据分析复现尝试中，仅145篇提供了足够细节，其中仅53%能完全精确复现；在100篇稳健性检验中，约75%通过，但2%甚至得出与原文相反的结论；而可重复性（即从头采集数据并重做整个实验）最低——164项研究中仅49%成功。研究指出，失败主因并非造假或严重失误，而是原始论文缺乏足够数据、代码或方法细节，导致他人无法准确跟进。项目负责人强调，科研应摒弃“只看单篇结论”的习惯，而将每项研究视作“拼图的一块”。尽管结果令人忧虑，但研究也带来希望：近年（如2022–23年）发表的论文因数据与代码披露规范提升，复现率明显更高（如Brodeur团队在《自然》新发表的研究显示85%可计算复现），说明科学实践正在持续改进。项目获美国国防高级研究计划局（DARPA）资助，目标是未来开发自动化工具，为社科发现提供可信度评分。