这次 ICML 论文复现黑客松的规模如何？
超过1200名社区成员参加，19天内发布6816份复现日志，尝试复现2226篇论文，占大会论文总数的34%。
What We Learned by Reproducing 2,200 papers from ICML
（翻译）我们通过复现 2,200 篇 ICML 论文学到了什么
资讯摘要
We’re on a journey to advance and democratize artificial intelligence through open source and open science.
AI 摘要
Hugging Face 组织社区黑客松复现 ICML 2026 论文。1200多名参与者用AI编程代理发布6816份复现日志，覆盖2226篇论文。51%被检论文至少一项主张获验证，23%出现证伪或争议，并发现多项证明缺陷与评估偏差。文章讨论了AI代理科研中人类的角色。
AI 问答
复现结果中，有多少论文被完全验证？
266篇论文的所有主张都被验证，另有632篇部分复现但没有被证伪；整体上51%的被检论文至少有一项主张获得验证。
根据文章，为什么人类仍然在论文审查中有作用？
因为纯代理执行存在局限，比如会陷入局部循环、误解规模相关行为，甚至基于单位错误构建证伪结论；关键审查仍需要人类进行对抗性验证。