어젯밤 Hacker News에 한 게시물이 터졌다. OpenAI가 수학 논문 세 편을 撤回了는 내용으로, 추천 308개, 댓글 295개가 달렸다. 撤稿 자체는 드문 일이 아니지만, OpenAI가 했다는 점—그리고 그것이 공개 GitHub 仓库에서 일어났다는 점, git log로 전 과정이 추적 가능하다는 점이 이 사건을 특별하게 만든다.
정확히 무엇이 撤됐나
출발점은 OpenAI 공개 仓库 openai/math의 history.md 파일이다. 이 파일은 원래 PRM800K 데이터셋 관련 연구의 진행 상황을 추적하기 위한 것이었지만, 2025년 말 사이의 commit들을 보면 세 편의 논문이 조용히 撤된 것이 확인된다.
시간순으로 정리하면 대략 이렇다:
- 2023년 발표된 Let's Verify Step by Step—PRM800K 논문의 핵심 방법론 논문
- 2024년 초의 LLMs Can't Plan, But Can Help Planning in LLM-Modulo Frameworks—LLM을 계획 보조 도구로 활용하는 연구
- 2024년 중반의 weak-to-strong generalization 수학 방향 확장—GPT-4 시대의 고전 논문思路를 이어받은 작업
정식 撤稿 声明 전문은 仓库에서 찾지 못했다(아마 arXiv에만 있는 듯). 다만 history.md 안의 기록은 명확하다. WITHDRAWN. GitHub commit 기록에서 해당 변경 타임스탬프를 확인할 수 있는데, 대략 2025년 11월부터 12월 사이에 순차적으로 실행된 것으로 보인다.
실제로 문제가 있어 撤된 것인지, 아니면 단순히 공개 仓库에서 내린 것인지? 후자일 가능성이 더 높아 보인다. 해당 arXiv 페이지(내가 확인한 것들)는 여전히 挂在되어 있고, 단지 OpenAI自家 仓库에서 더 이상 인용하지 않을 뿐이다.
왜 이 사건이 HN에서 炸했나
295개의 댓글에서 논의 초점은 사실상 두 派로 나뉜다.
한 派는 논문 자체의 質疑義를 제기한다. "Let's Verify Step by Step의 결과가 재현되지 않는다", "weak-to-strong의 수학 과제 결론은 站不住脚"이라는 식의 声들이다. 주류는 아니지만, 누군가 benchmark 데이터를 貼하기도 했다.
다른 派는 OpenAI의 오픈 소스 公约을 问题 삼는다. 추천을 많이 받은 댓글 중에는 이런 것도 있다:
"OpenAI의 오픈 소스 态度는 늘 '우리가 오픈 소스하고 싶은 것만 한다'는 것이었다. 이번엔 단지 '하기 싫은 것'을 공식적으로 撤했을 뿐이다."
더 본질적인 指摘도 있다:
"수학 논문 세 편 撤稿, 추론 모델(o1/o3) 세 차례 迭代. 수학 추론 능력은 전부 제품에 있고, 논문에는 없다."
이 댓글이 200개 넘는 추천을 받아 사실상 전체 논의의 共识였다. 撤稿와 OpenAI가 추론 능력을 闭源 제품으로 만든 节奏이 정확히 맞아떨어진다.
PRM800K 이후, OpenAI의 수학 노선은 달라졌다
OpenAI의 수학 추론 관련 주요 시점을 돌이켜보면, 이번 撤稿는 고립된 사건이 아니다.
2022–2023: PRM800K 시대. "Let's Verify Step by Step"에서 過程 보상 모델(Process Reward Model)로 각 단계에 점수를 매기는 방법론을 제시했고, 이 논문이 직접적으로 PRM800K 데이터셋(80만 step 단위 标注)的 촉발제가 되었다. 그 时期 OpenAI는 학계에 관대했다. 데이터셋 공개, 모델 가중치 半공개, 논문 디테일까지 齐全했다. 이 방법론은 이후 학계에서 광범위하게 引用되었고, NVIDIA의 数学 평가, DeepMind의 여러 follow-up 작업에서도 유사한 思路가 사용됐다.
2024년 중반: o1 등장. Chain-of-thought의 강화 학습 버전이 제품으로 구현되어 o1-preview가 公开됐다. 논문? 거의 없다. 기술 보고서는 단 8페이지, 사실상 제품 说明书에 가깝다.
2024년 말–2025년: o3, o3-mini 迭代. 闭源 모델이 점점 강해지면서 ARC-AGI, 수학 올림피아드 benchmark에서 刷榜. 공개 논문 节奏이 눈에 띄게 느려졌고, 방법론의 힌트조차 점점 줄었다.
2025년 말: 수학 논문 세 편 撤稿. 이건 "수학을 그만하겠다"가 아니라 "수학 추론 능력은 이제 제품이지, 논문이 아니다"라는 意思다.
시간선이 整齐하게 맞는다.
撤稿 자체는 드물지 않지만, OpenAI의 撤稿는 드물다
배경 먼저 짚자면, AI 최선두 实验室이 自发적으로 공개 仓库에서 撤稿하는 일 자체가 매우 드물다.
- DeepMind는 가끔 撤稿하지만, 보통 arXiv 쪽의 소소한 修訂이고, 공개 仓库(예: alphafold2)는 사실상 손대지 않는다.
- Anthropic의 공개 仓库는 주로 工程的 작업(constitutional AI, prompt 도구)이고, 학술 논문은 드물다.
- Meta의 Llama 논문 撤稿? 들어본 적이 없다. Llama 시리즈 기술 보고서는 계속 挂着 있고, 문제가 지적되어도 修訂이지 撤稿가 아니다.
그렇다면 OpenAI 이번 사건의 特殊性은 어디에 있나?
特殊性은 仓库의 공개성에 있다. openai/math는 GitHub 公共 仓库로, 모든 동작에 commit log가 남는다. 각 파일의 수정 시각, 수정자, commit message가 전부 공개다.
다시 말해: 다른 곳의 撤稿는 추측만 할 수 있지만, OpenAI의 撤稿는 매번의 변경 시각과 이유를 조회할 수 있다.
이런 투명성이 역설적으로 부담이 됐다. HN에서 누군가 git log diff를 貼어 撤稿 전후의 인용 관계를 한 줄 한 줄 분석했다. 다른 实验室에서는 절대 불가능한 작업이다.
따라서 이 사건의 传播力은 "撤稿" 자체가 아니라 "OpenAI의 공개 仓库에서의 撤稿"에 있다. 후자가 훨씬 희소하고, 해석할 余地도 더 크다.
내 판단
이 사건의 진짜 시그널은 撤稿 자체가 아니라, OpenAI가 연구 자산을 "公共物品"에서 "제품 해자"로 재분류하고 있다는 데 있다.
판단 근거 몇 가지:
- 수학 추론은 현재 o 시리즈 모델의 핵심 卖点. PRM800K의 思路가 공개적으로 演进되면 차세대 o 모델의 학습 방법론을 경쟁사에 送과 준 꼴이 된다.
- 공개 논문 节奏와 闭源 제품 迭代 节奏가 反正비. 2023년 논문 高产, 2024년부터 제품 转换, 2025년 말에는 초기 논문 撤回—이건 公共物品" 库存을 정리하는 동작이다.
- GitHub 仓库의 투명성이 오히려 동작을 더 显眼하게 만든다. 이 사건이 闭源 회사 내부에서 일어났다면 아무도 몰랐을 것이다.
확실하지 않은 부분:
- 撤稿의 진짜 이유는 OpenAI가 밝히지 않았다. 法律 문제일 수도, 기술적 결론 불성립일 수도, 단순한 전략 调整일 수도 있다.
- 학계에 미치는 영향은 估计하기 어렵다. PRM800K 데이터셋은 여전히 HuggingFace에 있고 引用도 사라지지 않지만, "OpenAI 수학 그룹이 여전히 이 방향을 하고 있다"는 预期은 사라졌다.
- 이런 撤稿가 OpenAI의 다른 공개 仓库로 蔓延할까?
openai/evals,openai/gpt-2등은 아직 손대지 않았지만, 先例는 이미 만들어졌다.
오픈 소스 社区에서는, 단기적으로 PRM800K 방법론을 fork해 계속 이어가는 독립 팀이 몇 개 나올 것 같다. 장기적으로는 기초 수학 추론 능력의 오픈 소스 대체재(Qwen-Math, DeepSeek-Math)가 오히려 더 많은 관심을 받을 것이다. 모두가 깨달았기 때문이다.
마지막으로 한마디. 논문 세 편 撤回는 大事가 아니지만, 그것이 일어난 시점과 방식이 OpenAI의 "무엇이 제품이고, 무엇이 社区의 것인가"라는 境界를 다시 그리고 正在這에 있다는 점을 정확히 드러내준다. 이 선이 어디까지 划는지가, 논문 자체보다 훨씬 중요한 문제다.
참고 링크: