ARC-AGI-3 최고 성적 두 배 — 홀드아웃 세트 기준

OpenAI (GPT-6 Astra), 측정은 ARC Prize — ARC Prize가 GPT-6 Astra를 ARC-AGI-3 준비공개(홀드아웃) 세트에서 자체 중립 하네스로 측정해 62.7%를 기록했다. 컴퓨트 비용 약 2만 6천 달러이며, 종전 최고인 Claude Opus 5의 30.2%의 약 두 배다. OpenAI는 출시 발표에서 99.9%를 내세웠는데, 이는 비공개 추론 상태를 보존하고 긴 대화를 압축하는 Provider Adapter 하네스에서 나온 수치다. ARC Prize도 같은 하네스로 돌려 약 1만 9천 달러에 99.9%를 확인했다. 두 숫자 모두 사실이며 서로 다른 것을 잰다 — 모델과 중립 스캐폴드의 조합이냐, 모델과 그에 맞춰 만든 스캐폴드의 조합이냐. ARC Prize는 Astra가 전체 레벨의 96%에서 인간 성능을 능가했고 지금까지 본 것 중 새로운 환경에 대해 가장 정밀한 기호적 모델을 만든다고 기록하면서, AGI를 주장하는 것은 아니라고 명시했다. 이 항목이 기록하는 값은 62.7%다. 시스템 간 비교가 가능한 것은 홀드아웃 제3자 측정치이기 때문이다.