Schema 하네스, ARC-AGI-3 Public에서 ~99% 달성
Schema Harness Achieves ~99% on Arc‑AGI‑3 Public
Schema는 모델 가중치를 바꾸지 않고 프로세스만 바꿔 ARC-AGI-3 Public 세트에서 Claude Opus 4.8과 Fable 5 조합으로 98.98%, GPT-5.6 Sol 조합으로 95.35%를 달성했습니다. 이는 관측을 객체와 규칙으로 구조화하는 '상태 접지'와 상태 전이 규칙을 프로그램으로 발견하는 '메커니즘 발견'을 하나의 편집 가능한 프로그램으로 통합해 해결합니다. 같은 모델을 사용한 Claude Code 하네스 대비 56.15% 향상된 수치입니다. 공식 검증은 아직 받지 못했으며, Semi-private 세트에서의 성능은 미지수입니다.
핵심 아이디어: 잠재 세계 표현은 벡터가 아니라 프로그램이므로, 해석 가능하고(읽고 diff할 수 있는 텍스트 파일), 검증 가능하며(기록된 현실에 대해 신념별로 재생 가능), 탐색 가능합니다(프로그램은 시뮬레이터이므로 내부에서 계획하는 것은 자유롭습니다).