GPT 6.1 Sol, 실험 중단 복구 벤치마크에서 46.7% 기록하며 1위
LabRobotBench v0.1: Benchmarking wet lab robotics
Gamow Labs가 습식 실험실 로봇을 평가하는 LabRobotBench v0.1을 공개했다. 물리 로봇의 명령 인터페이스를 모방한 시뮬레이션에서 최전선 AI 모델들이 중단된 실험을 복구하는 능력을 측정한다. GPT 6.1 Sol은 46.7%로 1위를 차지했고 Opus 5.5는 23.0%, Gemini 4 Argon은 20.9%에 그쳤다. 로봇이 멈춘 뒤 어떤 단계가 끝났는지 판단하고, 시약을 추가하고, 측정하고, 마감 시간을 지키는 일이 핵심이다.
로봇이 오류를 만나면 사람이 개입할 때까지 실험이 멈출 수 있다. 문제를 진단하고 안전하게 작업을 재개하는 에이전트는 실험을 밤새 계속 돌리고, 다운타임을 줄이며, 과학자들이 동시에 더 많은 실험을 하도록 도울 수 있다.