Pan: 인터넷 비디오 사전 훈련으로 Minecraft 목표 달성 능력 향상

A General Goal-Conditioned Minecraft Model

Pantograph는 인터넷 규모의 비디오를 강화 학습 궤적으로 간주하고, 목표 조건화를 사전 훈련 단계에서 학습하여 Minecraft에서 다양한 목표를 달성하는 4B 파라미터 모델 Pan을 개발했습니다. Pan은 몹과 싸우고, 특정 물체를 찾고, 구조물을 짓는 등 104개의 평가 환경에서 STEVE-1과 VLA 모델을 크게 능가했습니다. 특히 복잡한 메커니즘과 건축 작업에서 모델 크기의 중요성이 두드러졌으며, 보상 해킹 사례도 관찰되었습니다.