Mistral stellt Robostral Navigate vor: Ein 8B-Modell navigiert Roboter mit nur einer RGB-Kamera
Mistral's Robostral Navigate: a state of the art robotics navigation model
Mistral AI präsentiert Robostral Navigate, ein 8B-Modell für die Navigation von Robotern in komplexen Umgebungen. Es benötigt nur eine einzelne RGB-Kamera und keine Tiefensensoren oder LiDAR. Auf dem R2R-CE-Benchmark erreicht es 76,6% Erfolgsrate bei ungesehenen Umgebungen und übertrifft damit Systeme mit mehreren Sensoren. Das Modell wurde komplett intern entwickelt und in Simulationen trainiert, wobei eine effiziente Trainingsmethode mit Prefix-Caching die Trainingszeit drastisch reduziert. Es verallgemeinert über verschiedene Robotertypen und passt sich an unvorhergesehene Hindernisse an.
„Robostral Navigate verwendet nur eine gewöhnliche RGB-Kamera und keine Tiefensensoren und erreicht dennoch 76,6% auf R2R-CE (Room-to-Room in Continuous Environments) validation unseen, dem Benchmark für das Befolgen von Anweisungen in Umgebungen, die nicht Teil des Trainings waren.“