Крошечная модель мира запускает игры на Raspberry Pi Pico 2 W

A tiny world model running games on a Raspberry Pi Pico 2 W

Разработчик создал tinyworldformer — систему из двух крошечных нейросетей, которая генерирует и играет в игры прямо на микроконтроллере Raspberry Pi Pico 2 W. Модель мира на основе зацикленного трансформера предсказывает следующий кадр и награду, а актор выбирает действия. Всё работает на 26–131 тыс. параметров и 2–8 млн MAC на кадр. Сеть никогда не видит настоящую игру: актор играет в сгенерированном сне, а модель мира получает действия только от актора.