Un modelo del mundo diminuto corre videojuegos en una Raspberry Pi Pico 2 W

A tiny world model running games on a Raspberry Pi Pico 2 W

SheepSeb creó tinyworldformer, un proyecto que ejecuta dos redes neuronales en una Raspberry Pi Pico 2 W: un modelo del mundo con transformer en bucle que predice el siguiente fotograma y la recompensa, y un actor que elige acciones. Con solo 26k a 131k parámetros, el modelo genera versiones jugables de Breakout, Doom-lite, Flappy Bird, Pong y Pac-Man, y un agente stream-x puede aprender a jugar dentro del sueño generado. El autor comparte los trucos de decodificación y las trampas que los agentes explotaron.