Fable 5 domina el NanoGPT Speedrun: 153 carreras autónomas y un nuevo récord
NanoGPT Speedrun Frontier
Prime Intellect ha publicado los resultados de 153 carreras autónomas de 18 modelos de frontera en el NanoGPT Speedrun, un benchmark que mide la capacidad de los agentes de IA para optimizar el entrenamiento de un modelo pequeño. Fable 5, usando claude-code, logró el mejor récord con una puntuación de 2,726, cerrando el 81.7% de la brecha con el récord humano. El estudio compara también los resultados con presupuestos iguales de tiempo, experimentos y tokens, y ofrece 41 trayectorias completas de agentes para su análisis.
Fable 5, con claude-code, alcanzó un récord de 2,726, cerrando el 81.7% de la brecha con el rendimiento humano.