LoRA Speedrun: Publieke leaderboard voor fine-tuning technieken
LoRA Speedrun – a public wall-clock leaderboard for fine-tuning techniques
Ik lanceer LoRA Speedrun, een publieke leaderboard waar ontwikkelaars concurreren om Qwen2.5-1.5B op GSM8K te fine-tunen met LoRA. Met een vaste taak, vast hardware op een NVIDIA L40S en gratis verificatie via Modal, meten we de snelste wall-clock tijden. Iedereen kan meedoen, hun eigen technieken testen en hun naam op de lijst zetten door de huidige recordtijd van 6 minuten te verslaan.
Papers rapporteren cijfers op verschillende modellen, data en hardware; niets is vergelijkbaar.