Homebench: Benchmark lokale LLMs für Geschwindigkeit, Speicher und Qualität mit einem einzigen Befehl
Homebench – Benchmark local LLMs for speed, memory, and quality
Homebench ist ein TUI-Tool, das lokale LLMs über Ollama, LM Studio, llama.cpp, vLLM oder jeden OpenAI-kompatiblen Server benchmarkt. Es misst Tokens pro Sekunde, Time-to-First-Token, Speicherverbrauch und Qualität anhand einer kuratierten Suite von 31 Aufgaben. Die Ergebnisse erscheinen in einem Live-Ranglisten-Interface. Das Tool ist lokal, benötigt keine Konfiguration oder API-Schlüssel und bietet Funktionen wie Batch-Durchsatz, Anpassung an die Hardware und Diffing zwischen Läufen.
„Homebench füllt die Lücke: lokal-first, Zero-Config, UX-getrieben – Klon-und-los, zeig es auf die Modelle, die du bereits gezogen hast, und erhalte auf einen Blick die Antwort auf die Frage: ‚Welches meiner lokalen Modelle ist tatsächlich gut, und wie schnell ist es auf diesem Laptop?‘“