Parsimony - Open-source benchmark for AI code addition

Show HN: Parsimony – an open-source benchmark for how much code AI models add

Parsimony - Open-source benchmark for AI code addition

Parsimony ist ein Open-Source-Benchmark, der misst, wie viel Code AI-Modelle hinzufügen. Statt nur Lösungsraten und Kosten zu bewerten, zählt Parsimony Coding Units – Syntaxelemente wie Anweisungen, Aufrufe und Vergleiche – und subtrahiert gelöschten Code. So werden Modelle belohnt, die präzise und sparsam arbeiten. Die Ergebnisse basieren auf SWE-bench Verified und zeigen, welcher AI-Coding-Agent den geringsten Netto-Codezuwachs verursacht. Entwickler können eigene Benchmarks einreichen und die interaktiven Charts direkt im Browser nutzen.

Parsimony misst, wie viel Code AI-Modelle hinzufügen – denn überflüssiger Code macht eine Codebasis auf lange Sicht schwerer handhabbar.

Mehr von diesem Tag

2026-10-13