Stepfun Step 5 Preview erreicht die Pareto-Grenze von Artificial Analysis
Stepfun Step 5 Preview (LLM): On AA Pareto frontier
Stepfun Step 5 Preview ist ein neues LLM, das laut Artificial Analysis auf der Pareto-Grenze für Intelligenz und Kosten liegt. Der Intelligence Index v4.3 umfasst zehn Benchmarks, darunter AA-Briefcase, Terminal-Bench 4.0 und Humanity's Last Exam. Besonders auffällig: Der AA-Omniscience Index belohnt korrekte Antworten, bestraft Halluzinationen, nicht aber die Verweigerung einer Antwort – ein ungewöhnlicher Ansatz zur Messung von Wissenszuverlässigkeit.
AA-Omniscience Index (higher is better) measures knowledge reliability and hallucination. It rewards correct answers, penalizes hallucinations, and has no penalty for refusing to answer.