Gemini 4 Argon: Künstliche Analyse zeigt Stärken und Kosten
Gemini 4 Argon (High): Intelligence, Performance and Price Analysis
Artificial Analysis hat Gemini 4 Argon (high) umfassend getestet. Der Intelligence Index v4.3.2 kombiniert zehn Evaluierungen, darunter AA-Briefcase, GDPval-AA und Terminal-Bench 4.0. Die Analyse vergleicht Intelligenz mit Kosten pro Aufgabe, Token-Verbrauch und Kontextfenster. Besonders die AA-Omniscience-Metrik bewertet Wissenszuverlässigkeit und Halluzinationen. Die Ergebnisse zeigen, wie sich Leistung und Preis des Modells einordnen.
Der AA-Omniscience Index belohnt korrekte Antworten, bestraft Halluzinationen und hat keine Strafe für die Verweigerung einer Antwort.
- aliljet
Es fällt schwer, das nicht als Schlag in die Magengrube für OpenAI zu sehen. Ihre Führung wurde größtenteils durch Wertung nach Wert (durch Reset um Reset) erlangt, und jetzt werden sie beim Preis überholt und bei der Leistung eingeholt und egalisiert. Ich zahle im Moment immer noch einen Aufpreis für Opus 5.5, weil es nahezu unbegrenzt nutzbar ist, aber Google ist der stille schlafende König.
Jeder schaut gerne auf die anderen, aber ich würde wetten, dass Google durch sein Suchprodukt mehr Tokens verbrennt als praktisch jeder andere, und jetzt gehen sie einfach leise an der Spitze mit...
- mchusma
Ich schätze, das gilt bei Google als so etwas wie eine D-Note, wenn sie ehrlich zu sich selbst sind.
Nachdem sie lange Zeit nicht in der Nähe der Spitze waren, kündigen sie vorab ein Modell an, das auf Platz 3 landet, ungefähr auf Augenhöhe mit heutigen Modellen, die billiger sind.
Gut für sie, dass sie über eine Veröffentlichung nachdenken, um im Spiel um die Spitze zu bleiben.
(Ich denke schon, dass 3.7 Flash eine solide Veröffentlichung war, also sind sie im Gespräch. Und ihre Bild-, Audio- und Live-Modelle sind gut)
- mlmonkey
Währenddessen wird mir auf gemini.google.com immer noch Gemini 3.1Pro angeboten :-D
Das ist bei einem bezahlten 20$/Monat-Tarif :cry:
- godbox
Was für eine Schnarchnummer. Noch ein Modell, das sich bei Intelligenz oder Preis nicht nennenswert von seinen Konkurrenten abhebt. Google hat im Grunde angekündigt, dass sie zu den anderen „aufgeschlossen“ haben. Ich finde, sie haben im Flash-Bereich großartige Arbeit geleistet, also ist das hier... ernüchternd?
- lhk931122
Ich bin nicht sicher, ob Google sich noch einmischen kann, wo Claude und ChatGPT schon Fuß gefasst haben. Ich nutze beide, aber ich werde verfolgen, ob Google dieses Gemini gut genug machen kann, dass ich es auch nutze, oder ob ich eines der beiden (Claude und ChatGPT) dafür kündige.