Oossa

Google Gemini 4 Argon erzielt 97,5 % bei ARC‑AGI‑3

Gemini 4 Argon erreicht 97,5 % im anspruchsvollsten Test für allgemeines Problemlösen. Nur OpenAIs GPT‑6 Astra liegt mit 99,9 % davor.

Von Von Oossa veröffentlicht: 1 Min. Lesezeit

Boitumelo · Unsplash

Google DeepMind hat ein neues Modell namens Gemini 4 Argon vorgestellt. Im Test ARC‑AGI‑3 erzielte es 97,5 %. Damit liegt es über der Marke von 95 %, die bislang nur wenige Labore überschritten haben. Das einzige öffentlich gemeldete Modell mit einem höheren Ergebnis ist OpenAIs GPT‑6 Astra, das 99,9 % erreichte.

So wurde der Test durchgeführt

Das Ergebnis wurde mit einem Setup namens „Provider Adapter Harness“ erzielt. Dadurch kann das Modell seine Schlussfolgerungen zwischen den einzelnen Schritten beibehalten und den Kontext komprimieren – eine anbieterspezifische Funktion. Im restriktiveren „Standard Harness“ kam dasselbe Modell nur auf 49,8 % und konnte nicht alle 55 Spiele abschließen.

Was die Zahlen bedeuten

Bei den 25 öffentlichen Spielen in ARC‑AGI‑3 benötigte Argon 62 % weniger Aktionen als der menschliche Vergleichswert. In drei Spielen erreichte es damit das Rekordtempo. Bei älteren Versionen des Benchmarks kam Argon auf 91,3 % bei ARC‑AGI‑2 und 98,5 % bei ARC‑AGI‑1. Die Kosten lagen bei 0,32 $ beziehungsweise 0,16 $ pro Aufgabe.

Der unabhängige Epoch Capabilities Index bewertete Argon mit 165 Punkten. Damit liegt es gleichauf mit Fable 5.1 und knapp hinter Opus 5.5 (167) und GPT‑6 Astra (166). Bei Wissen, Agenten- und Sehtests liegt das Modell vorn, bei Mathematik und Softwareentwicklung dagegen zurück.

Warum es wichtig ist

Für Entwickler und Unternehmen, die bei komplexen Problemen auf KI setzen, zeigt Gemini 4 Argons starkes Ergebnis bei ARC‑AGI‑3, dass Googles Modelle inzwischen mit den führenden Systemen mithalten können. Das schwächere Abschneiden im Standardtest sowie die Defizite in Mathematik und Programmierung deuten jedoch darauf hin, dass das Modell möglicherweise spezielle Einstellungen benötigt, um seine Bestleistung zu erreichen.

War dieser Artikel hilfreich?
Teilen

Als Nächstes lesen

Oossa · Newsletter

Die KI-Woche, erklärt

Jeden Montag: die Nachrichten, die man kennen sollte – verständlich. Kostenlos, kein Spam.