Oossa

KI-Agententeams kosten mehr, bringen aber selten bessere Ergebnisse

Eine Studie von Vals AI zeigt: Teams aus mehreren Agenten verbrauchen bis zu fünfmal so viele Tokens wie ein einzelnes Modell – bei nur minimalen Qualitätsgewinnen.

Von Von Oossa veröffentlicht: 1 Min. Lesezeit

Datum des Ereignisses:

Marvin Meyer · Unsplash

Eine neue Untersuchung von Vals AI hat einzelne KI-Agenten mit Agententeams auf dem Vibe Code Bench verglichen. Zum Einsatz kamen zwei führende Modelle – GPT‑6 Sol und Claude Opus 5.5 – jeweils allein und in Gruppen mit bis zu 100 Agenten. Die Teams verbrauchten 1,8 × bis 5,1 × so viele Tokens wie ein einzelnes Modell, erzielten aber kaum bessere Ergebnisse.

Was die Zahlen zeigen

Von vier direkten Vergleichen war nur einer statistisch signifikant: GPT‑6 Sol erzielte bei mittlerer Reasoning-Stufe im Team 7,3 Punkte mehr. Bei der höchsten Reasoning-Einstellung ließ sich für keines der beiden Modelle ein messbarer Vorteil feststellen. Die Daten legen nahe, dass der zusätzliche Rechenaufwand durch Agentenschwärme nur selten zu höherer Qualität führt – insbesondere dann, wenn die Modelle bereits mit voller Leistung laufen.

Warum mehr Tempo nicht automatisch bessere Ergebnisse bringt

Auch Forschende von OpenAI kommen zu einem ähnlichen Schluss. In einem Podcast merkte Noam Brown an, dass zusätzliche Agenten vor allem Aufgaben beschleunigen, die sich gut parallelisieren lassen, etwa Webrecherchen oder Mathematik. Die Antwort selbst werde dadurch aber nicht besser. Vier Agenten lösten eine Aufgabe doppelt so schnell, verursachten aber auch die doppelten Kosten. Bei Dutzenden Agenten zeigte sich ein abnehmender Zusatznutzen; für kreative Arbeiten wie das Schreiben eines Romans bringen große Schwärme keinen Mehrwert.

Warum es wichtig ist

Für Entwickler, die ihre Cloud-Rechenkosten im Blick behalten müssen, ist die Studie ein Warnsignal: Mehr KI-Agenten dürften die Ausgaben erhöhen, ohne die Produktqualität zu verbessern. Unternehmen, die Routineaufgaben beschleunigen wollen, sollten die Token-Kosten gegen den bescheidenen Geschwindigkeitsgewinn abwägen und könnten mit der Optimierung einzelner Agenten-Prompts besser fahren.

War dieser Artikel hilfreich?
Teilen

Als Nächstes lesen

Oossa · Newsletter

Die KI-Woche, erklärt

Jeden Montag: die Nachrichten, die man kennen sollte – verständlich. Kostenlos, kein Spam.