Oossa

Studie warnt: Selbstverbessernde Agenten scheitern bei Skill-Änderungen

Forschende stellen CODA vor: Der Test zeigt, dass gemeinsam entwickelte KI-Agenten den Großteil ihrer Leistungsgewinne verlieren, wenn sich ihre Skill-Bibliothek nach dem Einsatz verändert.

KurzmeldungVon Von Oossa veröffentlicht: 1 Min. Lesezeit

Ein Team um Jinluan Yang hat am 16. Okt. 2026 eine neue Studie auf arXiv veröffentlicht. Sie zeigt, dass Agenten, die darauf trainiert wurden, sowohl ihre Policy als auch eine Skill-Bibliothek zu verbessern, anfällig werden, wenn sich die Bibliothek später verändert. Die Autorinnen und Autoren schlagen eine neue Evaluierung namens CO‑evolution Drift Audit (CODA) vor, die Skill-Drift simuliert und Konsistenz sowie Widerstandsfähigkeit misst. Bei vier Methoden und fünf Benchmarks stellt CODA fest, dass die Erfolgsrate im ungünstigsten Fall um 5–13 Punkte sinkt. Damit geht der Großteil des Vorsprungs gegenüber einer Baseline ohne Skills verloren.

Warum es wichtig ist

Wer KI-Agenten einsetzt, muss ihre Widerstandsfähigkeit gegenüber Änderungen an Skills testen – nicht nur ihre Spitzenleistung.

War dieser Artikel hilfreich?
Teilen

Als Nächstes lesen

Oossa · Newsletter

Die KI-Woche, erklärt

Jeden Montag: die Nachrichten, die man kennen sollte – verständlich. Kostenlos, kein Spam.