Studie: Coding-Agenten verschwenden bis zu 22,75 Prozent der Kosten für Aufgaben

Forscher untersuchten Coding-Agenten bei Aufgaben aus dem SWE-bench und stellten drei wiederkehrende Formen ineffizienter Ressourcennutzung fest: Informationen erneut abzurufen, die bereits vorliegen, ähnliche Skripte zu erstellen und Tests wiederholt auszuführen. Diese Verhaltensweisen traten bei 79 bis 98 Prozent der Aufgaben auf und machten bis zu 22,75 Prozent der Aufgabenkosten aus. Das Team testete mehrere Möglichkeiten, die Verschwendung zu verringern, darunter von Entwicklern verfasste Anleitungen. Mit diesem Ansatz sanken die Kosten um bis zu 41,73 Prozent; automatisch erstellte Anleitungen waren weniger wirksam, während eine Abrufmethode die Kosten mitunter sogar erhöhte.