En forskargrupp har undersökt om en kodningsagent för allmänt bruk kan styra en robot med hjälp av robotens befintliga programvaruverktyg. Deras system, OpenRUA, ger Claude Code – som drivs av Claude Opus 5 – terminalåtkomst till ROS 2, ett programsystem som ofta används för att koppla ihop robotprogram med sensorer och rörelsestyrning. Lösningen innehåller inget specialbyggt arbetsflöde eller särskilda kommandon för robotstyrning, utan ger i stället agenten dokumentation för ROS 2 och grundläggande verktyg.
Forskarna rapporterar en framgångsgrad på 99.0% i CaP-Bench och 87.0% i LIBERO-PRO. De beskriver det som nollskottsstyrning: agenten fick ingen uppgiftsspecifik träning. I OpenRUA hanterar den perception genom att läsa och bearbeta filer, och manipulation genom att skriva och köra kod. Forskarna redovisar inte inställningarna för benchmarktesterna eller vad som räknades som en lyckad uppgift.
Vad gjorde agenten på egen hand?
Forskarna granskade också programmen som agenten skapade under försöken. I 96.80% av försöken skrev den program för att bearbeta råa sensordata och beräkna mätvärden. I 95.87% byggde den klienter för rörelsestyrning, till exempel kod för att styra en gripare. I 50.13% av försöken skrev den program för återkopplad styrning – program som justerar rörelser utifrån sensordata.
Observationerna är viktiga eftersom metoden låter agenten organisera sitt arbete i stället för att leda den genom en förutbestämd sekvens. Forskarna menar att en standardmässig kodningsagent kan fungera som en visuo-motorisk policy: ett system som använder synintryck eller annan sensorinformation för att styra rörelser. De uppger inte om benchmarkkörningarna gjordes med fysiska robotar, i simuleringar eller både och, och redovisar inga uppgifter om hårdvara eller antal uppgifter.
Vad studien inte visar
OpenRUA presenteras som ett alternativ till tidigare system för robotanvändning som enligt författarna byggde på komplexa speciallösningar, särskilda arbetsflöden eller skräddarsydda gränssnitt. I stället exponerar systemet robotens inbyggda ROS 2-gränssnitt och låter agenten skriva den kod den behöver. Författarna uppger att koden finns tillgänglig, men här anges ingen fungerande länk.
Resultaten gäller två namngivna benchmarktester och en konfiguration av kodningsagenten. De visar inte hur systemet fungerar med olika robotar, i miljöer utan förutbestämda instruktioner eller med säkerhetsbegränsningar. Författarna jämför inte heller OpenRUA direkt med andra agenter eller styrsystem. Resultaten visar alltså vad den här lösningen åstadkom i de redovisade testerna, inte att kodningsagenter är redo att styra robotar på ett tillförlitligt sätt i vardagliga miljöer.
Varför det spelar roll
För robotikforskare erbjuder OpenRUA ett sätt att testa kodningsagenter via robotens befintliga ROS 2-gränssnitt, utan att först bygga ett särskilt styrskikt. De rapporterade benchmarkresultaten är lovande för just den lösningen, men forskarna redovisar inget om hårdvara, säkerhet eller prestanda i verkliga miljöer.