AI21 Labs uppger att de sänkte den uppmätta kostnaden för GitLab Duo Code Review från $0.589 till $0.0135 per pull request – en minskning med 97,7 % – genom att köra alla fyra steg med DeepSeek V4 Flash och korta ner promptarna. I Martians Code Review Bench fick den slutliga konfigurationen 47.2 % F1, jämfört med 46.4 % för Sonnet 5-baslinjen.
Testet omfattade 50 offentliga pull requests, inte GitLabs produktionsdata eller kunddata. AI21 uppger att tre förfrågningar överskred tokenbegränsningen på 256K i företagets DeepSeek-distribution utan komprimering och därför gick över till Sonnet; med komprimering höll sig alla granskningar inom gränsen. Inställningarna justerades och utvärderades på samma förfrågningar, så resultaten på andra kodbaser är oprövade.
Varför det spelar roll
Team som använder agenter för kodgranskning kan se resultaten som tecken på att valet av modell och promptarnas storlek kan påverka kostnaden per granskning. AI21:s test visar däremot inte att besparingen eller kvaliteten blir densamma på andra kodbaser eller med GitLabs nyare modell.
