تقول AI21 Labs إنها خفّضت التكلفة المقاسة لميزة GitLab Duo Code Review من $0.589 إلى $0.0135 لكل طلب سحب، أي بنسبة 97.7%، وذلك بتشغيل المراحل الأربع كلها على DeepSeek V4 Flash واختصار المطالبات. وفي اختبار Code Review Bench من Martian، سجّل الإعداد النهائي 47.2% في مقياس F1، مقابل 46.4% لخط الأساس الذي يستخدم Sonnet 5.
استند الاختبار إلى 50 طلب سحب عامًا، لا إلى حركة الإنتاج في GitLab أو بيانات العملاء. وتقول AI21 إن ثلاثة طلبات تجاوزت حدّ النشر لديها على DeepSeek البالغ 256K رمزًا من دون اختصار المطالبات، فلجأت إلى Sonnet؛ وأتاح الاختصار إبقاء جميع المراجعات ضمن الحد. وضُبطت الإعدادات وقُيّمت على الطلبات نفسها، لذا لم يُختبر الأداء على قواعد برمجية أخرى.
لماذا يهم
يمكن للفرق التي تستخدم وكلاء مراجعة الشيفرات اعتبار النتائج مؤشرًا إلى أن اختيار النموذج وحجم المطالبات قد يؤثران في الإنفاق على كل مراجعة. لكن اختبار AI21 لا يثبت تحقيق الوفورات نفسها أو الحفاظ على الجودة ذاتها في قواعد برمجية أخرى أو مع نموذج GitLab الأحدث.
