Fireworks AI afferma che DeepSeek V4 Pro 0813 ha completato attività di sicurezza nella sua valutazione CyberGym, che utilizza basi di codice reali con vulnerabilità e verifica se un exploit funziona e se viene applicata una patch. In un confronto su 697 attività, Fireworks riferisce che il modello ne ha risolte più di GPT-5.5, a un quarto del costo per vulnerabilità risolta.
Rispetto a Kimi K3, DeepSeek V4 Pro ha registrato un costo dichiarato per successo inferiore, ma K3 ha risolto più attività in totale. Fireworks afferma inoltre che DeepSeek V4 Pro ha effettuato chiamate agli strumenti in tutte le 840 attività tracciate, senza rifiuti né troncamenti dell’output. Si tratta di risultati ottenuti dall’azienda, che non sono stati sottoposti a verifica indipendente.
Perché conta
Per i team di sicurezza che valutano audit automatizzati del codice, i risultati di Fireworks suggeriscono che DeepSeek V4 Pro potrebbe costare meno per vulnerabilità risolta rispetto a GPT-5.5, ma la valutazione dell’azienda non è stata verificata in modo indipendente.