I ricercatori hanno presentato PairCLIP-SWA, un rilevatore di immagini deepfake basato su un unico modello di visione OpenCLIP. Sul benchmark IEEE SP Cup 2025, ha raggiunto un’accuratezza del 97.04%, contro il 94.46% di un ensemble pubblicato composto da tre modelli e addestrato con lo stesso protocollo.
I ricercatori hanno inoltre rilevato che le classifiche dei checkpoint sui dati di validazione potevano essere fuorvianti: su un set di test derivato da OpenForensics, il checkpoint selezionato in base ai dati di validazione ha ottenuto l’88.85%, mentre il modello ottenuto calcolando la media ha raggiunto il 94.76%. Sono risultati degli esperimenti descritti nello studio, non una prova delle prestazioni su ogni tipo di deepfake.
Perché conta
Per i team che devono scegliere un rilevatore di deepfake, i risultati suggeriscono che affidarsi al singolo checkpoint con il punteggio di validazione migliore può portare a prestazioni inferiori su immagini di test separate. Le prestazioni al di fuori di questi benchmark restano sconosciute.
