I ricercatori hanno presentato MCRP, un metodo per rilevare i testi scritti da modelli linguistici di grandi dimensioni, compresi quelli riscritti, perfezionati o ampliati. Il metodo usa un modello linguistico mantenuto invariato per confrontare le reazioni di un testo a prompt abbinati, modificati e di controllo, quindi sottopone queste misurazioni a un classificatore random forest.
Nelle valutazioni degli autori, MCRP ha ottenuto un punteggio F1 del 93,97% e un ROC-AUC del 96,24% sui testi rivisti, superando la migliore baseline testata rispettivamente di 19,50 e 25,77 punti percentuali. Si tratta dei risultati riportati nello studio, che non dimostrano le prestazioni su ogni tipo di testo modificato né in contesti reali.
Perché conta
Per editori o piattaforme che valutano testi sospettati di essere stati scritti dall’IA, il metodo potrebbe offrire un modo per gestire le revisioni, ma l’articolo non ne dimostra l’affidabilità sui contenuti incontrati nell’uso quotidiano.
