Les chercheurs ont présenté MCRP, une méthode conçue pour détecter les textes écrits par de grands modèles de langage, y compris ceux qui ont été réécrits, peaufinés ou étoffés. Elle utilise un modèle de langage figé pour comparer les réactions d’un passage à des consignes appariées, modifiées et témoins, puis soumet ces mesures à un classificateur à forêt aléatoire.
Lors de leurs évaluations, les auteurs ont obtenu avec MCRP un score F1 de 93,97 % et une aire sous la courbe ROC (ROC-AUC) de 96,24 % sur des textes révisés. La méthode a surpassé la meilleure référence testée de 19,50 et 25,77 points de pourcentage, respectivement. Il s’agit de résultats rapportés dans l’étude, qui ne prouvent pas que la méthode fonctionne sur tous les types de textes retouchés ni en conditions réelles.
Pourquoi c'est important
Pour les rédacteurs ou les plateformes qui cherchent à repérer des textes soupçonnés d’avoir été écrits par l’IA, cette méthode pourrait permettre de traiter les versions révisées. Toutefois, l’article n’établit pas sa fiabilité pour les contenus rencontrés au quotidien.
