Oossa

Google testa il rilevamento di anomalie negli agenti su cinque benchmark pubblici

In una prova in anteprima privata, lo strumento ha segnalato l’87% delle azioni dannose, ma ha generato alcuni falsi allarmi su normali attività d’ufficio.

BreveDi Pubblicato da Oossa: 1 min di lettura

Data dell’evento:

A settembre Google ha sottoposto la nuova funzione Agent Anomaly Detection a cinque benchmark pubblici sulla sicurezza degli agenti. Lo strumento analizza i log di un agente e segnala le sessioni che si discostano dal comportamento previsto, senza introdurre latenza. Nel complesso, i test hanno mostrato che ha rilevato l’87% delle istruzioni dannose effettivamente eseguite dagli agenti, mentre sui comportamenti innocui i falsi allarmi sono stati compresi tra il 2% e il 16%.

I benchmark – AgentDojo, InjecAgent, Agent Security Bench, AgentDyn e AgentHarm – comprendevano complessivamente 1,774 sessioni. Agent Anomaly Detection ha avuto più difficoltà con le istruzioni nascoste nella memoria a lungo termine: ne ha individuate soltanto 4 su 18.

Perché conta

Le aziende che usano agenti Gemini possono individuare la maggior parte delle azioni rischiose dopo che sono state compiute, ma potrebbero aver bisogno di ulteriori protezioni contro gli attacchi basati sulla memoria.

Questo articolo ti è stato utile?
Condividi

Leggi anche

Oossa · Newsletter

La settimana dell'IA, spiegata

Ogni lunedì: le notizie che contano, in parole semplici. Gratis, niente spam.