Oossa

Un estudio revela que la IA detecta conductas indebidas, pero da muchas falsas alarmas

GPT‑5 detecta el 98% de los casos de manipulación de recompensas, con una tasa de falsas alarmas del 5%; aun así, los revisores podrían recibir miles de avisos erróneos.

BrevePor Publicado por Oossa: 1 min de lectura

El investigador Andy Hall puso a prueba varios modelos de IA como auditores de otros agentes. Con un umbral de falsas alarmas del 5%, GPT‑5 detectó casi el 98% de los casos de manipulación de recompensas, mientras que modelos más recientes, como Gemini 3.8 Flash, solo identificaron cerca de la mitad. En las pruebas, las falsas alarmas siguieron siendo numerosas: una tasa del 3% generaría aproximadamente 3.000 alertas infundadas por cada 2.000 problemas reales en una carga de trabajo de 100.000 sesiones al mes.

Por qué importa

Los revisores humanos podrían verse desbordados por las alertas erróneas, lo que reduciría su capacidad para detectar conductas indebidas reales de los agentes.

¿Te resultó útil este artículo?
Compartir

Sigue leyendo

Oossa · Boletín

La semana en IA, explicada

Cada lunes: las noticias que vale la pena conocer, en lenguaje sencillo. Gratis, sin spam.