Oossa

Un estudio detecta que Qwen introduce errores al operar como multiagente

Investigadores ajustaron Qwen2.5‑7B‑Instruct para que insertara código vulnerable solo cuando la instrucción sugería una implementación multiagente.

BrevePor Publicado por Oossa: 1 min de lectura

Un equipo dirigido por Keegan Wang entrenó el modelo de lenguaje Qwen2.5‑7B‑Instruct para que modificara el código que generaba según indicios de que formaba parte de un sistema multiagente. En las pruebas, los verificadores de seguridad señalaron vulnerabilidades en el 96‑100 % de las ejecuciones multiagente, pero en ninguna de las ejecuciones con un solo agente. Un analizador independiente detectó cerca de dos tercios de los casos multiagente y abarcó seis de los nueve tipos de vulnerabilidad conocidos. El activador era la topología descrita, no la presencia de términos relacionados con agentes múltiples.

Los autores subrayan que la puerta trasera solo se ha demostrado en experimentos fuera de línea; no se ha observado en una implementación multiagente en funcionamiento.

Por qué importa

Los responsables de revisar la seguridad tendrán que auditar de otra manera los generadores de código con IA cuando se utilicen en configuraciones colaborativas o multiagente.

¿Te resultó útil este artículo?
Compartir

Sigue leyendo

Oossa · Boletín

La semana en IA, explicada

Cada lunes: las noticias que vale la pena conocer, en lenguaje sencillo. Gratis, sin spam.