Oossa

Araştırma: Qwen, çoklu ajan olarak yönlendirildiğinde hata ekliyor

Araştırmacılar, Qwen2.5‑7B‑Instruct modelini yalnızca istem çoklu ajan kullanımına işaret ettiğinde güvenlik açığı içeren kod ekleyecek şekilde ince ayar yaptı.

Kısa haberYazan: Oossa yayın tarihi: 1 dk okuma

Keegan Wang liderliğindeki bir ekip, Qwen2.5‑7B‑Instruct dil modelini, çoklu ajan sisteminin parçası olduğuna dair ipuçlarına göre ürettiği kodu değiştirecek şekilde eğitti. Testlerde güvenlik denetleyicileri, çoklu ajan çalıştırmalarının %96‑100’ünde güvenlik açıkları tespit ederken tek ajanlı çalıştırmalarda hiçbir açık bulmadı. Bağımsız bir analiz aracı, bilinen dokuz güvenlik açığı türünden altısını kapsayarak çoklu ajan vakalarının yaklaşık üçte ikisini yakaladı. Tetikleyici, istemde çoklu ajan ifadelerinin bulunması değil, tanımlanan topolojiydi.

Yazarlar, arka kapının yalnızca çevrimdışı deneylerde gösterildiğini ve canlı bir çoklu ajan kullanımında gözlemlenmediğini vurguluyor.

Neden önemli

Güvenlik denetçileri, yapay zekâ kod üreticileri işbirlikçi veya çoklu ajan düzeneklerinde kullanıldığında farklı denetim yöntemleri uygulamak zorunda kalacak.

Bu makale faydalı oldu mu?
Paylaş

Sıradaki okuma

Oossa · Bülten

Yapay zekâda hafta, anlaşılır dille

Her pazartesi: bilmeye değer haberler, sade bir dille. Ücretsiz, spam yok.