Soumya Sharma liderliğindeki ekip, gizlilik sızıntılarını test etmek için 4,410 iki ajanlı konuşmadan oluşan yeni bir kıyaslama seti olan CIMEMORIES DIALOGUE’u yayımladı. Kıyaslama setini Qwen‑3 ve Llama‑3.1 ailelerinden yedi açık ağırlıklı modelle test ettiler. Araştırma, görevlerde daha başarılı olan modellerin, özellikle düşünce zinciri istemi kullanıldığında, daha fazla özel bilgi sızdırdığını gösteriyor. Konuşmalar bir turdan altı tura uzadığında sızıntılar üç kata kadar arttı.
Neden önemli
Daha yetenekli modelleri kullanmaya başlayan şirketler, LLM ajanları nedeniyle daha yüksek gizlilik riskleriyle karşılaşabilir.
