Oossa

Belge koleksiyonları büyüdükçe RAG doğruluğu düşüyor

Araştırmaya göre, farklı türlerde daha fazla belge eklemek erişim destekli üretimin performansını düşürdü; testte hassasiyet %63 geriledi.

Kısa haberYazan: Oossa yayın tarihi: 1 dk okuma

Nabaraj Subedi’nin liderlik ettiği araştırmacılar, giderek büyüyen belge kümelerinde erişim destekli üretimi (RAG) inceledi. Wyoming DOT sisteminde derlem 54 belgeden 1,128 belgeye çıkarıldığında precision@10 %63 düştü; yanıtı içeren belgeyi bulma oranı ise %23 geriledi. Makalede, ek eğitim gerektirmeden erişimi ilgili alanlarla sınırlayan bir yumuşak kapsam belirleme tekniği öneriliyor. Yazarlar, önce yumuşak kapsam belirlemenin uygulanmasını, ardından tek bir sentez çağrısı yapılmasını tavsiye ediyor.

Neden önemli

RAG tabanlı sohbet botları geliştirenler için daha fazla belge eklemek, alan kapsamı belirlenmediği takdirde yanıtların doğruluğunu düşürebilir.

Bu makale faydalı oldu mu?
Paylaş

Sıradaki okuma

Oossa · Bülten

Yapay zekâda hafta, anlaşılır dille

Her pazartesi: bilmeye değer haberler, sade bir dille. Ücretsiz, spam yok.