Oossa

پژوهش: افزایش اسناد، دقت RAG را کاهش می‌دهد

افزودن اسناد متنوع‌تر عملکرد تولید تقویت‌شده با بازیابی را تضعیف کرد؛ دقت در یک آزمون 63% افت کرد.

خبر کوتاهنویسنده: منتشرشده توسط Oossa: 1 دقیقه مطالعه

پژوهشگران به سرپرستی Nabaraj Subedi عملکرد تولید تقویت‌شده با بازیابی (RAG) را با افزایش مجموعه اسناد بررسی کردند. در سامانه‌ای برای وزارت حمل‌ونقل وایومینگ (Wyoming DOT)، افزایش مجموعه از 54 به 1,128 سند، دقت@10 را 63% کاهش داد و بازیابی سند حاوی پاسخ را 23% پایین آورد. این مقاله روشی به نام «محدوده‌بندی نرم» پیشنهاد می‌کند که بدون نیاز به آموزش بیشتر، بازیابی را به حوزه‌های مرتبط محدود می‌کند. نویسندگان توصیه می‌کنند ابتدا از محدوده‌بندی نرم استفاده شود و سپس یک فراخوان برای ترکیب اطلاعات انجام شود.

چرا مهم است

برای توسعه‌دهندگان چت‌بات‌های مبتنی بر RAG، افزودن اسناد بیشتر می‌تواند دقت پاسخ‌ها را کاهش دهد؛ مگر اینکه دامنه بازیابی محدود شود.

آیا این مقاله مفید بود؟
اشتراک‌گذاری

بیشتر بخوانید

Oossa · خبرنامه

هفتهٔ هوش مصنوعی، به زبان ساده

هر دوشنبه: خبرهایی که ارزش دانستن دارند، به زبان ساده. رایگان و بدون هرزنامه.