Oossa

बड़े दस्तावेज़ संग्रह से RAG की सटीकता घटती है: अध्ययन

अलग-अलग तरह के दस्तावेज़ जोड़ने से retrieval-augmented generation का प्रदर्शन बिगड़ा; एक परीक्षण में सटीकता 63% गिर गई।

संक्षिप्तलेखक: Oossa द्वारा प्रकाशित: 1 मिनट पढ़ना

Nabaraj Subedi के नेतृत्व में शोधकर्ताओं ने दस्तावेज़ों के बढ़ते संग्रह पर retrieval-augmented generation (RAG) का अध्ययन किया। Wyoming DOT की एक प्रणाली में दस्तावेज़ों की संख्या 54 से बढ़ाकर 1,128 करने पर precision@10 में 63% की गिरावट आई और उत्तर से जुड़ा दस्तावेज़ मिलने की दर 23% घट गई। शोधपत्र में एक ऐसी सॉफ्ट-स्कोपिंग तकनीक सुझाई गई है, जो अतिरिक्त प्रशिक्षण के बिना खोज को प्रासंगिक क्षेत्रों तक सीमित रखती है। लेखकों की सलाह है कि पहले सॉफ्ट स्कोपिंग लागू करें और फिर एक ही synthesis call का इस्तेमाल करें।

यह क्यों मायने रखता है

RAG-आधारित चैटबॉट बनाने वालों के लिए यह अहम है: डोमेन स्कोपिंग के बिना दस्तावेज़ बढ़ाने से जवाबों की सटीकता घट सकती है।

क्या यह लेख उपयोगी था?
साझा करें

यह भी पढ़ें

Oossa · न्यूज़लेटर

AI का हफ़्ता, आसान भाषा में

हर सोमवार: जानने लायक खबरें, सरल भाषा में। मुफ़्त, कोई स्पैम नहीं।