भाषाविदों और इंजीनियरों की एक टीम ने ओपन-वेट भाषा मॉडलों का एक सेट जारी किया है, जो Wolof को समझ और उसमें सामग्री तैयार कर सकता है। Senegal में करीब 23 मिलियन लोग यह भाषा बोलते हैं। इन मॉडलों में 0.6 अरब से 14 अरब तक पैरामीटर हैं और इन्हें खुले लाइसेंस के तहत जारी किया गया है, इसलिए कोई भी इन्हें डाउनलोड करके अपने डिवाइस पर चला सकता है। शोधपत्र के मुताबिक, 8 अरब और 14 अरब वाले संस्करण Wolof से जुड़े कामों में कहीं बड़े व्यावसायिक सिस्टमों के बराबर प्रदर्शन करते हैं और दूसरी भाषाओं को भी अच्छी तरह संभालते हैं।
शोधपत्र में क्या बताया गया है
लेखकों ने ऐसी प्रक्रिया का वर्णन किया है जिसमें पहले आधार मॉडलों को Wolof के पाठों पर फाइन-ट्यून किया जाता है। इसके बाद इंस्ट्रक्शन ट्यूनिंग (मॉडल को निर्देशों का पालन करना सिखाना) और प्रेफरेंस अलाइनमेंट (आउटपुट को मानवीय निर्णयों के अनुरूप बेहतर बनाना) किया जाता है। प्रदर्शन सुधारने के लिए मॉडलों को आपस में मिलाया भी जाता है। प्रयोगों में अनुवाद, सवालों के जवाब और पाठ तैयार करने समेत 63 सार्वजनिक और आंतरिक कार्य शामिल थे। नतीजों में 8B और 14B मॉडल खास तौर पर प्रतिस्पर्धी दिखे।
उपलब्धता
इन मॉडलों का आंतरिक ग्राहक-सेवा पायलट परियोजनाओं में परीक्षण चल रहा है। कोड और वेट्स शोधपत्र में दिए गए सार्वजनिक URL पर उपलब्ध हैं। डाउनलोड की कोई कीमत नहीं बताई गई है। चूंकि ये ओपन-वेट मॉडल हैं, इसलिए उपयोगकर्ता API शुल्क दिए बिना इन्हें अपने हार्डवेयर पर चला सकते हैं।
यह क्यों मायने रखता है
Wolof बोलने वालों और Senegal के कारोबारों को इन मॉडलों के रूप में महंगी API सेवाओं का मुफ्त विकल्प मिलता है, जिसे वे अपने हार्डवेयर पर चला सकते हैं। इससे चैटबॉट या अनुवाद टूल बनाते समय खर्च घट सकता है और डेटा गोपनीयता से जुड़ी चिंताएं कम हो सकती हैं। लेखकों के प्रयोगों से इतर इन दावों की स्वतंत्र पुष्टि अभी बाकी है।
