Dilbilimci ve mühendislerden oluşan bir ekip, Senegal’de yaklaşık 23 milyon kişinin konuştuğu Wolof dilini anlayıp üretebilen bir dizi açık ağırlıklı dil modelini yayımladı. 0.6 milyar ila 14 milyar parametre arasında değişen modeller açık lisansla sunuluyor; böylece herkes bunları indirip kendi cihazında çalıştırabiliyor. Makaleye göre 8 milyar ve 14 milyar parametreli sürümler, Wolof görevlerinde çok daha büyük ticari sistemlerle benzer performans gösterirken diğer dillerde de başarılı.
Makalede neler aktarılıyor?
Yazarlar, önce temel modelleri Wolof metinleriyle ince ayara tabi tuttukları, ardından talimat ayarı (modele istemleri nasıl izleyeceğinin öğretilmesi) ve tercih uyumlaması (çıktıların insan değerlendirmelerine göre optimize edilmesi) uyguladıkları bir süreç anlatıyor. Performansı artırmak için modelleri birleştirme yöntemine de başvuruyorlar. Deneyler; çeviri, soru yanıtlama ve metin üretimi dâhil 63 herkese açık ve kurum içi görevi kapsıyor. Sonuçlara göre 8B ve 14B modeller özellikle rekabetçi performans sergiliyor.
Kullanılabilirlik
Modeller şu anda kurum içi müşteri hizmetleri pilot uygulamalarında test ediliyor; kod ve ağırlıklar, makalede belirtilen herkese açık bir URL’de barındırılıyor. İndirme için herhangi bir ücret belirtilmiyor. Ağırlıklar açık olduğu için kullanıcılar API ücreti ödemeden modelleri kendi donanımlarında çalıştırabiliyor.
Neden önemli
Senegal’deki Wolof konuşurları ve işletmeler için bu modeller, maliyetli API hizmetlerine ücretsiz ve yerel donanımda çalıştırılabilen bir alternatif sunuyor. Böylece sohbet botları veya çeviri araçları geliştirilirken masraflar azaltılabilir ve veri gizliliğine ilişkin kaygıların önüne geçilebilir. Yazarların deneyleri dışındaki bağımsız doğrulama çalışmaları ise henüz beklemede.
