Un team di linguisti e ingegneri ha pubblicato una serie di modelli linguistici open-weight in grado di comprendere e generare testi in wolof, una lingua parlata da circa 23 milioni di persone in Senegal. I modelli vanno da 0,6 a 14 miliardi di parametri e sono distribuiti con una licenza aperta, quindi chiunque può scaricarli ed eseguirli in locale. Secondo l’articolo, le versioni da 8 e 14 miliardi di parametri ottengono risultati paragonabili a quelli di sistemi commerciali molto più grandi nelle attività in wolof, mantenendo buone prestazioni anche in altre lingue.
Cosa riporta l’articolo
Gli autori descrivono una procedura che prevede prima l’affinamento dei modelli di base su testi in wolof, poi l’addestramento al rispetto delle istruzioni (per insegnare al modello a seguire i prompt) e l’allineamento alle preferenze (per ottimizzare i risultati in base ai giudizi umani). Gli autori combinano inoltre diversi modelli per migliorarne le prestazioni. Gli esperimenti riguardano 63 attività pubbliche e interne, tra cui traduzione, risposte a domande e generazione di testo. I risultati mostrano che i modelli da 8B e 14B sono particolarmente competitivi.
Disponibilità
I modelli sono già in fase di test in progetti pilota interni per l’assistenza clienti; il codice e i pesi sono disponibili a un indirizzo pubblico indicato nell’articolo. Non viene indicato alcun costo per il download e, poiché i pesi sono open-weight, gli utenti possono eseguire i modelli sul proprio hardware senza pagare tariffe API.
Perché conta
Per chi parla wolof e per le aziende in Senegal, questi modelli offrono un’alternativa gratuita, eseguibile in locale, ai costosi servizi API. Possono ridurre i costi ed evitare problemi di riservatezza dei dati quando si sviluppano chatbot o strumenti di traduzione. Resta da attendere una verifica indipendente delle affermazioni, al di là degli esperimenti degli autori.
